专栏算法工具链模型部署的几个疑问

模型部署的几个疑问

已解决
chengang2023-02-24
136
5
1.芯片型号：J5
2.天工开物开发包OpenExplorer版本：J5_OE_1.1.40
3.问题定位：板端部署

你好，对于模型部署有几点疑问想咨询下：

1. 若转换时参数input_type_rt设为nv12类型，外接摄像头模型推理时，是不是直接就可以把摄像头数据传输给模型？数据流是怎样的，是从Pyramid到DDR再到BPU吗？

2. 若模型输入大小为（672x672），获取对应size摄像头数据是在Pyramid完成吗？

算法工具链
征程5
评论3
0/1000
  • ArmStrong.David@horizon
    Lv.1

    1. 可以直接把pyramid过来的y地址和uv地址给到tensor中，直接进行推理；数据流： Pyramid处理之后直接到DDR中，BPU可以直接访问

    2. 可以配置VIO配置文件，配置Pyramid的输出大小

    2023-02-24
    2
    1
    • chengang回复ArmStrong.David@horizon:

      感谢，理解了。

      2023-02-24
      0
  • 颜值即正义
    Lv.2

    你好，J5的视频硬件通路处理完的数据，就是 nv12 类型的，我们在系统软件层面也自动完成了 VPS 数据地址到 BPU 数据地址的自动注册，所以 BPU 可以直接访问和处理。

    另外，OE 包 ddk/samples/ai_forward_view_sample 路径提供了一个全流程示例，对应的说明可以参考这篇文章：J5 全流程示例解读
    2023-02-24
    0
    1
    • chengang回复颜值即正义:

      感谢，清楚了，文章我看看。

      2023-02-24
      0
  • 颜值即正义
    Lv.2
    2023-04-24
    0
    0