[参考译文] AM5718：视频捕捉和编码

您好、Akash、

请注意、CSI-2驱动程序不适用于 RTOS 处理器 SDK。 这是 Linux 上的用例的暂定数据流-  

1.捕获

CSI-2摄像头将连接到两个单独的 CSI-2 PHY、每个 PHY 使用2条信道。 摄像机将被组装为两个独立的/dev/videoX 节点。 CSI-2驱动程序是在 A15上运行的基于 Linux 的驱动程序。 它将使用 V4L2框架从这两个节点捕获视频、并将数据写入 DDR 存储器。  应用程序将了解哪些视频来自基于设备节点地址的摄像机。 视频捕获驱动程序还会为每个捕获的帧设置时间戳。 执行 V4l2 dequeue()操作时，可以检索时间戳信息。  

2.编码

使用 dmabuf 驱动程序导出/导入功能、可以与 H.264编码器(在 IVA-HD 上运行并由 M4控制)共享捕获的缓冲区、因此不需要额外的缓冲区复制来进行编码。 CSI-2和 IVA-HD 都有自己的 DMA 引擎、用于从 DDR 访问视频缓冲器。  

3.流式传输

压缩视频将由 A15接收。 然后、应用程序需要管理来自捕获的视频/音频的时间戳(假设音频捕获也会有时间戳)并流式传输数据。 他们希望如何进行 AV 同步和流式传输数据由应用决定。 如果您使用 gstreamer 框架、则可能会获得一些可以实现这一点的插件。  

希望以上问题1至问题6答案。 关于#7 -

[引用 user="Akash Patel"]此芯片上是否提供 ARM NEON 引擎？

是的、它在这个芯片上提供。