This thread has been locked.

If you have a related question, please click the "Ask a related question" button in the top right corner. The newly created question will be automatically linked to this question.

[参考译文] TDA4VM:改善黑暗和明亮区域中的可见性 (12 位传感器、Gstreamer /tiovxisp)

Guru**** 2693225 points

Other Parts Discussed in Thread: AM68, SK-TDA4VM, TDA4VM

请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

https://e2e.ti.com/support/processors-group/processors/f/processors-forum/1596298/tda4vm-improving-visibility-in-dark-bright-regions-12-bit-sensor-gstreamer-tiovxisp

器件型号: TDA4VM
Thread 中讨论的其他器件: AM68

我正在使用采用全高清 12 位传感器的 AM68 (J721S2)。
详细介绍了应用手册《AM6xA ISP 调优指南》:
1 引言
2 调优概述
3 硬件要求
4 软件要求
4.1 Processor SDK Linux
4.2 TI 的参考成像软件
4.3 ISP 调优工具
5 传感器软件开发与集成
5.1 向 SDK 添加传感器驱动程序
5.2 更新 GStreamer 插件以支持传感器
6 调优程序
6.1 验证摄像头捕捉的功能运行
6.2 使用初始 VPAC 配置启用摄像头流式传输
6.3 调整摄像机安装
6.4 捕获原始图像并执行基本调优
6.5 执行微调


我需要同时处理包含非常黑暗和非常明亮区域的场景、并且我希望将这些极端的光谱控制在一个级别、以便在查看或流式传输视频片段时提供尽可能多的细节。


我正在将 Gstreamer 流水线与配合使用  tiovxisp ( https://software-dl.ti.com/jacinto7/esd/processor-sdk-linux-am68a/10_01_00/exports/edgeai-docs/common/edgeai_dataflows.html)

应调整哪些 ISP 控制或调优参数、以便在宽亮度范围内更好地保留细节? 有关曝光策略或相关 DCC 设置的任何指导都会有所帮助。

下面是问题的参考图片。

image.png

  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    尊敬的 Yuriy:

    您使用的是哪种图像传感器?

    我无法在您的帖子中查看或下载“image.png “。
    请重新上传。

  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    BTW、您正在使用哪个 TDA4 EVM 和 SDK?

  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    我正在处理版本:

    SDK:10.01.00.01
    DCC:3.2

    我正在使用: SK-TDA4VM 板

    以下是一个图像示例:

  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    尊敬的 Yuriy:

    我正在使用: SK-TDA4VM 板

    是这样吗?
    您正在使用哪种 RGB-IR 传感器?

    TDA4VM (j721e) 具有不支持 RGBIR 4x4 色彩格式的 VPAC1(版本 1)。
    您无法将 4x4 原始图像直接送入 VPAC1。

    [引用 userid=“597748" url="“ url="~“~/support/sensors-group/sensors/f/sensors-forum/1596298/tda4vm-improving-visibility-in-dark-bright-regions-12-bit-sensor-gstreamer-tiovxisp ]我正在开发采用全高清 12 位传感器的 AM68 (J721S2)。
    [/报价]

    AM68 (j721s2) 具有 VPAC3、这也不支持 RGBIR 4x4。

    详细了解应用手册 AM6xA ISP 调优指南:

    在应用手册中、X5B 传感器通过 VPAC3L 连接到 SK-AM62A、从而支持 RGBIR 4x4。

  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    我使用的是 GRBG12 1920×1080 全高清传感器。
    该电路板是 SK-TDA4VM、因此是的、它基于 J721E。

    我是 不会 处理 RGB-IR 4×4 传感器。
    传感器输出标准 Bayer GRBG12 这是我输入管道的内容。
    因此、VPAC1 上的 RGBIR 限制在我的情况下不适用。

  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    尊敬的 Yuriy:

    传感器输出标准 Bayer GRBG12 这是我输入管道的内容。

    感谢您的确认!

    我对您使用 X5B 传感器的印象不正确。

    我正在使用 GRBG12 1920×1080 全高清传感器。
    [/报价]

    您的传感器是 12 位 HDR 格式还是 12 位线性(即 SDR 或 LDR)?

  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    是的、我的传感器支持:Line Interleaved HDR

  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    尊敬的 Yuriy:

    对于 HDR 传感器、通常需要检查 HDR 扩展/解压缩设置、GLBCE 色调映射和自动曝光。

    有关基本调优、请参阅以下常见问题解答。
    如果您没有使用 HDR 传感器和 ISP 调优的经验、最好使用成像第三方进行 ISP/AE/AWB 调优。

     【常见问题解答】TDA4VM:如何在 TDA4x/AM6xA SDK 的“imaging/tools/"下“下的 python 工具中使用 Auto-Tune? 

  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    我看到、我的传感器不仅在线路交错模式下支持 HDR、而且在中也支持 HDR 逐帧“L 和 S“模式 (长曝光+短曝光)。

    我注意到了这一点 tiovxisp 具有num-exposures以下属性:

    num-exposures : Number of exposures for the incoming raw image. flags: readable, writable, controllable, changeable only in NULL or READY state Integer. Range: 1 - 4 Default: 1

    您能否建议使用此标志或配置的正确方法 DCC XML 是否要启用逐帧多曝光 HDR?

  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    V4L2 驱动器还支持下一个 HDR 拼接模式:

    • 双 DCG
    • 3DOL
    • 逐行线
    • 压缩 16 位
    • 双路 DCG NOWAIT
    • 2DOL
    • L 和 S
  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    尊敬的 Yuriy:

    TDA4x ISP 通常使用配套 HDR 图像、即传感器输出原始图像采用缝合和配套 HDR 格式。
    如果您的传感器支持该模式、则应选择它而不是 DOL、L 和 S、或逐行。

    TDA4-VPAC-VISS 中有一些硬件逻辑用于将 HDR 帧拼接在一起、但我不建议客户使用它、因为硬件实现非常简单、没有运动补偿。