This thread has been locked.

If you have a related question, please click the "Ask a related question" button in the top right corner. The newly created question will be automatically linked to this question.

[参考译文] TDA4VM:Edge AI Cloud -无法获得量化模型的准确性基准

Guru**** 2538950 points


请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

https://e2e.ti.com/support/processors-group/processors/f/processors-forum/1083455/tda4vm-edge-ai-cloud---not-able-to-get-accuracy-benchmark-for-quantized-models

部件号:TDA4VM

您好,

我正在尝试在 TI Edge AI Cloud 上运行不同的量化模型。 我能够获得性能基准测试结果(FPS,延迟,DDR BW,GMAC)。 但无法获得准确性。

对于最初的 v1定量模型,它可以正确预测输出。

对于最初的 v3定量模型,它预测的输出错误。

对于 MobileNet v2 Quant 和其他型号,也是错误分类。

运行时间:TFlite
型号:Edge AI 的 model-zoo 和 Tensorflow 官方托管模型页面上提供的 Quant 型号

有谁能帮助我获得有效模型的准确性评估?

  • 请注意,本文内容源自机器翻译,可能存在语法或其它翻译错误,仅供参考。如需获取准确内容,请参阅链接中的英语原文或自行翻译。

    您好,以更好地理解。 您尝试了 TFL-CL0-0038-IncectionNetV1 (从下拉框中),它工作正常。 该模型对应于: incept_v1_224_quant.tflite

    但是,当您尝试从 TF 模型的页面分类中获取 INceptionNetV3和 MobileNetV2的 QUANT 时,它们的页面分类不正确? 我的理解是否正确?

    如果是,您如何编译这些模型? 您是否使用 自定义模型 TFL.ipynb 作为基线笔记本?...如果是,那么您可以增加 calib_images 的数量(目前我们的笔记本中仅使用4个,如果可能,可能的话可能只使用20个或50个),并且您还可以将“Accurity_level”增加到1个,并将“advancel_options:calibration_迭 代”增加到10个或更多。

    谢谢你,

    保拉