[参考译文] TDA4VE-Q1：TDA4 VM SDK 10_01_00_04：TIDL 节点在流水线模式下异常。

尊敬的 Xie：

请给我一些时间进行调查。 感谢您的耐心。

此致、

Christina

尊敬的 Xie：

这与 OpenVX 流水线相关吗？  这就是你所说的"管道"吗？

Chris

是、这就是  OpenVX 流水线

图形节点示例：
Input→Scale→pre_proc→TIDL→post-processing→post-processing-2

尊敬的 Xie：

tivxKernelSaveTensor 是否是自定义节点、 这是管道中的后处理、我是否正确？

您能否提供有关流水线配置的更多信息、例如流水线深度、缓冲区深度、图形参数和节点参数。

此致、
Gokul

这就是我的图。

我的节点：input、virtual、image_mating、save_tensor、post_processing。

SDK 节点：pre_proc、TIDL。

1. graph: input→virtual→image matting(output Pipel)→pre_proc→TIDL→save tensor( output Pipel)->post_processing

TIVxSetGraphPipelineDepth(graphObj->graph,1);

#define NUM_DEPTH 1
tivxSetGraphPipelineDepth(graphObj->graph, 1);

tivxSetNodeParameterNumBufByIndex(graphObj->virtualCameraObj.node, 1, 1);
tivxSetNodeParameterNumBufByIndex(graphObj->virtualCameraObj.node, 2, 1);
tivxSetNodeParameterNumBufByIndex(graphObj->PreProcObj.node, 2, NUM_DEPTH);
tivxSetNodeParameterNumBufByIndex(graphObj->TIDLObj.node, 7, NUM_DEPTH);
tivxSetNodeParameterNumBufByIndex(graphObj->post_processingObj.node, 2, NUM_DEPTH);

1.2.如果将参数设置为大于1、例如2或3、则管道无法运行、并在几帧后卡住。

#define NUM_DEPTH 2
tivxSetGraphPipelineDepth(graphObj->graph, 3);

tivxSetNodeParameterNumBufByIndex(graphObj->virtualCameraObj.node, 1, 1);
tivxSetNodeParameterNumBufByIndex(graphObj->virtualCameraObj.node, 2, 1);
tivxSetNodeParameterNumBufByIndex(graphObj->PreProcObj.node, 2, NUM_DEPTH);
tivxSetNodeParameterNumBufByIndex(graphObj->TIDLObj.node, 7, NUM_DEPTH);
tivxSetNodeParameterNumBufByIndex(graphObj->post_processingObj.node, 2, NUM_DEPTH);

尊敬的 Xie：

我的理解是 virtualCameraObj 节点将映像加载到缓冲区中、在这种情况下、哪个参数是该节点的输出？

我对为什么将2个参数设置为节点参数感到困惑

tivxSetNodeParameterNumBufByIndex (graphObj->virtualCameraObj.node、1、1)；
tivxSetNodeParameterNumBufByIndex (graphObj->virtualCameraObj.node、2、1)；

您能解释从 virtualcamerobj 节点输出哪个、我看不到为 imageMattingNode 设置的参数吗？您也可以共享该参数吗？

我建议您将管道深度增加到5、将 NUM_DEPTH 增加到4、并将 NUM_DEPTH 应用于所有节点参数、 在删除后处理节点(TIvxViewTransformNode)的情况下测试这些更改。

此致、
Gokul

嗨、Gokul：

您好、xie：

您是否可以尝试运行 tidl 演示应用、以了解流水线是否可以成功运行？ 不确定是与您的应用程序相关的问题还是与升级后的 SDK 相关的问题。

此致、

Adam

您好！

我运行 vx_app_tidl_seg.out、、可以。

尊敬的 Xie：

由于运行应用程序 vx_app_tidl_seg.out 可以、因此问题不应出在 SDK 升级中。 您基于8.4编写的应用程序在10.1中很可能不适合某些 API 更改。 请检查  vx_app_tidl_seg 的代码和您的应用程序代码、以确保您的应用程序正确组成。  

此致、

Adam

Adam、您好：

目前、感知图设计如图所示。 如果按上述方式设计图形、则会导致整个图形被阻塞。

故障排除后、我们发现只要view_transform添加节点、在整个图形中运行流水线就会导致图形被阻止。

在进一步调查view_transform节点后,我们发现关键问题是上游节点(pre_proc,,TIDLsave_tensor)都是replicate * 4,view_transformsave_tensor同时需要同时处理的结果。 因此、它不能使用该replicate方法来复制数据、但必须在处理前聚合四个数据流。

for(int i = 0; i < 4; ++i)
{
input_tensors[i] = (vx_user_data_object)vxGetObjectArrayItem((vx_object_array)tensor_arr[0], i);
}
obj->node = tivxViewTransformNode(graph, obj->viewTransformParams, obj->config, output_tensors, input_tensors[0], input_tensors[1], input_tensors[2], input_tensors[3]);

例如、在这种情况下、当view_transform同时处理所有四个流时、会导致图形被阻止。

我们还尝试view_transform仅处理第一个流、在本例中、整个图形可以成功运行。 但是、如果我们仅分别处理流2、3和4、该图形仍然会被阻止。

(1)仅传递第一个数据流允许图形正常运行

input_tensors = (vx_user_data_object)vxGetObjectArrayItem((vx_object_array)tensor_arr[0], 0);
obj->node = tivxViewTransformNode(graph, obj->viewTransformParams, obj->config, output_tensors, input_tensors);

input_tensors = (vx_user_data_object)vxGetObjectArrayItem((vx_object_array)tensor_arr[0], 1); 
or
input_tensors = (vx_user_data_object)vxGetObjectArrayItem((vx_object_array)tensor_arr[0], 2); 
or
input_tensors = (vx_user_data_object)vxGetObjectArrayItem((vx_object_array)tensor_arr[0], 3); 
obj->node = tivxViewTransformNode(graph, obj->viewTransformParams, obj->config, output_tensors, input_tensors);

如果上游节点是replicate节点、但下游节点需要聚合四个数据流以进行同步处理、那么该如何设计该图？ 因为在我们当前的图形设计中、这似乎会导致整个图形无法正常运行。

此致、

XJC