工具/软件：
您好、
我尝试使用 gstreamer 合成器混合多个视频、当我使用 gstreamer 组合 FullHD 视频时、CPU 利用率增加。 请建议、TDA4AH 具有任何用于 gstreamer 视频混合的硬件加速器。 O
我正在将“GST-launch-1.0"命令“命令与“compositor"结合“结合使用、以混合多个“appsrc"元素“元素。
您好 Jared McArthur、
感谢您的答复。 我想针对 appsrc 输入合并多个具有不同分辨率的视频、 并遵循 RTOS SDK 11_00_00_06 中提供的 gst_wrapper.c 文件。 在此中、仅为一个通道配置输入宽度和高度。 对于 appsrc 各个通道的不同分辨率、我更新了函数 appGstSrcInit 指定 gst_wrapper c 如下所示。 将 IN_HEIGHT 和 IN_WIDTH 更新为数组元素、以便为每个通道保存不同的值。
使用 GST 命令更新应用程序代码、如下所示。
appsrc name=myAppSrc0 format=gst_format_time is-live=true do-timestamp=true block=true ！ 排队！ 视频转换！ 视频/x-RAW、 宽度=1280、高度=720 ！ comp.sink_0 appsrc name=myAppSrc1 format=gst_format_time is-live=true do-timestamp=true block=true ！ 排队！ 视频转换！ 视频/x-RAW、 宽度=640、高度=720 ！ comp.sink_1 appsrc name=myAppSrc2 format=gst_format_time is-live=true do-timestamp=true block=true ！ 排队！ 视频转换！ 视频/x-RAW、 宽度=1280、高度=720 ！ comp.sink_2 appsrc name=myAppSrc3 format=gst_format_time is-live=true do-timestamp=true block=true ！ 排队！ 视频转换！ 视频/x-RAW、 宽度=640、高度=720 ！ comp.sink_3 appsrc name=myAppSrc4 format=gst_format_time is-live=true do-timestamp=true block=true ！ 排队！ 视频转换！ 视频/x-RAW、 宽度=1280、高度=720 ！ comp.sink_4 appsrc name=myAppSrc5 format=gst_format_time is-live=true do-timestamp=true block=true ！ 排队！ 视频转换！ 视频/x-RAW、 宽度=1280、高度=720 ！ comp.sink_5 appsrc name=myAppSrc6 format=gst_format_time is-live=true do-timestamp=true block=true ！ 排队！ 视频转换！ 视频/x-RAW、 宽度=1280、高度=720 ！ COMP.SINK_6 tiovxmosaic name=comp SINK_0：：startx=“<0>" SINK_0“ SINK_0：：：starty=“<0>" SINK_1“ SINK_1：：startx=“<1280>" SINK_1“ SINK_1：：starty=“<0>" SINK_2“ SINK_2：：startx=“<2560>" SINK_2“ SINK_2：：：starty=“<0>" SINK_3“ SINK_3：：startx=“<starty="Sink：“：<720“>：<starty>“Sink：<starty=“720"：“：<starty_SINK_4>“ 视频转换！ v4l2h264enc extra-controls=“controls, frame_level_rate_control_enable=1、video_bitrate=10000000“！ h264parse！ mp4mux！ filesink location=output_file.mp4
当我将所有宽度和高度分别配置为 1280 和 720 时、上述命令在使数据 tr idx 值排队的第二次迭代中停止、但相同的命令可以正常工作并生成输出文件。
我是否需要更新 gst-wrapper.c 文件中的包装器函数以获取不同的分辨率输入？
此外、请建议如何检查 TDA4 中的 h264 编码器硬件负载。
此致、
Suresh K
您好 Jared McArthur、
Gstremer 和 tiovxmosaic 支持不同的分辨率输入。
使用 GST_Wrapper 函数时、 它只有一个用于所有通道输入的输入分辨率参数。
在 gst_wrapper.c 文件中、 所有通道的平面大小按如下方式进行配置。
int32_t appGstSrcInit(void* data_ptr[CODEC_MAX_BUFFER_DEPTH][CODEC_MAX_NUM_CHANNELS][CODEC_MAX_NUM_PLANES])
{
int32_t status = 0;
GstCaps* caps = NULL;
app_gst_wrapper_obj_t* p_gst_pipe_obj = &g_app_gst_wrapper_obj;
uint32_t plane_size = p_gst_pipe_obj->params.in_width * p_gst_pipe_obj->params.in_height;
/* Setup AppSrc Elements */
for (uint8_t ch = 0; ch < p_gst_pipe_obj->params.in_num_channels; ch++)
{
p_gst_pipe_obj->m_srcElemArr[ch] = findElementByName(p_gst_pipe_obj->m_pipeline,
p_gst_pipe_obj->params.m_AppSrcNameArr[ch]);
if (p_gst_pipe_obj->m_srcElemArr[ch] == NULL)
{
printf("gst_wrapper: findElementByName() FAILED! %s not found\n", p_gst_pipe_obj->params.m_AppSrcNameArr[ch]);
status = -1;
}
else
{
p_gst_pipe_obj->isAppSrc = GST_IS_APP_SRC(p_gst_pipe_obj->m_srcElemArr[ch]);
if (p_gst_pipe_obj->isAppSrc)
{
caps = gst_caps_new_simple("video/x-raw",
"width", G_TYPE_INT, p_gst_pipe_obj->params.in_width,
"height", G_TYPE_INT, p_gst_pipe_obj->params.in_height,
"format", G_TYPE_STRING, p_gst_pipe_obj->params.in_format,
NULL);
if (caps == NULL)
{
printf("gst_wrapper: gst_caps_new_simple() FAILED!\n");
status = -1;
}
gst_app_src_set_caps (GST_APP_SRC(p_gst_pipe_obj->m_srcElemArr[ch]), caps);
gst_caps_unref (caps);
}
else
{
printf("gst_wrapper: %s not an AppSrc element\n", p_gst_pipe_obj->params.m_AppSrcNameArr[ch]);
status = -1;
}
}
}
/* Setup GstBuffers to push to AppSrc Elements using given data_ptrs */
if (status==0)
{
for (uint8_t idx = 0; idx < p_gst_pipe_obj->params.in_buffer_depth && status==0; idx++)
{
for (uint8_t ch = 0; ch < p_gst_pipe_obj->params.in_num_channels && status==0; ch++)
{
p_gst_pipe_obj->buff[idx][ch] = gst_buffer_new();
p_gst_pipe_obj->mem[idx][ch][0] = gst_memory_new_wrapped (0, data_ptr[idx][ch][0], plane_size, 0, plane_size, NULL, NULL);
p_gst_pipe_obj->mem[idx][ch][1] = gst_memory_new_wrapped (0, data_ptr[idx][ch][1], plane_size/2, 0, plane_size/2, NULL, NULL);
gst_buffer_append_memory (p_gst_pipe_obj->buff[idx][ch], p_gst_pipe_obj->mem[idx][ch][0]);
gst_buffer_append_memory (p_gst_pipe_obj->buff[idx][ch], p_gst_pipe_obj->mem[idx][ch][1]);
p_gst_pipe_obj->mem[idx][ch][0] = gst_buffer_get_memory (p_gst_pipe_obj->buff[idx][ch], 0);
p_gst_pipe_obj->mem[idx][ch][1] = gst_buffer_get_memory (p_gst_pipe_obj->buff[idx][ch], 1);
gst_memory_map(p_gst_pipe_obj->mem[idx][ch][0],&p_gst_pipe_obj->map_info[idx][ch][0], GST_MAP_WRITE);
gst_memory_map(p_gst_pipe_obj->mem[idx][ch][1],&p_gst_pipe_obj->map_info[idx][ch][1], GST_MAP_WRITE);
}
}
}
if (status==0) p_gst_pipe_obj->push_count = 0;
return status;
}
由于上述函数将支持 appsrc 的不同通道的单输入分辨率,请说明如果 appsrc 的每个通道的输入分辨率不同,如何继续进行。
我想 使用 GST_Wrapper 函数组合具有不同分辨率的 appsrc 输入。