FFmpeg aresample_swr_opts的解析

news/2024/5/15 19:50:03

ffmpeg option的解析

aresample_swr_opts是AVFilterGraph中的option。

static const AVOption filtergraph_options[] = {{ "thread_type", "Allowed thread types", OFFSET(thread_type), AV_OPT_TYPE_FLAGS,{ .i64 = AVFILTER_THREAD_SLICE }, 0, INT_MAX, F|V|A, "thread_type" },{ "slice", NULL, 0, AV_OPT_TYPE_CONST, { .i64 = AVFILTER_THREAD_SLICE }, .flags = F|V|A, .unit = "thread_type" },{ "threads",     "Maximum number of threads", OFFSET(nb_threads), AV_OPT_TYPE_INT,{ .i64 = 0 }, 0, INT_MAX, F|V|A, "threads"},{"auto", "autodetect a suitable number of threads to use", 0, AV_OPT_TYPE_CONST, {.i64 = 0 }, .flags = F|V|A, .unit = "threads"},{"scale_sws_opts"       , "default scale filter options"        , OFFSET(scale_sws_opts)        ,AV_OPT_TYPE_STRING, {.str = NULL}, 0, 0, F|V },{"aresample_swr_opts"   , "default aresample filter options"    , OFFSET(aresample_swr_opts)    ,AV_OPT_TYPE_STRING, {.str = NULL}, 0, 0, F|A },{ NULL },
};

因为是option，所以就想能不能将这个option配置到graph里面，分析代码发现，AVFilterGraph::aresample_swr_opts在graph解析的时候不能当做filter的option解析。

因为graph load的在解析graph文本的过程，option来自filter的option，aresample_swr_opts是AVFilterGraph的option，而AVFilterGraph不在filter的list中，所以graph解析并不能识别aresample_swr_opts。

但是aresample_swr_opts从名字来看，就是为了给swresample用的，所以，先看下命令行是怎么用的。

命令行支持，并不是直接用aresample_swr_opts指定swresample的option，而是不用写成这样aresample=resampler=swr:filter_size=16，即用filter带option的写法，直接写option也能解析。

如下：

ffmpeg -y -i test.wav -filter_size 16 -phase_shift 6 -ar 48000 out.wav

其中filter_size和phase_shift会在解析的时候读取swr class的option，匹配成功后，拼接成swr_opts字符串，最后将swr_opts设置到graph->aresample_swr_opts上。avfiltergraph中协商如果convert_needed大于0，就会创建对应的swresample，将aresample_swr_opts中的option作为swresample的option参数传入。

其中-filter_size 16，-phase_shift 6是被当做option解析的，会进入opt_default函数，因为这两个参数是swresample的，所以对应代码是：

#if CONFIG_SWRESAMPLEif (!consumed && (o=opt_find(&swr_class, opt, NULL, 0,AV_OPT_SEARCH_CHILDREN | AV_OPT_SEARCH_FAKE_OBJ))) {av_dict_set(&swr_opts, opt, arg, FLAGS);consumed = 1;}
#endif

解析后会把这两个option设置到swr_opts上。

然后进入configure_filtergraph函数，会将这个option设置到aresample_swr_opts：

while ((e = av_dict_get(ost->swr_opts, "", e,AV_DICT_IGNORE_SUFFIX))) {av_strlcatf(args, sizeof(args), "%s=%s:", e->key, e->value);
}
if (strlen(args))args[strlen(args)-1] = 0;
av_opt_set(fg->graph, "aresample_swr_opts", args, 0);

然后在avfiltergraph的query_formats函数中，创建convert filter的时候将option传进去：

snprintf(inst_name, sizeof(inst_name), "auto_%s_%d",neg->conversion_filter, converter_count++);
opts = FF_FIELD_AT(char *, neg->conversion_opts_offset, *graph);
ret = avfilter_graph_create_filter(&convert, filter, inst_name, opts, NULL, graph);

其中，graph参数中，可以看到aresample_swr_opts就是"filter_size=16:phase_shift=6"。

在这里插入图片描述

graph中解析swr option

跟踪程序运行过程，在不走ffmpeg命令行程序的时候，像前面，直接设置在avfilter里面类似cmdutils.c里面的逻辑，添加对swr的处理，就可以在自定义程序中load graph的时候如同命令行程序一样，解析swr的option。

最终实现如下：

+#include "libswresample/swresample.h"#define FF_INTERNAL_FIELDS 1#include "framequeue.h"
@@ -951,6 +952,10 @@ static int process_options(AVFilterContext *ctx, AVDictionary **options,char *av_uninit(parsed_key), *av_uninit(value);const char *key;int offset= -1;
+#if CONFIG_SWRESAMPLE
+    char swr_opts[256] = { 0 };
+    const AVClass *swr_class = swr_get_class();
+#endifif (!args)return 0;
@@ -995,24 +1000,31 @@ static int process_options(AVFilterContext *ctx, AVDictionary **options,av_free(parsed_key);return ret;}
-        } else {
-            o = av_opt_find(ctx->priv, key, NULL, 0,
-                            AV_OPT_SEARCH_CHILDREN | AV_OPT_SEARCH_FAKE_OBJ);
-            if (!o) {
-                av_log(ctx, AV_LOG_ERROR, "Option '%s' not found\n", key);
-                av_free(value);
-                av_free(parsed_key);
-                return AVERROR_OPTION_NOT_FOUND;
-            }
+        } else if (o = av_opt_find(ctx->priv, key, NULL, 0,
+                            AV_OPT_SEARCH_CHILDREN | AV_OPT_SEARCH_FAKE_OBJ)) {av_dict_set(options, key, value,(o->type == AV_OPT_TYPE_FLAGS &&(value[0] == '-' || value[0] == '+')) ? AV_DICT_APPEND : 0);
+#if CONFIG_SWRESAMPLE
+        } else if (o = av_opt_find(&swr_class, key, NULL, 0, 0)) {
+            av_strlcatf(swr_opts, sizeof(swr_opts), "%s=%s:", key, value);
+#endif
+        } else {
+            av_log(ctx, AV_LOG_ERROR, "Option '%s' not found\n", key);
+            av_free(value);
+            av_free(parsed_key);
+            return AVERROR_OPTION_NOT_FOUND;}av_free(value);av_free(parsed_key);}+    if (strlen(swr_opts)) {
+        swr_opts[strlen(swr_opts) - 1] = 0;
+        av_opt_set(ctx->graph, "aresample_swr_opts", swr_opts, 0);
+    }
+

这样，在graph中配置上filter_size=16:phase_shift=6，然后，load graph的时候并不会在avfiltergraph里面进行解析，播放的时候，调用avfilter_graph_reconfig，调用栈如下：

query_formats(AVFilterGraph * graph, void * log_ctx) (ffmpeg/libavfilter/avfiltergraph.c:747)
graph_config_formats(AVFilterGraph * graph, void * log_ctx) (ffmpeg/libavfilter/avfiltergraph.c:1373)
avfilter_graph_reconfig(AVFilterGraph * graphctx, void * log_ctx) (ffmpeg/libavfilter/avfiltergraph.c:1519)
movie_async_activate(AVFilterContext * ctx) (ffmpeg/libavfilter/src_movie_async.c:1254)
ff_filter_activate(AVFilterContext * filter) (ffmpeg/libavfilter/avfilter.c:1565)
ff_filter_graph_run_all(AVFilterGraph * graph) (ffmpeg/libavfilter/avfiltergraph.c:1718)

进入query_formats之后，获取opts，就是前面在graph中配置的opts：

opts = FF_FIELD_AT(char *, neg->conversion_opts_offset, *graph);
if (link->type == AVMEDIA_TYPE_AUDIO) {snprintf(inst_opts, sizeof(inst_opts), "converter=%d:%s", convert_needed, opts ? opts : "");opts = inst_opts;
}
snprintf(inst_name, sizeof(inst_name), "auto_%s", neg->conversion_filter);
ret = avfilter_graph_create_filter(&convert, filter, inst_name, opts, NULL, graph);
if (ret < 0)return ret;
if ((ret = avfilter_insert_filter(link, convert, 0, 0)) < 0)return ret;

最后创建filter的时候，就会将这些options设置到fitler上。

附：ffmpeg help命令的解析

当用户在命令行中输入ffmpeg -h或ffmpeg -help时，show_help_default函数会被调用，输出帮助信息。该函数还可以在其他情况下被调用，例如当用户输入无效的命令行选项时，或者当用户输入ffmpeg -h <选项>时，显示特定选项的帮助信息。

ffmpeg --help full

如果是help full，会有这样的调用层次，并且show_avoptions和show_advanced都被赋值为1：

show_help
- show_help_default- show_help_options

在show_help_options中：

    if (opt && *opt) {if (!strcmp(opt, "long"))show_advanced = 1;else if (!strcmp(opt, "full"))show_advanced = show_avoptions = 1;elseav_log(NULL, AV_LOG_ERROR, "Unknown help option '%s'.\n", opt);}

show_avoptions的分支中：

    if (show_avoptions) {int flags = AV_OPT_FLAG_DECODING_PARAM | AV_OPT_FLAG_ENCODING_PARAM;show_help_children(avcodec_get_class(), flags);show_help_children(avformat_get_class(), flags);
#if CONFIG_SWSCALEshow_help_children(sws_get_class(), flags);
#endif
#if CONFIG_SWRESAMPLEshow_help_children(swr_get_class(), AV_OPT_FLAG_AUDIO_PARAM);
#endifshow_help_children(avfilter_get_class(), AV_OPT_FLAG_VIDEO_PARAM | AV_OPT_FLAG_AUDIO_PARAM | AV_OPT_FLAG_FILTERING_PARAM);show_help_children(av_bsf_get_class(), AV_OPT_FLAG_VIDEO_PARAM | AV_OPT_FLAG_AUDIO_PARAM | AV_OPT_FLAG_BSF_PARAM);}

这里，会遍历avcodec，avformat，sws，swr，avfilter，av_bsf的class，将其children class对应的option全部显示出来。


http://www.mrgr.cn/p/41765801

相关文章

振弦采集仪及在线监测系统完整链条的岩土工程隧道安全监测

振弦采集仪及在线监测系统完整链条的岩土工程隧道安全监测

振弦采集仪及在线监测系统完整链条的岩土工程隧道安全监测 近年来&#xff0c;随着城市化的不断推进和基础设施建设的不断发展&#xff0c;隧道建设也日益成为城市交通发展的必需品。然而&#xff0c;隧道建设中存在着一定的安全隐患&#xff0c;如地质灾害、地下水涌流等&…
阅读更多...
C++STL库中的list

C++STL库中的list

文章目录 list的介绍及使用 list的常用接口 list的模拟实现 list与vector的对比 一、list的介绍及使用 1. list是可以在常数范围内在任意位置进行插入和删除的序列式容器&#xff0c;并且该容器可以前后双向迭代。 2. list的底层是双向带头循环链表结构&#xff0c;双向带头循…
阅读更多...
【Git】git企业开发命令整理，以及注意点

【Git】git企业开发命令整理，以及注意点

1.git企业开发过程 业务的分支大概有以下几个&#xff1a; master&#xff1a;代码随时可能上线 develop&#xff1a;代码最新 feature/xxx&#xff1a;实际业务开发分支 release/xxx&#xff1a;预发布分支 fix&#xff1a;修复bug分支 过程大概是这样的&#xff1a; 首…
阅读更多...
HTML+CSS+JavaScript：轮播图自动播放

HTML+CSS+JavaScript：轮播图自动播放

一、需求 轮播图如下图所示&#xff0c;需求是每隔一秒轮播图自动切换一次 二、代码素材 以下是缺失JS部分的代码&#xff0c;感兴趣的小伙伴可以先自己试着写一写 <!DOCTYPE html> <html lang"en"><head><meta charset"UTF-8" /&…
阅读更多...
【期末课程设计】学生成绩管理系统

【期末课程设计】学生成绩管理系统

因其独特&#xff0c;因其始终如一 文章目录 一、学生成绩管理系统介绍 二、学生成绩管理系统设计思路 三、源代码 1. test.c 2. Student Management System.c 3.Stu_System.c 4.Teacher.c 5.Student Management System.h 前言&#xff1a; 学生成绩管理系统含教师…
阅读更多...
Android 第三方库CalendarView

Android 第三方库CalendarView

Android 第三方库CalendarView 根据需求和库的使用方式&#xff0c;自己弄了一个合适自己的日历&#xff0c;仅记录下&#xff0c;方便下次弄其他样式的日历。地址 需求&#xff1a; 只显示当月的数据 默认的月视图有矩形的线 选中的天数也要有选中的矩形框 今天的item需要…
阅读更多...
浏览器安装selenium IDE插件并进行网页测试记录

浏览器安装selenium IDE插件并进行网页测试记录

Chrome开发者工具插件,谷歌浏览器开发者工具插件推荐下载_安装_教程-扩展迷 去官网直接搜索下载需要的插件就可。 插件下载安装-Chrome-扩展迷 下载好后解压&#xff1a; 打开Chrome谷歌浏览器&#xff1a; 设置>拓展程序>打开"开发者模式”>将下载好的seleni…
阅读更多...
python结合tesseract-ocr识别汉字的训练库过程

python结合tesseract-ocr识别汉字的训练库过程

一、安装python 例如&#xff0c;安装路径为&#xff1a;C:\rtkapp\python-3.8.0 二、安装opencv 三、安装tesseract-ocr 安装完成后&#xff0c;在系统环境变量path中&#xff0c;添加安装路径C:\rtkapp\Tesseract-OCR 四、打开python安装pytesseract 五、安装java运行环境…
阅读更多...
状态机实现N位按键消抖

状态机实现N位按键消抖

状态机实现N位按键消抖 1、原理 利用状态机实现按键的消抖&#xff0c;具体的原理可参考 (50条消息) 基于FPGA的按键消抖_fpga 按键消抖_辣子鸡味的橘子的博客-CSDN博客 状态机简介&#xff1a; 状态机分类可以主要分为两类&#xff1a;moore和mealy 根据三段式状态机最后…
阅读更多...
婚庆服务小程序app开发方案详解

婚庆服务小程序app开发方案详解

开发一款婚庆行业服务小程序有哪些功能呢&#xff1f; 1、选择分类 选择婚庆、婚车、婚宴、司仪、彩妆、婚庆用品、跟拍、摄影等&#xff0c;筛选出对应的商家 2、选择商家 选择分类后&#xff0c;可以选择商家&#xff0c;查看各个商家的详细介绍情况。 3、选择服务套餐 各…
阅读更多...
飞书ChatGPT机器人 – 打造智能问答助手实现无障碍交流

飞书ChatGPT机器人 – 打造智能问答助手实现无障碍交流

文章目录 前言环境列表1.飞书设置2.克隆feishu-chatgpt项目3.配置config.yaml文件4.运行feishu-chatgpt项目5.安装cpolar内网穿透6.固定公网地址7.机器人权限配置8.创建版本9.创建测试企业10. 机器人测试 前言 在飞书中创建chatGPT机器人并且对话&#xff0c;在下面操作步骤中…
阅读更多...
gin框架内容（三）--中间件

gin框架内容（三）--中间件

gin框架内容&#xff08;三&#xff09;--中间件 Gin框架允许开发者在处理请求的过程中&#xff0c;加入用户自己的函数。这个函数就叫中间件&#xff0c;中间件适合处理一些公共的业务逻辑&#xff0c;比如登录认证、权限校验、数据分页、记录日志、耗时统计等 即比如&#x…
阅读更多...
Generative Diffusion Prior for Unified Image Restoration and Enhancement 论文阅读笔记

Generative Diffusion Prior for Unified Image Restoration and Enhancement 论文阅读笔记

这是CVPR2023的一篇用diffusion先验做图像修复和图像增强的论文 之前有一篇工作做了diffusion先验&#xff08;Bahjat Kawar, Michael Elad, Stefano Ermon, and Jiaming Song, “Denoising diffusion restoration models,” arXiv preprint arXiv:2201.11793, 2022. 2, 4, 6,…
阅读更多...
rcu链表综合实践

rcu链表综合实践

基础知识 rcu-read copy update的缩写。和读写锁起到相同的效果。据说牛逼一点。对于我们普通程序员&#xff0c;要先学会使用&#xff0c;再探究其内部原理。 链表的数据结构&#xff1a; struct list_head {struct list_head *next, *prev; };还有一种&#xff1a;struct h…
阅读更多...
【分布鲁棒、状态估计】分布式鲁棒优化电力系统状态估计研究[几种算法进行比较]（Matlab代码实现）

【分布鲁棒、状态估计】分布式鲁棒优化电力系统状态估计研究[几种算法进行比较]（Matlab代码实现）

&#x1f4a5;&#x1f4a5;&#x1f49e;&#x1f49e;欢迎来到本博客❤️❤️&#x1f4a5;&#x1f4a5; &#x1f3c6;博主优势&#xff1a;&#x1f31e;&#x1f31e;&#x1f31e;博客内容尽量做到思维缜密&#xff0c;逻辑清晰&#xff0c;为了方便读者。 ⛳️座右铭&a…
阅读更多...
VAE-根据李宏毅视频总结的最通俗理解

VAE-根据李宏毅视频总结的最通俗理解

1.VAE的直观理解 先简单了解一下自编码器&#xff0c;也就是常说的Auto-Encoder。Auto-Encoder包括一个编码器&#xff08;Encoder&#xff09;和一个解码器&#xff08;Decoder&#xff09;。其结构如下&#xff1a; 自编码器是一种先把输入数据压缩为某种编码, 后仅通过该编…
阅读更多...
Python - Opencv + pyzbar实时摄像头识别二维码

Python - Opencv + pyzbar实时摄像头识别二维码

直接上代码&#xff1a; import cv2 from pyzbar.pyzbar import decodecap cv2.VideoCapture(0) # 打开摄像头while True: # 循环读取摄像头帧ret, frame cap.read()# 在循环中&#xff0c;将每一帧作为图像输入&#xff0c;使用pyzbar的decode()函数识别二维码barcodes …
阅读更多...
np.bincount、np.digitize、np.unique、np.histogram、np.searchsorted

np.bincount、np.digitize、np.unique、np.histogram、np.searchsorted

np.bincount 简介 np.bincount是统计数组中数字出现数量的函数&#xff0c;数值n在输入数组x中每出现1次&#xff0c;则输出o的o[n]1。 函数 官方文档 函数参数&#xff1a; x: 输入&#xff0c;1维非负数组weights: 权重数组, 可选参数&#xff0c;如果指定了这一参数&am…
阅读更多...
函数指针数组

函数指针数组

前面学习过数组 指针数组&#xff1a;用来存放数组指针&#xff08;地址&#xff09;的数组 int main() {int arr1[] { 0 };int arr2[] { 0 };int arr3[] { 0 };int* p[3] { arr1,arr2,arr3 };//指针数组return 0; }那么函数指针数组&#xff0c;就是用来存放几个类型相同…
阅读更多...
PyTorch - GPU入门教程1

PyTorch - GPU入门教程1

1. 安装GPU版本的PyTorch 登录PyTorch官网https://pytorch.org/&#xff0c;下载对应CUDA版本的PyTorch【不能直接pip install&#xff0c;否则安装上的是CPU版本的】 2. 查看GPU信息 &#xff08;1&#xff09;重要信息 !nvidia-smi我的GPU版本很垃圾&#xff0c;本blog仅…
阅读更多...
推荐文章

Copyright @ 2022~2023