(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 20221017028 8.1 (22)申请日 2022.02.23 (71)申请人 浪潮金融信息技 术有限公司 地址 215100 江苏省苏州市吴中开发区吴 淞江工业园吴淞路818号 (72)发明人 胡焱　荆宾　孙浩亮　生伟　 (74)专利代理 机构 北京权智天下知识产权代理 事务所(普通 合伙) 11638 专利代理师 郭春莉 (51)Int.Cl. H04N 5/232(2006.01) H04N 5/04(2006.01) H04N 21/43(2011.01) (54)发明名称 一种基于视觉库的音视频双录方法、 系统及 介质 (57)摘要 本发明公开了一种基于视觉库的音视频双 录方法、 系统及介质， 所述方法包括以下步骤： 配 置录制工具包、 摄像单元和录制处理算法； 设置 录制调用参数； 获取录制需求， 基于录制工 具包、 摄像单元和录制处理算法执行第一视频录制操 作， 生成第一视频界面； 基于录制工具包、 录制处 理算法、 录制调用参数和第一视频界面执行第二 复合录制操作， 得到双频文件； 本发明能够通过 自主设计的算法和逻辑， 在终端设备上对视频和 音频进行同步双录， 且通过较短的耗时即可生成 双录文件， 生成文件后， 还可通过系统自身进行 文件音画一致性的校对， 不需要人工查验校对， 文件生成效率高， 录制文件的质量高， 弥补了现 有技术的不足， 具有一定的应用价 值。 权利要求书2页 说明书7页 附图2页 CN 114745497 A 2022.07.12 CN 114745497 A 1.一种基于 视觉库的音视频双录方法， 其特 征在于， 包括以下步骤： 初始配置步骤： 配置录制工具包、 摄 像单元和录制处 理算法； 设置 录制调用参数； 视频录制步骤： 获取录制需求， 基于所述录制工具包、 所述摄像单元和所述录制处理算法执行第一视 频录制操作， 生成第一视频界面； 复合录制步骤： 基于所述录制工具包、 所述录制处理算法、 所述录制调用参数和所述第一视频界面执 行第二复合录制操作， 得到双频文件。 2.根据权利要求1所述的一种基于 视觉库的音视频双录方法， 其特 征在于： 所述录制工具包中存 储有第一调用程序、 第二调用程序和第三调用程序； 所述录制处 理算法包括： 第一视频流处 理算法和第一音频流处 理算法； 所述录制需求包括： 第一需求和第 二需求； 所述第 一需求为需要进行双频录制； 所述第 二需求为不需要进行双频录制。 3.根据权利要求2所述的一种基于 视觉库的音视频双录方法， 其特 征在于： 所述第一视频录制操作包括： 识别所述录制需求， 当所述录制需求为所述第 一需求时， 基于所述第 一调用程序、 所述 第三调用程序和所述摄 像单元调用所述第一视频流处 理算法， 生成所述第一视频界面； 所述第二复合录制操作包括： 基于所述第二调用程序、 所述第三调用程序、 所述录制调用参数和所述第一视频界面 调用所述第一音频流处 理算法， 得到所述双频文件。 4.根据权利要求3所述的一种基于 视觉库的音视频双录方法， 其特 征在于： 所述第一视频流处 理算法为： 通过所述第一调用程序加载视 觉库； 通过所述第一调用程序检测所述视 觉库的运行情况； 若所述运行情况为第一情况， 则基于所述视觉库获取所述摄像单元的摄像数据； 设置 窗口基础参数， 按照所述窗口基础参数生成第一窗口， 将所述摄像数据投放至所述第一窗 口中， 得到所述第一视频界面； 若所述运行情况为第二情况， 则基于所述第三调用程序执 行后备步骤。 5.根据权利要求 4所述的一种基于 视觉库的音视频双录方法， 其特 征在于： 所述第一音频流处 理算法为： 启动所述第二调用程序； 检测所述第二调用程序的启动情况； 若所述启动情况为第 三情况， 则通过所述录制调用参数调用所述第 二调用程序录制所 述第一视频界面的系统环境音以及 截取所述第一视频界面的第一视频数据； 调用所述第二 调用程序基于所述系统环境音和所述第一视频数据生成第一录制文件； 保存所述第一录制 文件， 得到所述双频文件； 若所述启动情况为第四情况， 则基于所述第三调用程序执 行所述后备步骤。 6.根据权利要求5所述的一种基于 视觉库的音视频双录方法， 其特 征在于：权　利　要　求　书 1/2 页 2 CN 114745497 A 2所述调用所述第二调用程序基于所述系统环境音和所述第一视频数据生成第一录制 文件的步骤进一 步包括： 检测所述第一视频 数据的第一时长和所述系统环境音的第二时长； 比对所述第一时长和所述第二时长是否一 致； 若非一致， 则回到所述视频录制步骤； 若一致， 则同步播放所述第一视频数据和所述系统环境音， 判断所述第一视频数据和 所述系统环境音之间的画音一致性情况； 若所述画音一致性情况为第 五情况， 则调用所述 第二调用程序基于所述系统环境音和所述第一视频数据生成所述第一录制文件； 若所述画 音一致性情况为第六情况， 则回到所述视频录制步骤。 7.根据权利要求 4所述的一种基于 视觉库的音视频双录方法， 其特 征在于： 所述第一情况为： 所述视 觉库运行成功； 所述第二情况为： 所述视 觉库运行失败； 所述后备步骤包括： 通过所述第三调用程序生成录制 失败信息， 并通过所述第三调用 程序关闭所述视 觉库或所述第二调用程序。 8.根据权利要求6所述的一种基于 视觉库的音视频双录方法， 其特 征在于： 所述第三情况为： 所述第二调用程序启动成功； 所述第四情况为： 所述第二调用程序启动失败； 所述第五情况为： 画音一 致； 所述第六情况为： 画音非一 致； 所述视觉库为openCV库； 所述第二调用程序为ffmpeg程序； 所述录制调用参数为 ffmpeg参数。 9.基于权利要求8所述的一种基于视觉库的音视频双录方法的基于视觉库的音视频双 录系统， 其特 征在于， 包括： 初始配置模块、 视频录制模块和复合录制模块； 所述初始配置模块用于配置录制工具包、 摄像单元和录制处理算法； 所述初始配置模 块还用于设置 录制调用参数； 所述视频录制模块用于获取录制需求， 并基于所述录制工具包、 所述摄像单元和所述 录制处理算法执 行第一视频录制操作， 生成第一视频界面； 所述复合录制模块用于根据所述录制工具包、 所述录制处理算法、 所述录制调用参数 和所述第一视频界面执 行第二复合录制操作， 得到双频文件。 10.一种计算机可读存储介质， 其特征在于， 所述计算机可读存储介质上存储有计算机 程序， 所述计算机程序被处理器执行时实现权利要求 1～8中任一项 所述基于视觉库的音视 频双录方法的步骤。权　利　要　求　书 2/2 页 3 CN 114745497 A 3