开云优惠体育网页版入口

专利名称：一种可扩展的基于chromium内核的多媒体播控系统

专利类型：发明专利

专利申请号：CN202310084766.1

专利申请（专利权）人：郑州小鸟信息开云优惠体育网页版入口有限公司
权利人地址：河南省郑州市高新技术产业开发区枫香街173号3号楼12层1201室

专利发明（设计）人：段太钢,姚远,刘永建,周劲羽

专利摘要：本发明公开了一种可扩展的基于chromium内核的多媒体播控系统，涉及播控技术领域，解决目前基于chromium的浏览器仅仅能支持有限的信号源类型的技术问题，系统包括：Browser进程，使用chromium提供的content层进行定制的，用于对多媒体数据源管理进程用户进行授权处理；多媒体渲染进程，基于chromium的PPAPI插件框架实现，用于对多媒体信号进行解码、渲染、转发来自JavaScript的人机交互控制数据；多媒体数据源管理进程，用于管理信号源插件进程；信号源插件进程，用于接收来自多媒体渲染进程的人机交互的控制数据，并将渲染数据发送给多媒体渲染进程；不同信号源类型对应于不同的信号源插件进程；多媒体渲染进程与多媒体数据源管理进程、信号源插件进程建立IPC连接。

主权利要求：
1.一种可扩展的基于chromium内核的多媒体播控系统，其特征在于，包括：Browser进程，所述Browser进程是使用chromium提供的content层进行定制的，用于对多媒体数据源管理进程用户进行授权处理；
多媒体渲染进程，所述多媒体渲染进程为基于chromium的PPAPI框架实现，用于对多媒体信号进行解码、渲染；
多媒体数据源管理进程，所述多媒体数据源管理进程为基于chromium的PPAPI框架实现，用于管理信号源插件进程；
信号源插件进程，所述信号源插件进程基于chromium内核框架实现，用于接收信号源音视频数据，并发送给所述多媒体渲染进程；不同信号源类型对应于不同的信号源插件进程；
所述多媒体渲染进程与所述多媒体数据源管理进程、信号源插件进程建立IPC连接；
所述多媒体渲染进程包括：
进程间通信模块，用于负责建立与所述多媒体数据源管理进程的IPC连接、负责建立与所述信号源插件进程的IPC连接；
事件接收与转发模块，用于负责接收来自鼠标、键盘、触摸、JS脚本的消息，并根据所述消息的类型将所述消息转发给所述多媒体数据源管理进程或具体的信号源插件进程；
音视频解码模块，用于对音视频数据进行解码处理；
调度模块，用于负责调度渲染模块；
渲染模块，用于将解码后的音视频数据帧绘制到纹理上；
所述信号源插件进程包括：
进程间通信建立模块，用于负责建立与所述多媒体数据源管理进程的IPC连接、负责建立与所述多媒体渲染进程的IPC连接；
事件接收发送模块，用于接收来自所述多媒体数据源管理进程、多媒体渲染进程的消息；
信号源数据帧采集与发送模块，用于采集信号源音视频数据，当一帧数据准备完毕以后，发送给所述多媒体渲染进程；
信号源插件进程包括流媒体插件、Word插件、PPT插件、EXCEL插件。
2.根据权利要求1所述的一种可扩展的基于chromium内核的多媒体播控系统，其特征在于，所述多媒体数据源管理进程包括：进程间通信建立模块，用于负责建立与所述多媒体渲染进程的IPC连接；
插件进程启动模块，用于根据所述多媒体渲染进程传入的信号源类型，启动相应的信号源插件进程；
事件接收与发送模块，用于接收来自所述多媒体渲染进程的消息。 说明书 : 一种可扩展的基于chromium内核的多媒体播控系统技术领域[0001] 本发明涉及播控技术领域，更具体地说，它涉及一种可扩展的基于chromium内核的多媒体播控系统。背景技术[0002] 多媒体渲染系统实现方案一般采用c/s模型，这种实现方式性能比较高效，但是随着人机交互方式越来越复杂，软件的扩展、维护成本越来越高。B/S模型可以解决这些痛点，但是，目前基于chromium的浏览器仅仅能支持有限的信号源类型：如本地音视频、WEBRTC、PDF等一些传统的信号源，然而，如RTSP、RTMP、SIP、自定义的流媒体协议等信号源在chromium内核层面上没有实现，信号源甚至包括word、ppt、excel、投屏等。[0003] 其中WEBRTC为网页即时通信(英语：WebReal?TimeCommunication)的缩写，是一个支持网页浏览器进行实时语音对话或视频对话的API。RTSP(RealTimeStreamingProtocol)，RFC2326，实时流传输协议，是TCP/IP协议体系中的一个应用层协议，由哥伦比亚大学、网景和RealNetworks公司提交的IETFRFC标准。RTMP是RealTimeMessagingProtocol(实时消息传输协议)的首字母缩写。RTMP是一种设计用来进行实时数据通信的网络协议，主要用来在Flash/AIR平台和支持RTMP协议的流媒体/交互服务器之间进行音视频和数据通信。发明内容[0004] 本发明要解决的技术问题是针对现有技术的上述不足，本发明的目的是提供一种可以支持不同信号源类型的可扩展的基于chromium内核的多媒体播控系统。[0005] 本发明的技术方案是：一种可扩展的基于chromium内核的多媒体播控系统，包括：[0006] Browser进程，所述Browser进程是使用chromium提供的content层进行定制的，用于对多媒体数据源管理进程用户进行授权处理；[0007] 多媒体渲染进程，所述多媒体渲染进程为基于chromium的PPAPI框架实现，用于对多媒体信号进行解码、渲染；[0008] 多媒体数据源管理进程，所述多媒体数据源管理进程为基于chromium的PPAPI框架实现，用于管理信号源插件进程；[0009] 信号源插件进程，所述信号源插件进程用于采集信号源数据，并发送给所述多媒体渲染进程；不同信号源类型对应于不同的信号源插件进程；[0010] 所述多媒体渲染进程与所述多媒体数据源管理进程、信号源插件进程建立IPC连接。[0011] 进一步地，所述多媒体渲染进程包括：[0012] 进程间通信模块，用于负责建立与所述多媒体数据源管理进程的IPC连接、负责建立与所述信号源插件进程的IPC连接；[0013] 事件接收与转发模块，用于负责接收来自鼠标、键盘、触摸、JS脚本的消息，并根据所述消息的类型将所述消息转发给所述多媒体数据源管理进程或具体的信号源插件进程；[0014] 音视频解码模块，用于对音视频数据进行解码处理；[0015] 调度模块，用于负责调度渲染模块；[0016] 渲染模块，用于将解码后的音视频数据帧绘制到纹理上。[0017] 进一步地，所述多媒体数据源管理进程包括：[0018] 进程间通信建立模块，用于负责建立与所述多媒体渲染进程的IPC连接；[0019] 插件进程启动模块，用于根据所述多媒体渲染进程传入的信号源类型，启动相应的信号源插件进程；[0020] 事件接收与发送模块，用于接收来自所述多媒体渲染进程的消息。[0021] 进一步地，所述信号源插件进程包括：[0022] 进程间通信建立模块，用于负责建立与所述多媒体数据源管理进程的IPC连接、负责建立与所述多媒体渲染进程的IPC连接；[0023] 事件接收发送模块，用于接收来自所述多媒体数据源管理进程、多媒体渲染进程的消息；[0024] 信号源数据帧发送模块，用于接收人机交互复杂的信号源数据，当一帧数据准备完毕以后，发送给所述多媒体渲染进程。[0025] 有益效果[0026] 本发明与现有技术相比，具有的优点为：[0027] 1.信号源的解码与渲染都基于chromium内核完成，保证了系统的性能，人机交互是复杂的，而且经常变化，利用JavaScript来实现这部分功能，保证了系统的可维护性。[0028] 2.如果需要支持一种新的信号源，只需要编写相应的插件，这样保证了系统的可扩展性。[0029] 3.如果一个信号源插件崩溃，不会影响其它插件，保证了系统的稳定性。附图说明[0030] 图1为本发明的总体架构图；[0031] 图2为本发明中多媒体渲染进程的架构图；[0032] 图3为本发明中多媒体数据源管理进程的架构图；[0033] 图4本发明中信号源插件进程的架构图。具体实施方式[0034] 下面结合附图中的具体实施例对本发明做进一步的说明。[0035] 参阅图1?4，一种可扩展的基于chromium内核的多媒体播控系统，包括：[0036] Browser进程，Browser进程是使用chromium提供的content层进行定制的，除浏览器一些必备的功能以外，还用于对多媒体数据源管理进程用户进行授权处理，授权的多媒体数据源管理进程可以启动运行，Chromium是由Google主导开发的网页浏览器；[0037] 多媒体渲染进程，多媒体渲染进程为基于chromium的PPAPI框架实现，本质上是一个PpapiPlugin进程，用于对多媒体信号进行解码、渲染；[0038] 多媒体数据源管理进程，多媒体数据源管理进程为基于chromium的PPAPI框架实现，本质上是一个PpapiPlugin进程，用于管理信号源插件进程；[0039] 信号源插件进程，信号源插件进程用于采集信号源音视频数据，并发送给多媒体渲染进程；不同信号源类型对应于不同的信号源插件进程，如流媒体插件、Word插件、PPT插件、EXCEL插件等；[0040] 多媒体渲染进程与多媒体数据源管理进程、信号源插件进程建立IPC连接，IPC即Inter?ProcessCommunication，进程间通信。[0041] 系统还包括HTML文本、Render进程、GPU进程。Browser进程、Render进程读取HTML文本，Browser进程通过Render进程建立与多媒体数据源管理进程、多媒体渲染进程的IPC连接，GPU进程分别建立与Browser进程、Render进程IPC连接。[0042] 多媒体渲染进程的架构如图2所示，包括：[0043] 进程间通信模块，用于负责建立与多媒体数据源管理进程的IPC连接、负责建立与信号源插件进程的IPC连接；[0044] 事件接收与转发模块，用于负责接收来自鼠标、键盘、触摸、JS脚本的消息，并根据消息的类型将消息转发给多媒体数据源管理进程或具体的信号源插件进程；[0045] 音视频解码模块，用于对音视频数据进行解码处理；[0046] 调度模块，用于负责调度渲染模块；[0047] 渲染模块，用于将解码后的音视频数据帧绘制到纹理上；[0048] 信号源的解码与渲染都基于chromium内核完成，保证了系统的性能。[0049] 多媒体数据源管理进程的架构如图3所示，包括：[0050] 进程间通信建立模块，用于负责建立与多媒体渲染进程的IPC连接；[0051] 插件进程启动模块，用于根据多媒体渲染进程传入的信号源类型，启动相应的信号源插件进程；[0052] 事件接收与发送模块，用于接收来自多媒体渲染进程的消息。[0053] 信号源插件进程的架构如图4所示，包括：[0054] 进程间通信建立模块，用于负责建立与多媒体数据源管理进程的IPC连接、负责建立与多媒体渲染进程的IPC连接；[0055] 事件接收发送模块，用于接收来自多媒体数据源管理进程、多媒体渲染进程的消息；[0056] 信号源数据帧发送模块，用于接收人机交互复杂的信号源数据，当一帧数据准备完毕以后，发送给多媒体渲染进程；[0057] 人机交互是复杂的，而且经常变化，利用JavaScript来实现这部分功能，保证了系统的可维护性，如果需要支持一种新的信号源，只需要编写相应的插件，这样保证了系统的可扩展性，如果一个信号源插件崩溃，不会影响其它插件，保证了系统的稳定性。[0058] 以上仅是本发明的优选实施方式，应当指出对于本领域的技术人员来说，在不脱离本发明结构的前提下，还可以作出若干变形和改进，这些都不会影响本发明实施的效果和专利的实用性。

专利地区：河南

专利申请日期：2023-02-02

专利公开日期：2024-11-29

专利公告号：CN116193211B