用于混合式拓扑媒体会议系统的方法和系统技术方案

公开了会议系统的示例混合式拓扑。混合式拓扑的示例可以包括多个端点和中央实体。所述多个端点中的每一个可以向所述集中式实体提供其主要视频流和音频流。集中式实体将主要发言者流和混合音频流提供给所述多个端点参与者中的每一个。此外，对于非发言者视频，多个端点中的一些建立与所述多个端点参与者中的其它者的低带宽/低分辨率媒体流。

【技术实现步骤摘要】
用于混合式拓扑媒体会议系统的方法和系统
本专利技术涉及会议系统。
技术介绍
随着每日应用和服务以惊人的速度迁移到互联网协议（IP）网络，并且随着各种各样的多媒体会议设备的增长，越来越多的人使用多媒体会议作为其通信工具。现在，多媒体会议通信可以使用多个会议技术来承载。下面是会议技术的几个示例：AVC多媒体会议方法和媒体中继会议方法。AVC表示高级视频编码。在该公开中，术语：多媒体会议、视频会议（具有或者没有内容）和音频会议可以互换地使用，并且术语视频会议可以被用作它们的代表性术语。通常，三个或更多参与者之间的AVC多点会议要求AVC多点控制单元（MCU）。AVCMCU是典型地位于网络的节点中或者位于从多个端点接收若干信道的终端中的会议控制实体。根据某些准则，AVCMCU处理音频和视频信号并且经由所连接的信道的集合而将它们分布给每一个参与端点。AVCMCU的示例包括RMX®2000，其从Polycom公司可获得（RMX是Polycom公司的注册商标）。可以被称为AVC端点（AVCEP）的AVC通信方法中的终端是网络上能够提供与另一个AVCEP或者与MCU的实时、双向音频和/或视听通信的实体。AVCEP和MCU的更全面的定义可以在国际电信联盟（“ITU”）标准中找到，诸如但不限于H.320、H.324和H.323标准，其可以在ITU网站：www.itu.int上找到。还被称为AVCMCU的常用MCU可以包括多个音频和视频解码器、编码器和媒体组合器（音频混合器和/或视频图像构建器）。MCU可以使用大量处理能力以处置可变数目的参与者（AVCEP）之间的音频和视频通信。通信可以是基于各种通信协议和压缩标准，并且可以涉及不同类型的AVCEP。MCU可能需要将多个输入音频或视频流分别组合成至少一个单个音频或视频输出流，其与将输出流所发送到的至少一个出席者的AVCEP的性质兼容。从端点接收的经压缩的音频流被解码并且可以被分析以确定将选择哪些音频流以用于混合成会议的单个音频流。在本公开中，可以互换地使用术语解码和解压缩。会议可以具有一个或多个视频输出流，其中每一个输出流与布局相关联。布局限定接收流的一个或多个出席者的显示器上的会议的外观。布局可以划分成一个或多个片段，其中每一个片段可以与某一出席者经由他/她的AVCEP所发送的视频输入流相关联。每一个输出流可以从若干输入流构造，从而导致连续存在（CP）图像。在CP会议中，远程终端处的用户可以同时地观察会议中的若干其他参与者。每一个参与者可以显示在布局的片段中，其中每一个片段可以为相同尺寸或不同尺寸。与布局的片段相关联并且显示的参与者的选择可以在参与到相同会话中的不同出席者之中变化。第二种类型的通信方法是媒体中继会议（MRC）。在MRC中，媒体中继MCU（MRM）从每一个参与的媒体中继端点（MRE）接收一个或多个流。MRM向每一个参与端点中继从会议中的其它端点所接收的多个媒体流的集合。每一个接收端点使用多个流以根据布局而生成视频CP图像以及会议的混合音频。将CP视频图像和混合音频播放给MRE的用户。MRE可以是具有以下能力的会话中的出席者的终端：从MRM接收所中继的媒体并且根据来自MRM的指令递送经压缩的媒体。邀请想要就MRC、MRM或MRE的示例了解得更多的读者阅读美国专利No.8,228,363，其通过引用并入本文。在下文中，术语端点也可以表示MRE。在一些MRC系统中，传送MRE在两个或更多流中发送其视频图像；每一个流可以与不同的质量等级相关联。质量可以在帧速率、分辨率和/或信噪比（SNR）等方面不同。以类似方式，每一个传送MRE可以在两个或更多流中发送其音频，这两个或更多流可以通过例如压缩比特率而彼此不同。这样的系统可以使用多个流来提供布局中的不同片段尺寸、由每一个接收端点使用的不同分辨率等。另外，多个流可以用于克服分组丢失。现在，MRC变得越来越流行。许多视频会议系统在一个或多个流内并行地递送多个质量等级。对于视频，例如质量可以以数个域表述，诸如时间域（例如，每秒帧）、空间域（例如，HD对比CIF）和/或质量（例如，锐度）。例如可以用于多质量流的视频压缩标准为H.264AVC、H.264附录G（SVC）、MPEG-4等。关于诸如H.264之类的压缩标准的更多信息可以在ITU网站www.itu.int或者在www.mpeg.org处找到。H.323是ITU标准。要求想要就视频会议标准和协议了解得更多的读者在ITU网站：www.itu.int上或者在互联网工程任务组（IETF）网站：www.ietf.irg上访问国际电信联盟（“ITU”）。AVC多点会议系统、MRC、MCU、AVC端点、MRE、网络会议客户端和VMR是本领域普通技术人员所已知的并且已经在许多专利、专利申请和技术手册中描述。因此，将不对这些进行进一步描述。下面是描述视频会议系统的专利和专利申请的示例：美国专利No.6,496,216、No.6,757,005、No.7,174,365、No.7,085,243、No.8,411,595、No.7,830,824、No.7,542,068、No.8,340,271、No.8,228,363以及其它专利和专利申请。在两种类型的通信方法AVC和MRC中，需要中央实体以用于处置信令和媒体流（音频、视频），例如（分别地）MCU或MRM。为了建立视频会议系统，端点可以调用中央单元，诸如MCU或虚拟MCU。虚拟MCU（VMCU）可以是网络设备，例如控制服务器，其可以与多个MCU和多个端点通信。用户发起预留会议和/或自组会议可以与VMCU通信。如果在一个或多个MCU上可获得充足的资源，则做出预留并且分配连接编号。当用于会议的时间出现时，将一个或多个MCU分配给会议并且然后参与者连接到会议。要求想要就VMCU了解得更多的读者阅读多个专利和专利申请，诸如美国专利No.7,174,365、美国专利No.7,492,730以及许多其它专利和专利申请。VMCU的示例可以是诸如由Polycom公司销售的DMA®之类的产品（DMA是Polycom公司的注册商标）。在建立会话之后，每一个端点将其媒体流发送给MCU或MRM。MCU或MRM根据通信方法的类型处理媒体流并且将相关流传递给接收端点。沿着该描述和权利要求，可以使用术语MCU作为用于MRM和AVCMCU的代表性术语。MCU可以包括多点控制器（MC）和多点处理器（MP）。MC可以是位于网络处的分组-切换（SW）网络实体，其提供参与多点会议中的三个或更多终端的信令和控制。分组SW网络的示例可以是IP网络。MC还可以连接对等会议中的两个终端，对等会议随后可以发展成多点会议。MC为所有终端提供能力协商以实现公共等级的通信，并且还可以控制会议资源。MC信令和控制可以通过使用诸如SIP之类的标准信令协议而实现。SIP表示会话发起协议。要求想要就SIP了解得更多的读者访问IETF（互联网工程任务组）网站：www.itef.org。然而，MC不执行音频、视频和数据的混合或切换。多点处理器（MP）是网络上提供多点会议中的音频、视频和/或数据流的集中式处理的媒体实体。MP在MC的控制之下提供媒体处理，诸如解码、混合、合成、编码、切换、路本文档来自技高网...

【技术保护点】
一种用于视频会议系统的集中式实体，包括：网络接口；音频模块，配置为从网络接口接收音频流并且向网络接口发送音频流；视频模块，配置为从网络接口接收视频流并且向网络接口发送视频流；以及控制模块，配置为管理与多个网状连接的端点的连接，其中控制模块配置为使集中式实体：建立与所述多个网状连接的端点中的每个端点的连接；在视频模块处从所述多个网状连接的端点中的每个端点接收视频流；以及从视频模块向从所述多个网状连接的端点中的一个或多个端点返回比由所述一个或多个端点从所述多个网状连接的端点中的其它端点接收的视频流高的分辨率的所选择的视频流。

【技术特征摘要】
2014.03.31 US 61/9730591.一种用于视频会议系统的集中式实体，包括：网络接口；音频模块，配置为从网络接口接收音频流并且向网络接口发送音频流；视频模块，配置为从网络接口接收视频流并且向网络接口发送视频流；以及控制模块，配置为管理与多个网状连接的端点的连接，其中控制模块配置为使集中式实体：建立与所述多个网状连接的端点中的每个端点的连接；在视频模块处从所述多个网状连接的端点中的每个端点接收视频流；以及从视频模块向从所述多个网状连接的端点中的一个或多个端点返回比由所述一个或多个端点从所述多个网状连接的端点中的其它端点接收的视频流高的分辨率的所选择的视频流。2.根据权利要求1所述的集中式实体，其中所选择的视频流对应于活跃扬声器。3.根据权利要求1所述的集中式实体，其中控制模块进一步配置为使集中式实体：从所述多个网状连接的端点中的一个端点接收内容流；以及向从所述多个网状连接的端点中的一个或多个端点发送该内容流。4.根据权利要求1所述的集中式实体，其中控制模块进一步配置为使集中式实体：在视频模块处从传统端点接收视频流；从视频模块向所述多个网状连接的端点中的每个端点转发视频流；以及从视频模块朝向传统端点转发来自所述多个网状连接的端点中的每个端点的视频流。5.根据权利要求4所述的集中式实体，其中控制模块进一步配置为使集中式实体：在从视频模块向所述传统端点转发视频流之前，对从所述多个网状连接的端点接收的视频流进行编码变换。6.根据权利要求4所述的集中式实体，其中控制模块进一步配置为使集中式实体：经由媒体编码变换引擎从视频模块朝向传统端点转发视频流。7.根据权利要求1所述的集中式实体，其中控制模块进一步配置为使集中式实体：从所述多个网状连接的端点接收音频流；以及向媒体编码变换引擎转发视频...

【专利技术属性】
技术研发人员：E德克，
申请(专利权)人：宝利通公司，
类型：发明
国别省市：美国,US