CN1111775A - 音频会议系统 - Google Patents
音频会议系统 Download PDFInfo
- Publication number
- CN1111775A CN1111775A CN94119071A CN94119071A CN1111775A CN 1111775 A CN1111775 A CN 1111775A CN 94119071 A CN94119071 A CN 94119071A CN 94119071 A CN94119071 A CN 94119071A CN 1111775 A CN1111775 A CN 1111775A
- Authority
- CN
- China
- Prior art keywords
- audio
- mentioned
- volume
- workstation
- audio stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims description 28
- 230000000007 visual effect Effects 0.000 claims description 24
- 230000015572 biosynthetic process Effects 0.000 claims description 22
- 230000001105 regulatory effect Effects 0.000 claims description 5
- 230000004044 response Effects 0.000 claims description 4
- 230000001276 controlling effect Effects 0.000 claims description 3
- 230000005236 sound signal Effects 0.000 description 24
- 238000005755 formation reaction Methods 0.000 description 19
- 230000005540 biological transmission Effects 0.000 description 11
- 230000008859 change Effects 0.000 description 10
- 238000012545 processing Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000005070 sampling Methods 0.000 description 6
- 230000003139 buffering effect Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 239000012467 final product Substances 0.000 description 2
- 230000001788 irregular Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 241000239290 Araneae Species 0.000 description 1
- 206010008531 Chills Diseases 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001143 conditioned effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000008676 import Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004615 ingredient Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- GOLXNESZZPUPJE-UHFFFAOYSA-N spiromesifen Chemical compound CC1=CC(C)=CC(C)=C1C(C(O1)=O)=C(OC(=O)CC(C)(C)C)C11CCCC1 GOLXNESZZPUPJE-UHFFFAOYSA-N 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/10—Architectures or entities
- H04L65/1059—End-user terminal functionalities specially adapted for real-time communication
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/1066—Session management
- H04L65/1083—In-session procedures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/403—Arrangements for multi-party communication, e.g. for conferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
- H04M3/567—Multimedia conference systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
- H04M3/568—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities audio processing specific to telephonic conferencing, e.g. spatial distribution, mixing of participants
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/15—Conference systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/42136—Administration or customisation of services
- H04M3/42153—Administration or customisation of services by subscriber
- H04M3/42161—Administration or customisation of services by subscriber via computer interface
Abstract
一种计算机工作站,在音频会议中从网上接收多
音频输入流,并将其存入不同队列而保持独立。取自
各队列的数字样本送到音频适配卡(28)供输出。音
频适配卡上的数字信号处理器(46)使各音频流乘以
各自的加权参数,再将其相加以供输出,从而各音频
输出流的相对音量可控。计算音量数据的每一块的
音量并向用户显示,使用户可见到各音频输入流的独
立的音量。还向用户提供各音频输入流的音量控
制。
Description
本发明涉及由计算机工作站对从网络上接收的多音频数据流的处理。
一般情况下音频信号是通过标准的模拟性质的电话线路传送的。但是,随着装备局部区域网络(LAN局域网)的地点的增多和多媒体通信重要性的增长,出现了相当大量的对使用局域网传送音频信号的兴趣。这一工作在例如“局域计算机网络”一书(由P.Ravasio、G.Hopkins、和N.Naffah编纂;North Holland出版社1982年版)中的两篇文章有阐述,这两篇文章是:“使用局部区域网络以传送在线声音”由D.Cohen撰写,第13-21页;以及“在以太网主干线上的音频传送”,作者为P.Ravasio、R.Marcogliese、及R.Novarese,第39-65页。这样一种方案的基本原理是:第一终端或工作站以固定的采样率(例如8kHz)对音频输入信号以数字方式进行采样。然后把一系列样本组合成一个数据包以便通过网络发送到第二终端,该终端再把样本送到扬声器或类似的设备供重放之用,这同样是以固定速率进行。
使用局域网以传送音频信号所带来的问题之一是通过网络的传输时间是变化的。这样,在目标节点上数据包的到达既有延迟又不规则。如果这些数据包以不规则的方式重放,那末它对音频信号的清晰度有极其不良的影响。因此,通过局域网发送音频的方案需要在一定程度上使用在接收端的缓冲技术以吸收这些不规则性。必须注意避免在原始话频信号和目标端音频输出之间引入过多的延迟,这将使自然交互双向对话变得很困难(就象在越洋的常规长途电话中过多的延迟会令人非常讨厌一样)。在IBM技术公开公报36卷第4期,1993年4月,第255-257页中有一篇文章题为“共享数据包网络用的自适应性音频重放算法”,作者为B.Aldred、R.Bowater、和S.Woodman中描述了一种系统,在该系统中超过一定的最大允许时间限度以后到达的数据包将被取消。缓冲量的大小根据被取消的数据包的数量而自适应地予以控制(也可以用别的合适的关于其延迟到达的量度来控制)。如果被取消的数据包的数量大,缓冲的程度就增加,而当被取消的数据包数量小,缓冲程度也减小。缓冲的大小是通过暂时改变重放速率来改变的(这会影响音调;一个不太被注意的技术将是检测静音的时间长度并根据其合适程度人为地增加或减少这一时间)。
和双向或点对点的通信相反,另一个音频通信的重要方面是牵涉到多点通信的会议通信。在传统的模拟性质的电话线路上实现音频会议时,它要求每个会议参加者送出音频信号到一个中心点。中心点把送来的各信号进行混合,可能还要调节不同的电平,然后把从所有参加者(从该特定节点来的信号除外)的信号的总和送到各个参加者。美国专利4650929号阐明了一种集中式视频/音频会议系统,在该系统中每个人可以调节其它参加者的相对音量大小。
利用集中式混合的节点通常被称为多点控制单元(MCU),这种用法已被转到若干多媒体(音频和视频)工作站会议系统中。例如美国专利4710917说明了一种多媒体会议系统,其中的每个参加者都把音频发送到中心混合节点,并从那儿接收音频信号。其它的多媒体会议系统在“分布式多方桌面会议系统:MERMAID”一文中有说明,该文作者为K.Watabe、S.Sakata、R.Maeno、H.Fukuoka、及T.Ohmori,CSCW′90的第27-38页(计算机支持的合作性工作会议论文集,1990年,洛杉矶),另一篇文章为“宽带网络中个人多媒体多点通信服务”,作者为E.Addeo、A.Gelman和A.Dayao,IEEE GLOBECOM,卷1,第53-57页,1988年。
但是,利用集中式MCU或总和节点的方式存在几个缺点。首先,大多数局域网的结构是基于同级对同级的安排(a peer to peer arrangement)的,因此没有一个明显的中心节点。此外,上面所说的系统完全依赖于指定的中心节点能连续可用这一条件才能运行会议。另外还可能有回声抑制的问题(中心节点必须小心地不要把从某个将总和信号向它回放的节点上的音频信号包括在内)。
这些问题可以用分布式音频会议系统而得以避免,这个系统中的每个节点都从参加会议的每个节点接收独立的音频信号。美国专利5127001号说明了这样一个分布式系统,并且讨论了由于数据包在网络中传递的不同的转移时间而引起的同步问题。美国专利5127001号通过对从各个源节点来的音频数据包保持独立的队列来克服这一问题。这些方法可以有效地吸收到达时间的抖颤,就象上面所说的用于简单的点到点通信中的方法一样。在规定的时间段内读出一组音频数据包,每个队列取出一个数据包然后加在一起以供回放。
音频会议系统所面临的问题之一,象上面所提到的MERMAID系统所发现的,是在任何给定的时刻确定谁正在发言。美国专利4893326号说明了一种多媒体会议系统,其中各工作站自动地检测它的用户是否正在发言。然后这一信息被送到一个中心控制节点,该节点则切换视频使得每个与会者从它们的屏幕上看到当前的发言者。这样的系统同时需要视频和音频的操作能力,并且还要依靠中心视频切换节点,所以它不能用于全分布式系统。
在H.Tanigawa、T.Arikawa、S.Masaki和K.Shimamura等人在IEEE INFOCOM91会议录,卷3、第1127-1134页上发表的题为“个人多媒体-多点远距会议系统”一文中描写了一种分布式多媒体会议系统。这个系统为立体声工作站提供了声音定位功能,随着含有会议参加者的视频信号的窗口从右向左通过屏幕时,相应的音频信号的视在源也作同样的移动。这种方法可提供有限的协助以判别发言者。在日本专利摘要02-123886中叙述了一种更为复杂的措施,其中使用了条形图来描述输出话音的电平,并伴随一个相邻的含有音频源的视频的窗口。
由此可见,以前的技术叙述了多种不同的音频会议系统。虽然常规的集中式电话音频会议既已广泛应用而且从技术角度来看又是很容易理解的,但是要在桌面系统的环境下提高音频会议实施中的性能则还有许多工作要做。
因此,本发明将提供一种连接到网络上的计算机工作站,它从网络接收多个音频输入流,每个音频流含有一个数字音频样本序列,此工作站包括:
用于把从各音频输入流来的数字音频样本存储在独立的队列中的装置;
用于形成含有从每个队列来的一个数字音频样本的集合序列的装置;
用于对数字音频样本的每个集合产生一个加权和的装置,其中的每个音频流都带有一个加权参数;
用于从加权和的序列产生音频输出的装置;
其特征在于一种装置,它响应于用户的输入,以便调节所述加权参数从而控制在多个音频流的音频输出中的相对音量。
本发明认识到,作为在一个分布式网络中提供的音频会议系统,这个网络中的各个节点都从所有其它与会者接收独立的音频流,该系统自然容许额外的功能,这些功能在集中式会议系统中在过去只有在克服许多困难并在高昂代价下才能实现。特别是,每个用户都可根据他个人的意愿调节所有其他与会者的相对音量。这可能是非常需要的,因为,例如他们需要集中注意会议的某一特定方面,或者因为语言上的问题(例如,可能有的人有浓重的口音使别人难以听懂,或者会议上有同声传译)。此外,即使在会议进行期间,系统也要响应用户的输入以改变不同与会者的相对音量。为了允许这种控制,输入的音频信号在被相应的音量控制系统加权之前仍保持独立而根据它们的来源不同存放在不同的队列中(队列是逻辑上独立的存储器,尽管在物理上它们可以是相邻的或组合在一起的)。只有在这样以后它们才被合并在一起以产生最后的音频输出。因此本发明认为分布式音频会议系统是特别适合于对相对音量提供独立的控制。
工作站最好还能含有一种提供可视指示的装置,它为每一个上述的音频输入流指明该输入流当前是否处在静音状态。它可以克服音频会议中一个公认的问题,即确定谁在发言。这种可视指示可以仅仅是某种形式的通/断指示器,例如一个指示灯之类或其类似的东西,但在优先实施例中,这是由一种能为每个上述的多音频输入流指明在该音频流中的瞬时音量的显示器来实现的。换句话说,该显示器提供了有关的与会者的音量的完整的指示。音量输出可根据对数字音频样本的连续的均方根值作计算而得到,或者如果处理能力有限,也可用简单的算法,如利用在预定的样本数中最大的数字音频值来计算而得。一般说来,输入的音频数据以块的形式到达。每个块里含有预定数量的数字音频样本,而上述的可视指示对每个音频数据块作更新。因此,音量的数字一般是在每块的基础上作计算的。
上述的可视指示最好在其显示的相邻处还有该音频输入流的来源的一个视觉表示,例如一个视频的或静止的图象。前一种图象需要一个完整的多媒体会议网络,而静止图象则可以在带宽低得多的网络上实现,这种低带宽网不能够支持传送视频信号。这种可视指示不论其是静止的或活动的,都可以使人们易于判别任何音频源。
工作站最好还包括用于向用户提供上述加权参数值的可视指示的装置,这种装置能对用户用鼠标器调整上述加权参数的操作作出反应。这可以用滚动条或其类似指示来实现,每个音频输入流有一个指示,并且位于该输入流的输出音量的可视指示的旁边。更为方便的是计算机工作站还包括能禁止上述多个音频输入流中的任何一个音频输出的装置。这样,用户就可以有效地拥有一整套对每个音频输入流作音量控制的装置了。
本发明还提供了一种运行计算机工作站的方法,这种工作站接在网络上以接收多个音频输入流,每个音频流含有数字音频样本的序列,该方法包括下列各步骤:
把从每个音频输入流来的数字音频样本存储在单独的队列中;
形成一个含有从每个队列来的一个数字音频样本的集合的序列;
对每个数字音频样本的集合产生一个加权的和,每个音频输入流都附带一个加权参数;
从加权和的序列产生一个音频输出;
其特征在于,响应用户输入,调节上述加权参数以控制多个音频流的音频输出中的相对音量。
本发明的一个实施例将结合例子并参考下列附图而予以说明:
图1是计算机网络的示意图;
图2是用于音频会议的计算机工作站的简化方块图;
图3是图2的计算机工作站的音频适配卡的简化方块图;
图4是对输入的音频数据包所执行的处理过程的流程图;
图5表示等待重放的输入音频数据包的队列;
图6是说明音频适配卡上的数字信号处理器执行的处理过程的流程图;
图7表明图2的工作站向用户呈示的典型的屏幕界面;
图8是表明在图2的工作站上运行的主要软件的各组成部分的简化方块图;
图1表示在局部地区网络(局域网,LAN)2中链接在一起的计算机工作站A-E的示意图。这些工作站正在参加一个多路径的会议,这里的每个工作站都把自己的音频信号广播到会议的所有其它工作站。这样,每个工作站都从所有其它的工作站接收独立的音频信号。图1所示的网络是一种令牌环网结构。在这种结构中有一个令牌在各工作站间轮转。只有当前拥有令牌的那个工作站被允许向别的工作站发送报文。应该理解,一个报文环绕环网的物理传输时间是极其短促的。换句话说,例如A发送一个报文,则它几乎是同时被所有其它终端所接收。这就是为什么令牌系统被用来防止由于两个节点试图同时发送报文而引起的干扰。
下面将要详细说明,在局域网上单向的音频通信需要的带宽为64千赫。在图1的会议中,每个节点要把它的音频信号广播给其余4个节点,这意味着总的带宽要求为5×4×64千赫(1.28兆赫)。这个带宽是很宽裕地处在标准的令牌环网的容量之内,因为它能支持4或16兆位每秒的传输率。但是要认识到,对于更大的会议则带宽的要求将很快成为一个问题,尽管将来的网络期望会提供更高的带宽。
请注意,本发明可以在除了令牌环网以外的许多不同的网络结构或配置上实现,当然要考虑到为了支持音频会议所需的有关带宽、等待时间等等的技术要求是应该得到满足的。
图2是能够用于图1所示的网络中的计算机系统的简化示意图。此计算机有一个系统单元10、一个显示屏幕12、一个键盘14和一个鼠标器16。系统单元10包括微处理器22,半导体存储器(ROM/RAM,只读/随机存储器)24、以及传送数据用的总线26。图2中的计算机可以是任何常规的工作站,例如IBM的PS/2计算机。
图2的计算机装有两块适配卡。每一块是令牌环网适配卡30。这块卡加上所带的软件可以让报文发送到图1所示的令牌环网上或从网上接收报文。令牌环网卡的运行是众所周知的,所以在这里不作详细介绍。第二块卡是音频卡28,它接到一个话筒及一个扬声器(未示出)以便作音频的相应的输入和输出之用。
音频卡的更加详细的情况示于图3中。所示出的并且是用在这个特定实施例中的卡是一种M-波卡,这种卡是IBM提供的,但也存在着别的可以完成模拟功能的卡。这块卡有一个模数转换器42用于把从所带的话筒40来的输入音频信号数字化。模数转换器连接到一个编码译码器(CODEC)44,它以44.1千赫的采样速率把输入音频信号采样成16个二进位的样本(相当于激光唱盘的标准采样率/大小)。数字化后的样本然后通过一个双重缓冲器48送到卡上的数字信号处理器(DSP)46(即编码译码器在从双缓冲器的一半读出前一个样本的同时,把一个样本装入双缓冲器的另一半)。数字信号处理器由存放在卡上的半导体存储器52中的一个或多个程序控制。数据可以由数字信号处理器在PC的主总线上来回传送。
需要重放的音频信号由数字信号处理器从PC总线26接收,并经过以从话筒输入音频的相反方式的处理。这就是说,输出的音频信号经过数字信号处理器46和双重缓冲器50而到编码译码器44,从那儿再到数模转换器54。最后送到扬声器56或其它合适的输出设备。
在特定的所示实施例中,数字信号处理器在程序控制下把从编码译码器出来的样本从44.1千赫的16位用标准的再采样技术转换成相当于CCITT(国际电报电话咨询委员会)标准G.711的具有8千赫采样率并在μ-规律标度(基本上是对数标度)上有8位的样本的新的数字信号。这样,传送到工作站上以便向其它终端传输的信号的总的带宽是64千赫。数字信号处理器对从PC接收来的输入进行相反的转换,即再次用已知的再采样技术把8位8千赫的信号转换成16位44.1千赫的信号。请注意,在这两种采样形式之间的转换之所以需要,仅仅是由于对硬件的特定选择,而对本发明并无直接的影响。因此,举例来说,许多别的音频卡含有对8千赫形式的内在的支持,即编码译码器可以按照G.711格式运行从而可在整个过程中都用8千赫的形式(另外的方案是:在网络传输中仍保留44.1千赫的样本,不过这需要宽得多的带宽和大大增加的处理速度使得这种方案不太可能实现,除非有特殊的要求让传输的音频信号具有激光唱片(CD)的质量,对于一般的话音通信,G.711格式的64千赫的带宽已经足够了)。
数据在音频适配卡和工作站之间是以64字节的块来传送的:即8毫秒的音频数据,用于以8千赫采样率的8位数据。这样,工作站只处理整块的数据,而工作站发送或接收的每个数据包一般包含单个的64字节的数据块。将块的大小选择为64个字节是一种折衷,一方面要尽量减少系统的分组程度(granularity,它引起延迟),另一方面要在既考虑到工作站内部处理又考虑到在网络上传输的情况下维持其效率。在别的系统中,举例而言,32或128字节的块大小也可能是合适的。
计算机工作站在传输音频数据方面的运行在已有技术中是众所周知的,所以这里不作详细介绍。主要是,音频卡或者从话筒接收模拟形式的信号、或者从别的诸如激光唱机这样的音频源接收一个输入信号,并产生数字音频数据块。然后这些块被传送到工作站的主存储器,再从那儿送到局域网适配卡(在某些结构中可以把数据块直接从音频适配卡传送到局域网适配卡而不必经过工作站的存储器)。局域网适配卡产生含有数字音频数据的数据包并加上报头信息,它规定了源节点和目标节点,然后这个数据包就传输到网上以便到达所需的接收节点。应该理解,在任何双向或多路通信中,这个传输过程将在工作站上和下面叙述的接收过程同时执行。
关于工作站接收音频数据包的处理过程如图4所示。每当一个新的数据包到达时(402步),局域网适配器就通知在工作站中的微处理器上执行的程序,向程序提供判别数据包来源的信息。然后程序就把到来的64字节的音频块传送到主存储器中的队列中(404步)。如图5所示,在主存储器500中的队列实际上是含有从各个不同的源节点来的音频块的一组独立的子队列。因此,一个队列含有从一个源节点来的音频块,另一个队列含有从另一个源节点来的音频块,如此等等。在图5中有3个子队列501、502、503,分别来自源节点B、C、D的音频数据;子队列的数量当然随音频会议中与会者的数量而变化。程序利用每个收到的数据包中关于判定源节点的信息以便把来到的音频数据块分配到正确的队列中去。指针PB、PC和PD指明队列末尾的位置并且在每当有新数据包加入后更新此位置。数据包从子队列的底端处取走以便去作进一步的处理(如图5中的“输出”所示)。因此,图5中的子队列实际上就是标准的先进先出队列,从而可以用常规的编程技术来实现。请注意,作为一直到现在所叙述的、对到来的音频包的处理,除了支持多个(并行)队列以外,都和现有技术方法完全类似,因此不论对个别的子队列或对整体的综合队列,如果需要都可以使用等价的缓冲技术。
音频适配卡上的数字信号处理器所执行的操作示于图6中。数字信号处理器以循环方式运行,每8毫秒处理一组新的音频块以便保证连续的音频输出信号。这样,数字信号处理器每8毫秒就利用一次直接内存访问去从相应于不同节点的各个队列中读出一个音频块,即从如图5所示的队列B、C和D的底端读出一个块(602步,在此情况下M=3)。这些块以表示相同的时间段而进行处理:在最后输出时它们将被加在一起以产生在那个时间段的单一的音频输出。因此,数字信号处理器有效地执行了一种对多个音频输入流的数字混合功能。使用一个查阅表,在64字节的块中的各别的样本就从G.711格式(它主要是对数式的)转换成为线性标度的(604步)。每个各别的样本然后再乘以加权参数(606步)。对于每个收到的音频数据流,另外还带有一个单独的加权参数;即对于图5中的三个子队列,对从节点B来的音频流有一个加权参数,从节点C来的音频流有一个,从节点D来的音频流也有一个。这些加权参数用于控制从不同源来的音频信号的相对音量。
数字信号处理器为每个音频流保留一个运行着的(连续的)均方根(rms)值的记录。一般情况下,这样一个均方根值是为每个音频数据块(即每8毫秒)通过生成该块中各个值的和及其平方的和而产生的。这个均方根值代表该各别的音频输入流的音量并用于向用户提供有关音量的信息,这将在下面叙述。
一旦数字音频样本乘上适当的加权参数以后,它们被加在一起(608步;请注意,这可以和606步的处理工作有效地并行发生)。这样就产生了一个单一的数字音频样本的序列,它代表多个输入音频流的加权和。这个数字音频样本序列经过再采样成44.1千赫(610步,不过前面已经说明,这是取决于硬件的,并不和本发明有直接的相关性),然后再送到编码译码器(612步)以提供给扬声器。
请注意,用于产生音量可调节的实际的数字信号处理器的处理工作和图6所示的可以有某些变化,但其最终结果实际上是类似的。引入这些变化一般说来是为了最大程度地提高计算效率或减少对数字信号处理器的要求。例如,如果处理器的能力有限,则音量控制可以在从μ-规律转换出来之时实现。这样,在找到正确的查找值后(604步),其实际读出值可以根据信号的音量是要比其正常值增加还是减小而把表格的位置提高或降低若干个预定位置而确定。在这种情况下,加权参数实际上就是调整查阅表上往上移或往下移的步数(显然考虑到这一事实:G.711格式根据原来的振幅是正还是负而将它们分开,而音量调节不能把一个(正或负)转换成另一个)。上述途径在计算上是简单的,但它只能提供分级的而不是连续可调的音量控制。另一种可能的方法是对μ-规律的数字附加上音量控制值或加权参数的对数。这个方法利用对数加法以便在604步的标度转换之前有效地执行606步中的乘法,这种加法对大多数处理器来说在计算代价上要比乘法更便宜。然后其结果可以转换回去成为线性标度(604步)以便和别的音频流混合。这个方法确定可以作精细的音量控制,如果查阅表是足够详细的话(不过,请注意其输出仍限制在16位),一般情况下,加权参数的对数可以从查阅表得到,或者也可以由控制应用程序提供已经是对数的形式。当然,当音量被调节时,只需要计算一个新的对数值即可,但这种情况很可能是极少发生的。
类似地,如果能利用的处理能力不足以执行连续的均方根值音量测量,那么也许可以每隔一个数据块进行一次处理,或者另外的办法是可以用较为简单的计算算法,例如把相继的样本之间的差的绝对值相加。请注意,平均值的相加可以在604步之前(即在标度转换之前)用对数加法进行。一个更加简单的方法是直接使用任何一个音频块中最大的样本值作为音量指示值。
图7表示参加音频会议的工作站用户所看到的屏幕700。像前面的讨论所说的,这包括接收三个不同的音频数据流,当然本发明并不仅仅局限于三个与会者。图7的屏幕用虚线分成三个区域701、702、703,每一区域表示一个与会者,但实际上这些虚线并不出现在屏幕上。与每个与会者相联的是一个框724,里边含有与会者的姓名(在我们的情况下就是B、C、D)。另外还有一个图象窗口720,它可以用来包括一个声音源的视频图象,它是随音频信号一起在网络上传送的,或者也可能是一个静止的位图(这可能是在会议开始时由音频源提供的,也可能是已经局部地存在于工作站中,并随着对该与会者的姓名的响应而显示出来)。对于与会者D,由于没有可用的视频信号或静止图象,所以显示的是个空窗口。对在图象窗口中选择什么样的显示(空、静止或视频图象)取决于工作站的硬件、网络的带宽、以及有关信息的可用性。
在图象窗口下面是一个音量显示721(一个音量单位表、VU表),它指示该音频流的瞬时音量(由图6中的块608计算而得)。显示中实线的长度说明了音频流的音量。如果从该与会者处没有音频信号送来,则该实线的长度为零(即它就消失)。因此,用户可以通过观看谁的音量表是活动的来确定谁在会议上说话。
在音量显示的下面是音量控制条722,它容许用户调节该与会者的相对音量。其实现方法是让用户按下(音量控制)条的两端中任何一端的“+”或“-”按钮以便相应地增加或减少音量。这样做具有相应地增加或减少数字混合中的加权参数的效果。在音量控制条中间的指示表明当前的音量设置(即当前的加权参数的值)。
最后,在姓名框724的边上是静音按钮723。按下这个按钮可交替地使该与会者的音频输出被禁止或被允许。当音频输出被禁止时,加权参数被置成零,而当输出被允许时,加权参数恢复到以前的值(即由音量控制条所指示的值)。如果从某个与会者来的音频在当前被禁止输出时,则这种状态用在静音按钮上叠加一个十字叉来表示(在图7中所有三个音频输出当前都是被允许的)。注意在使用上述的数字信号处理器进行处理时,当静音按钮为通而音频输出被禁止时,则音量单位(VU)表将显示零。如果需要的话,则更为直接的办法是修改此系统,使音量单位表改为显示在音量输出实际上是被允许时的那种情况下所产生的信号电平。
图8显示了为了向用户提供图7所示的用户界面工作站所运行的主要的软件组成部分。工作站被操作系统814所控制,这种操作系统可以是例如微软公司所提供的窗口软件Windows。在工作站上还存在着相应的通信软件816以启用局域网通信(在某些情况下通信软件可以实际上包括在操作系统内)。操作系统和通信软件通过设备驱动程序818而与两个适配卡(即令牌环网卡和音频适配卡)相互作用,这在本项技术中是熟知的。音频的总体处理工作由应用程序810控制。这利用了应用支持层812,这一支持层是用Visual Basic(一种计算机语言)实现的,这种语言可从微软公司得到。应用支持层的目的是方便应用程序的开发,特别是牵涉到用户界面的开发,但当然也可以让应用程序直接和操作系统一起工作。
应用程序根据已知的程序设计技术控制窗口框720的内容。例如,利用Visual Basic所提供的功能可以被用在音量单位表上,这种语言可以有效地对与各表(meters)相关的所有图形作出反应,对应用程序来说所需做的一切就是提供有关的数值。由于Visual Basic是中断-驱动的,要完成上述工作是很容易的,只要让数字信号处理器把一个音频块的输出音量拷贝到工作站,然后调用中断即可。中断在应用程序中产生一个事件,向它通报新的输出音量,这个音量值就可拷贝到音量单位表中。实际上,中断被用来发出有关某一组音频块的整套音量读数可被使用的信号,即对每个音频流有一个音量读数(请注意,数字信号处理器已为每个音频块执行一次中断,这与在该工作站上所产生的、以便在网络上传输的输出音频信号有关。)。与此相同,音量控制条722也是Visual Basic所提供的一个特点(被称作“滚动条”)。Visual Basic负责与控制条相关的全部图形,包括选择器的位置,每当用户调节它时,它就向应用程序传送一个更新了的音量数值。然后应用程序可以把这个更新了的数值写入数字信号处理器以据此改变音量。静音按钮723是另一个由Visual Basic提供的显示功能,它允许对每个音频流直接进行通/断控制。请注意,每当静音按钮被启动时,应用程序必须记住以前的加权参数值,使得静音按钮在下一次被按下时可以恢复这个值。
应该理解上述的用户界面可以有许多变动方案。例如,音量单位表可以被分段,或用一个模拟电平表代替。一个更为简单的方法是用一个通/断指示器,它根据是否从某个与会者那里有音频输出而只是作颜色的改变。音量控制功能可以用一个度盘或推拉型滑杆电位器而不是用两个按钮来实现。静音按钮也可以和音量控制条合并在一起。这些变动对于熟悉编程技术的人来说都是在他们能力范围之内的。
虽然在上面叙述的系统中用户实际上仅限于对每个音频输入流的音量控制,但在别的系统中可以向用户提供更先进的控制,如频率控制(即高音和低音调节)。这可以由数字信号处理器对音频信号在时间域用FIR或IIR滤波器做乘法而比较容易地实现。频率控制可以用图7中对音量控制条相类似的方式向用户显示,对频率控制的改变将产生对FIR/IIR滤波器系数的相应改变。这些先进的控制随着在网络上传输的音频信号的质量改进将变得更加需要,例如在那些使用G.721而不是G.711音频传输标准的系统就是如此。
Claims (10)
1、一种计算机工作站,用于连接网络并从网络接收多个音频输入流,每个音频流包括数字音频样本的序列,工作站包括:
用于在独立的队列中存储从每个音频输入流来的数字音频样本的装置;
用于形成含有每个队列的一个数字音频样本集合的序列的装置;
用于产生各数字音频样本的加权总和的装置,每个音频输入流都伴随着一个加权参数;
用于从加权总和的序列生成音频输出的装置;
其特征在于,具有这样的装置,它能响应用户对调节上述加权参数的输入以控制在多个音频流的输出范围内的相对音量。
2、如权利要求1所限定的计算机工作站,其特征在于还包括一种装置,用于为上述的每个多音频输入流提供一个可视指示以表明该音频输入流当前是否处于静音状态。
3、如权利要求2所限定的计算机工作站,其特征在于,上述可视指示还为上述的各多音频输入流指明该音频流的瞬时音量。
4、如权利要求2和3所限定的计算机工作站,其特征在于,该可视指示是在该音频输入流的声源的一个可视表示的邻近显示的。
5、如权利要求3和4所限定的计算机工作站,其特征在于,对于每个上述的多音频输入流,它还包含能从其中的数字音频样本序列生成运行中的均方根值的装置。
6、如权利要求2到5中任何一项所限定的计算机工作站,其特征在于,到来的音频数据是以块的形式到达,每块含有预定数量的数字音频样本,且上述的可视指示对音频数据的每一个新的块进行更新。
7、如上述任何一项权利要求所限定的计算机工作站,其特征在于,它还包括禁止从上述的任何一个多音频输入流来的音频输出的装置。
8、如上述任何一项权利要求所限定的计算机工作站,其特征在于,它还包括一种装置,该装置向用户提供上述加权参数的值的可视指示,该装置能响应用户的调节上述加权参数的鼠标器的操作。
9、一种运行计算机工作站的方法,该工作站接到网络上以接收多音频输入流,每个音频流是一个数字音频样本的序列,上述方法包括下列步骤:
把从每个音频输入流来的数字音频样本存放到独立的队列中;
形成一个含有从各队列来的数字音频样本的集合的序列;
对每个数字音频样本产生一个加权的和,每个音频输入流都带一个相关联的加权参数;
从加权和的序列生成一个音频输出;
其特征在于,响应于用户输入,调节上述加权参数以控制多音频流的音频输出范围之内的相对音量。
10、如权利要求9所限定的运行计算机工作站的方法,其特征在于还包括为上述音频流中的每个多音频输入流提供一个瞬时音量的可视指示的步骤。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
GB9325924A GB2284968A (en) | 1993-12-18 | 1993-12-18 | Audio conferencing system |
GB9325924.0 | 1993-12-18 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1111775A true CN1111775A (zh) | 1995-11-15 |
CN1097231C CN1097231C (zh) | 2002-12-25 |
Family
ID=10746850
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN94119071A Expired - Fee Related CN1097231C (zh) | 1993-12-18 | 1994-12-14 | 音频会议系统 |
Country Status (8)
Country | Link |
---|---|
US (1) | US5539741A (zh) |
EP (1) | EP0659006A3 (zh) |
JP (1) | JP2537024B2 (zh) |
KR (1) | KR0133416B1 (zh) |
CN (1) | CN1097231C (zh) |
GB (1) | GB2284968A (zh) |
IN (1) | IN190028B (zh) |
TW (1) | TW366633B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1304976C (zh) * | 1999-05-07 | 2007-03-14 | 精工爱普生株式会社 | 会议系统 |
US7574228B2 (en) | 2004-11-10 | 2009-08-11 | Nec Corporation | Multi-spot call system, sound volume adjustment device, portable terminal device, and sound volume adjustment method used therefor and program thereof |
CN102739851A (zh) * | 2011-04-15 | 2012-10-17 | 鸿富锦精密工业(深圳)有限公司 | 具有音量调节功能的会议电话终端及方法 |
WO2015085946A1 (zh) * | 2013-12-13 | 2015-06-18 | 广州华多网络科技有限公司 | 语音信号处理方法、装置及服务器 |
Families Citing this family (151)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5736982A (en) * | 1994-08-03 | 1998-04-07 | Nippon Telegraph And Telephone Corporation | Virtual space apparatus with avatars and speech |
RU2144283C1 (ru) * | 1995-06-02 | 2000-01-10 | Интел Корпорейшн | Способ и устройство для управления вводом участников в систему конференц-связи |
US5703794A (en) * | 1995-06-20 | 1997-12-30 | Microsoft Corporation | Method and system for mixing audio streams in a computing system |
US5889764A (en) * | 1995-08-31 | 1999-03-30 | Intel Corporation | Low-latency multi-party audio chat |
US5903868A (en) * | 1995-11-22 | 1999-05-11 | Yuen; Henry C. | Audio recorder with retroactive storage |
JPH09231224A (ja) * | 1996-02-26 | 1997-09-05 | Fuji Xerox Co Ltd | 言語情報処理装置 |
JPH1075310A (ja) * | 1996-08-29 | 1998-03-17 | Nec Corp | 多地点テレビ会議システム |
US5923747A (en) * | 1996-09-27 | 1999-07-13 | Rockwell International Corp. | Communications system and interface circuit for interconnecting telephonic switch and agent computer |
US5963217A (en) * | 1996-11-18 | 1999-10-05 | 7Thstreet.Com, Inc. | Network conference system using limited bandwidth to generate locally animated displays |
US5916302A (en) * | 1996-12-06 | 1999-06-29 | International Business Machines Corporation | Multimedia conferencing using parallel networks |
DE19724719C2 (de) * | 1997-06-11 | 2000-05-11 | Siemens Ag | Audiokonferenzsystem |
US7561538B2 (en) * | 1997-07-24 | 2009-07-14 | Oki Electronic Industry Co. Ltd. | Concentrator for speech telephones and method of communication over LAN using same |
CA2265965C (en) * | 1997-07-24 | 2007-01-09 | Oki Electric Industry Co., Ltd. | Concentrator for speech telephones and method of communication over lan using same |
JPH11127188A (ja) * | 1997-10-20 | 1999-05-11 | Fujitsu Ltd | 蓄積交換型電子会議システムにおける情報伝達装置及び方法並びに情報伝達プログラムを記録した媒体 |
US6125115A (en) * | 1998-02-12 | 2000-09-26 | Qsound Labs, Inc. | Teleconferencing method and apparatus with three-dimensional sound positioning |
US6230130B1 (en) * | 1998-05-18 | 2001-05-08 | U.S. Philips Corporation | Scalable mixing for speech streaming |
US6466550B1 (en) * | 1998-11-11 | 2002-10-15 | Cisco Technology, Inc. | Distributed conferencing system utilizing data networks |
US6262979B1 (en) * | 1998-12-01 | 2001-07-17 | 3Com Corporation | Telecommunication conferencing system and method |
GB2346032B (en) * | 1998-12-30 | 2001-01-17 | Samsung Electronics Co Ltd | Apparatus and method for multi-access conference call in exchange system |
US6453022B1 (en) * | 1998-12-31 | 2002-09-17 | At&T Corporation | Multi-line telephone with input/output mixing and audio control |
US6311161B1 (en) | 1999-03-22 | 2001-10-30 | International Business Machines Corporation | System and method for merging multiple audio streams |
US7006616B1 (en) * | 1999-05-21 | 2006-02-28 | Terayon Communication Systems, Inc. | Teleconferencing bridge with EdgePoint mixing |
EP1094657A1 (en) * | 1999-10-18 | 2001-04-25 | BRITISH TELECOMMUNICATIONS public limited company | Mobile conferencing system and method |
AUPQ378199A0 (en) * | 1999-11-01 | 1999-11-25 | Ross, Richard | Audio queue management system |
US6714826B1 (en) | 2000-03-13 | 2004-03-30 | International Business Machines Corporation | Facility for simultaneously outputting both a mixed digital audio signal and an unmixed digital audio signal multiple concurrently received streams of digital audio data |
US6501739B1 (en) * | 2000-05-25 | 2002-12-31 | Remoteability, Inc. | Participant-controlled conference calling system |
US7313593B1 (en) | 2000-10-24 | 2007-12-25 | International Business Machines Corporation | Method and apparatus for providing full duplex and multipoint IP audio streaming |
DE10062342A1 (de) * | 2000-12-14 | 2002-07-11 | Eads Defence & Security Ntwk | Verfahren und Vorrichtung zur Realisierung von Sprachkonferenzen |
US6792092B1 (en) | 2000-12-20 | 2004-09-14 | Cisco Technology, Inc. | Method and system for independent participant control of audio during multiparty communication sessions |
GB2374241B (en) * | 2001-04-03 | 2004-07-07 | Trilogy Broadcast | Management internet protocol unicast and multicast communications |
US7535995B1 (en) * | 2002-01-29 | 2009-05-19 | Cisco Technology, Inc. | System and method for volume indication during a communication session |
EP1483661A1 (en) * | 2002-03-04 | 2004-12-08 | Telefonaktiebolaget LM Ericsson (publ) | An arrangement and a method for handling an audio signal |
US20030194072A1 (en) * | 2002-04-11 | 2003-10-16 | Macnamara John J. | Control of conference bridges |
US6741595B2 (en) * | 2002-06-11 | 2004-05-25 | Netrake Corporation | Device for enabling trap and trace of internet protocol communications |
US7280133B2 (en) | 2002-06-21 | 2007-10-09 | Koninklijke Philips Electronics, N.V. | System and method for queuing and presenting audio messages |
US7023965B2 (en) * | 2002-07-17 | 2006-04-04 | Avaya Technology Corp. | Apparatus and method for displaying a name of a speaker on a telecommunication conference call |
US6925357B2 (en) | 2002-07-25 | 2005-08-02 | Intouch Health, Inc. | Medical tele-robotic system |
US20040162637A1 (en) | 2002-07-25 | 2004-08-19 | Yulun Wang | Medical tele-robotic system with a master remote station with an arbitrator |
US7280650B2 (en) * | 2002-08-28 | 2007-10-09 | Intel Corporation | Method and apparatus to manage a conference |
US6890289B2 (en) * | 2002-10-17 | 2005-05-10 | Joseph Spinosa | Back-board |
US7065198B2 (en) | 2002-10-23 | 2006-06-20 | International Business Machines Corporation | System and method for volume control management in a personal telephony recorder |
US7142678B2 (en) * | 2002-11-26 | 2006-11-28 | Microsoft Corporation | Dynamic volume control |
US6888935B1 (en) | 2003-01-15 | 2005-05-03 | Cisco Technology, Inc. | Speak-louder signaling system for conference calls |
US7187764B2 (en) | 2003-04-23 | 2007-03-06 | Siemens Communications, Inc. | Automatic speak-up indication for conference call attendees |
TWI222054B (en) * | 2003-06-02 | 2004-10-11 | Sunplus Technology Co Ltd | Simplified audio signal synthesis device |
US7916848B2 (en) * | 2003-10-01 | 2011-03-29 | Microsoft Corporation | Methods and systems for participant sourcing indication in multi-party conferencing and for audio source discrimination |
US7813836B2 (en) | 2003-12-09 | 2010-10-12 | Intouch Technologies, Inc. | Protocol for a remotely controlled videoconferencing robot |
US7522719B2 (en) * | 2004-01-13 | 2009-04-21 | International Business Machines Corporation | System and method for server based conference call volume management |
US7985138B2 (en) * | 2004-02-17 | 2011-07-26 | International Business Machines Corporation | SIP based VoIP multiplayer network games |
US20050204438A1 (en) * | 2004-02-26 | 2005-09-15 | Yulun Wang | Graphical interface for a remote presence system |
CN100518269C (zh) * | 2004-04-08 | 2009-07-22 | 皇家飞利浦电子股份有限公司 | 用于控制声级的设备和方法 |
US8077963B2 (en) | 2004-07-13 | 2011-12-13 | Yulun Wang | Mobile robot with a head-based movement mapping scheme |
US20060023061A1 (en) * | 2004-07-27 | 2006-02-02 | Vaszary Mark K | Teleconference audio quality monitoring |
US7940705B2 (en) * | 2004-09-09 | 2011-05-10 | Cisco Technology, Inc. | Method and system for blocking communication within a conference service |
CN100438332C (zh) * | 2004-11-06 | 2008-11-26 | 腾讯科技(深圳)有限公司 | 一种音量限制方法和系统 |
US8045998B2 (en) | 2005-06-08 | 2011-10-25 | Cisco Technology, Inc. | Method and system for communicating using position information |
US7636339B2 (en) * | 2005-08-10 | 2009-12-22 | Cisco Technology, Inc. | Method and system for automatic configuration of virtual talk groups based on location of media sources |
US7706339B2 (en) * | 2005-08-10 | 2010-04-27 | Cisco Technology, Inc. | Method and system for communicating media based on location of media source |
US7633914B2 (en) * | 2005-08-10 | 2009-12-15 | Cisco Technology, Inc. | Method and system for providing interoperable communications with location information |
US7869386B2 (en) * | 2005-08-29 | 2011-01-11 | Cisco Technology, Inc. | Method and system for conveying media source location information |
US9198728B2 (en) | 2005-09-30 | 2015-12-01 | Intouch Technologies, Inc. | Multi-camera mobile teleconferencing platform |
KR100732115B1 (ko) | 2005-10-01 | 2007-06-27 | 엘지전자 주식회사 | 통화 상태 표시 기능을 갖는 이동 통신 단말기 및 그 방법 |
US7808521B2 (en) * | 2006-01-09 | 2010-10-05 | Apple Inc. | Multimedia conference recording and manipulation interface |
US7668304B2 (en) | 2006-01-25 | 2010-02-23 | Avaya Inc. | Display hierarchy of participants during phone call |
US8085671B2 (en) * | 2006-02-27 | 2011-12-27 | Cisco Technology, Inc. | Method and system for providing interoperable communications with congestion management |
US8260338B2 (en) * | 2006-02-28 | 2012-09-04 | Cisco Technology, Inc. | Method and system for providing interoperable communications with dynamic event area allocation |
JP4525618B2 (ja) * | 2006-03-06 | 2010-08-18 | ソニー株式会社 | 映像監視システムおよび映像監視プログラム |
US9112746B2 (en) * | 2006-04-05 | 2015-08-18 | Cisco Technology, Inc. | Method and system for managing virtual talk groups |
US7843486B1 (en) | 2006-04-10 | 2010-11-30 | Avaya Inc. | Selective muting for conference call participants |
CN1968320A (zh) * | 2006-04-27 | 2007-05-23 | 华为技术有限公司 | 实现语音播放业务的方法 |
US7860070B2 (en) * | 2006-05-10 | 2010-12-28 | Cisco Technology, Inc. | Providing multiple virtual talk group communication sessions |
US7831270B2 (en) * | 2006-05-18 | 2010-11-09 | Cisco Technology, Inc. | Providing virtual talk group communication sessions in accordance with endpoint resources |
US7639634B2 (en) * | 2006-06-02 | 2009-12-29 | Cisco Technology, Inc. | Method and System for Joining a virtual talk group |
US8849679B2 (en) | 2006-06-15 | 2014-09-30 | Intouch Technologies, Inc. | Remote controlled robot system that provides medical images |
US20070291128A1 (en) * | 2006-06-15 | 2007-12-20 | Yulun Wang | Mobile teleconferencing system that projects an image provided by a mobile robot |
US20080014865A1 (en) * | 2006-06-16 | 2008-01-17 | Pinnacle Peak Holding Corporation (Dba Setcom Corp.) | Radio and public address accessory system with wireless interface |
US8885804B2 (en) * | 2006-07-28 | 2014-11-11 | Unify Gmbh & Co. Kg | Method for carrying out an audio conference, audio conference device, and method for switching between encoders |
US8670537B2 (en) * | 2006-07-31 | 2014-03-11 | Cisco Technology, Inc. | Adjusting audio volume in a conference call environment |
US8037414B2 (en) | 2006-09-14 | 2011-10-11 | Avaya Inc. | Audible computer user interface method and apparatus |
US8570909B1 (en) | 2006-10-17 | 2013-10-29 | Cisco Technology, Inc. | Method and system for providing an indication of a communication |
US8189460B2 (en) * | 2006-12-28 | 2012-05-29 | Cisco Technology, Inc. | Method and system for providing congestion management within a virtual talk group |
US8265793B2 (en) | 2007-03-20 | 2012-09-11 | Irobot Corporation | Mobile robot for telecommunication |
US9160783B2 (en) | 2007-05-09 | 2015-10-13 | Intouch Technologies, Inc. | Robot system that operates through a network firewall |
US8874159B2 (en) * | 2007-05-10 | 2014-10-28 | Cisco Technology, Inc. | Method and system for handling dynamic incidents |
US7995732B2 (en) * | 2007-10-04 | 2011-08-09 | At&T Intellectual Property I, Lp | Managing audio in a multi-source audio environment |
US9602295B1 (en) | 2007-11-09 | 2017-03-21 | Avaya Inc. | Audio conferencing server for the internet |
US8972594B2 (en) | 2008-02-11 | 2015-03-03 | Microsoft Corporation | Media mix wiring protocol for media control |
US10875182B2 (en) | 2008-03-20 | 2020-12-29 | Teladoc Health, Inc. | Remote presence system mounted to operating room hardware |
US8179418B2 (en) | 2008-04-14 | 2012-05-15 | Intouch Technologies, Inc. | Robotic based health care system |
US8170241B2 (en) | 2008-04-17 | 2012-05-01 | Intouch Technologies, Inc. | Mobile tele-presence system with a microphone system |
US9193065B2 (en) | 2008-07-10 | 2015-11-24 | Intouch Technologies, Inc. | Docking system for a tele-presence robot |
US9842192B2 (en) * | 2008-07-11 | 2017-12-12 | Intouch Technologies, Inc. | Tele-presence robot system with multi-cast features |
US8315409B2 (en) * | 2008-09-16 | 2012-11-20 | International Business Machines Corporation | Modifications of audio communications in an online environment |
US8340819B2 (en) | 2008-09-18 | 2012-12-25 | Intouch Technologies, Inc. | Mobile videoconferencing robot system with network adaptive driving |
US8996165B2 (en) | 2008-10-21 | 2015-03-31 | Intouch Technologies, Inc. | Telepresence robot with a camera boom |
US9138891B2 (en) | 2008-11-25 | 2015-09-22 | Intouch Technologies, Inc. | Server connectivity control for tele-presence robot |
US8463435B2 (en) | 2008-11-25 | 2013-06-11 | Intouch Technologies, Inc. | Server connectivity control for tele-presence robot |
US8041378B2 (en) | 2008-12-19 | 2011-10-18 | Cisco Technology, Inc. | System and method for providing channel configurations in a communications environment |
US8126494B2 (en) * | 2008-12-19 | 2012-02-28 | Cisco Technology, Inc. | System and method for providing a trunked radio and gateway |
US20100161727A1 (en) * | 2008-12-19 | 2010-06-24 | Cisco Technology, Inc. | System and Method for Accelerating a Wide Area Notification |
US8849680B2 (en) | 2009-01-29 | 2014-09-30 | Intouch Technologies, Inc. | Documentation through a remote presence robot |
US9268398B2 (en) * | 2009-03-31 | 2016-02-23 | Voispot, Llc | Virtual meeting place system and method |
US8897920B2 (en) | 2009-04-17 | 2014-11-25 | Intouch Technologies, Inc. | Tele-presence robot system with software modularity, projector and laser pointer |
US11399153B2 (en) | 2009-08-26 | 2022-07-26 | Teladoc Health, Inc. | Portable telepresence apparatus |
US8384755B2 (en) | 2009-08-26 | 2013-02-26 | Intouch Technologies, Inc. | Portable remote presence robot |
US8363810B2 (en) * | 2009-09-08 | 2013-01-29 | Avaya Inc. | Method and system for aurally positioning voice signals in a contact center environment |
US8144633B2 (en) * | 2009-09-22 | 2012-03-27 | Avaya Inc. | Method and system for controlling audio in a collaboration environment |
US8547880B2 (en) * | 2009-09-30 | 2013-10-01 | Avaya Inc. | Method and system for replaying a portion of a multi-party audio interaction |
US11154981B2 (en) | 2010-02-04 | 2021-10-26 | Teladoc Health, Inc. | Robot user interface for telepresence robot system |
US8670017B2 (en) | 2010-03-04 | 2014-03-11 | Intouch Technologies, Inc. | Remote presence system including a cart that supports a robot face and an overhead camera |
US8495142B2 (en) * | 2010-03-11 | 2013-07-23 | Cisco Technology, Inc. | System and method for providing data channel management in a network environment |
US9564148B2 (en) * | 2010-05-18 | 2017-02-07 | Sprint Communications Company L.P. | Isolation and modification of audio streams of a mixed signal in a wireless communication device |
US8918213B2 (en) | 2010-05-20 | 2014-12-23 | Irobot Corporation | Mobile human interface robot |
US9014848B2 (en) | 2010-05-20 | 2015-04-21 | Irobot Corporation | Mobile robot system |
US8935005B2 (en) | 2010-05-20 | 2015-01-13 | Irobot Corporation | Operating a mobile robot |
US10343283B2 (en) | 2010-05-24 | 2019-07-09 | Intouch Technologies, Inc. | Telepresence robot system that can be accessed by a cellular phone |
US10808882B2 (en) | 2010-05-26 | 2020-10-20 | Intouch Technologies, Inc. | Tele-robotic system with a robot face placed on a chair |
US8744065B2 (en) | 2010-09-22 | 2014-06-03 | Avaya Inc. | Method and system for monitoring contact center transactions |
US9736312B2 (en) | 2010-11-17 | 2017-08-15 | Avaya Inc. | Method and system for controlling audio signals in multiple concurrent conference calls |
TW201225689A (en) * | 2010-12-03 | 2012-06-16 | Yare Technologies Inc | Conference system capable of independently adjusting audio input |
US9264664B2 (en) | 2010-12-03 | 2016-02-16 | Intouch Technologies, Inc. | Systems and methods for dynamic bandwidth allocation |
US8930019B2 (en) | 2010-12-30 | 2015-01-06 | Irobot Corporation | Mobile human interface robot |
US9323250B2 (en) | 2011-01-28 | 2016-04-26 | Intouch Technologies, Inc. | Time-dependent navigation of telepresence robots |
KR20140040094A (ko) | 2011-01-28 | 2014-04-02 | 인터치 테크놀로지스 인코퍼레이티드 | 이동형 원격현전 로봇과의 인터페이싱 |
US9270784B2 (en) | 2011-02-16 | 2016-02-23 | Masque Publishing, Inc. | Peer-to-peer communications |
US8838722B2 (en) | 2011-02-16 | 2014-09-16 | Masque Publishing, Inc. | Communications adaptable to mobile devices |
US9620131B2 (en) | 2011-04-08 | 2017-04-11 | Evertz Microsystems Ltd. | Systems and methods for adjusting audio levels in a plurality of audio signals |
US10769739B2 (en) | 2011-04-25 | 2020-09-08 | Intouch Technologies, Inc. | Systems and methods for management of information among medical providers and facilities |
US9098611B2 (en) | 2012-11-26 | 2015-08-04 | Intouch Technologies, Inc. | Enhanced video interaction for a user interface of a telepresence network |
US20140139616A1 (en) | 2012-01-27 | 2014-05-22 | Intouch Technologies, Inc. | Enhanced Diagnostics for a Telepresence Robot |
GB2492103B (en) * | 2011-06-21 | 2018-05-23 | Metaswitch Networks Ltd | Multi party teleconference methods and systems |
JP5817276B2 (ja) * | 2011-07-14 | 2015-11-18 | 株式会社リコー | 多地点接続装置、映像音声端末、通信システム、及び信号処理方法 |
US8836751B2 (en) | 2011-11-08 | 2014-09-16 | Intouch Technologies, Inc. | Tele-presence system with a user interface that displays different communication links |
US9420109B2 (en) * | 2012-03-23 | 2016-08-16 | Dolby Laboratories Licensing Corporation | Clustering of audio streams in a 2D / 3D conference scene |
US8902278B2 (en) | 2012-04-11 | 2014-12-02 | Intouch Technologies, Inc. | Systems and methods for visualizing and managing telepresence devices in healthcare networks |
US9251313B2 (en) | 2012-04-11 | 2016-02-02 | Intouch Technologies, Inc. | Systems and methods for visualizing and managing telepresence devices in healthcare networks |
EP2852881A4 (en) | 2012-05-22 | 2016-03-23 | Intouch Technologies Inc | GRAPHIC USER INTERFACES CONTAINING TOUCH PAD TOUCH INTERFACES FOR TELEMEDICINE DEVICES |
US9361021B2 (en) | 2012-05-22 | 2016-06-07 | Irobot Corporation | Graphical user interfaces including touchpad driving interfaces for telemedicine devices |
CN104469255A (zh) | 2013-09-16 | 2015-03-25 | 杜比实验室特许公司 | 改进的音频或视频会议 |
US9118767B1 (en) | 2013-03-28 | 2015-08-25 | Sprint Communications Company L.P. | Communication device audio control to combine incoming audio and select outgoing audio destinations |
JP2015069136A (ja) * | 2013-09-30 | 2015-04-13 | 株式会社ナカヨ | 話者別音量調整機能を有する通信会議装置 |
US10585486B2 (en) | 2014-01-03 | 2020-03-10 | Harman International Industries, Incorporated | Gesture interactive wearable spatial audio system |
US10079941B2 (en) | 2014-07-07 | 2018-09-18 | Dolby Laboratories Licensing Corporation | Audio capture and render device having a visual display and user interface for use for audio conferencing |
WO2016046589A1 (en) * | 2014-09-26 | 2016-03-31 | Intel Corporation | Techniques for enhancing user experience in video conferencing |
US20170187884A1 (en) * | 2015-12-23 | 2017-06-29 | Microsoft Technology Licensing, Llc | Controlling output volume levels |
US11862302B2 (en) | 2017-04-24 | 2024-01-02 | Teladoc Health, Inc. | Automated transcription and documentation of tele-health encounters |
US10402056B2 (en) * | 2017-06-28 | 2019-09-03 | Blue Jeans Network, Inc. | Selecting and managing devices to use for video conferencing |
US10483007B2 (en) | 2017-07-25 | 2019-11-19 | Intouch Technologies, Inc. | Modular telehealth cart with thermal imaging and touch screen user interface |
US11636944B2 (en) | 2017-08-25 | 2023-04-25 | Teladoc Health, Inc. | Connectivity infrastructure for a telehealth platform |
US10617299B2 (en) | 2018-04-27 | 2020-04-14 | Intouch Technologies, Inc. | Telehealth cart that supports a removable tablet with seamless audio/video switching |
JP2021184189A (ja) * | 2020-05-22 | 2021-12-02 | i Smart Technologies株式会社 | オンライン会議システム |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4389720A (en) * | 1981-04-23 | 1983-06-21 | Bell Telephone Laboratories, Incorporated | Distributed digital conferencing system |
JPS6190565A (ja) * | 1984-10-11 | 1986-05-08 | Iwatsu Electric Co Ltd | 会議通話方式 |
GB2177874B (en) * | 1985-07-19 | 1989-01-18 | Stc Plc | Conference circuit |
GB2207581A (en) * | 1987-07-22 | 1989-02-01 | Gec Avionics | Ring-shaped local area network for digital audio |
US4953159A (en) * | 1989-01-03 | 1990-08-28 | American Telephone And Telegraph Company | Audiographics conferencing arrangement |
US5014267A (en) * | 1989-04-06 | 1991-05-07 | Datapoint Corporation | Video conferencing network |
US5127001A (en) * | 1990-06-22 | 1992-06-30 | Unisys Corporation | Conference call arrangement for distributed network |
JP3308563B2 (ja) * | 1991-07-15 | 2002-07-29 | 株式会社日立製作所 | 多地点テレビ会議システム |
US5379280A (en) * | 1991-09-26 | 1995-01-03 | Ipc Information Systems, Inc. | Conferencing system for distributed switching network |
US5375068A (en) * | 1992-06-03 | 1994-12-20 | Digital Equipment Corporation | Video teleconferencing for networked workstations |
-
1993
- 1993-12-18 GB GB9325924A patent/GB2284968A/en not_active Withdrawn
-
1994
- 1994-10-21 JP JP6256409A patent/JP2537024B2/ja not_active Expired - Fee Related
- 1994-11-09 EP EP94308254A patent/EP0659006A3/en not_active Ceased
- 1994-11-28 IN IN1534DE1994 patent/IN190028B/en unknown
- 1994-11-29 US US08/346,553 patent/US5539741A/en not_active Expired - Fee Related
- 1994-12-14 CN CN94119071A patent/CN1097231C/zh not_active Expired - Fee Related
- 1994-12-16 KR KR1019940034643A patent/KR0133416B1/ko not_active IP Right Cessation
-
1995
- 1995-03-10 TW TW084102303A patent/TW366633B/zh active
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1304976C (zh) * | 1999-05-07 | 2007-03-14 | 精工爱普生株式会社 | 会议系统 |
US7574228B2 (en) | 2004-11-10 | 2009-08-11 | Nec Corporation | Multi-spot call system, sound volume adjustment device, portable terminal device, and sound volume adjustment method used therefor and program thereof |
CN102739851A (zh) * | 2011-04-15 | 2012-10-17 | 鸿富锦精密工业(深圳)有限公司 | 具有音量调节功能的会议电话终端及方法 |
CN102739851B (zh) * | 2011-04-15 | 2014-01-22 | 鸿富锦精密工业(深圳)有限公司 | 具有音量调节功能的会议电话终端及方法 |
WO2015085946A1 (zh) * | 2013-12-13 | 2015-06-18 | 广州华多网络科技有限公司 | 语音信号处理方法、装置及服务器 |
Also Published As
Publication number | Publication date |
---|---|
GB2284968A (en) | 1995-06-21 |
JP2537024B2 (ja) | 1996-09-25 |
KR0133416B1 (ko) | 1998-04-27 |
KR950022401A (ko) | 1995-07-28 |
TW366633B (en) | 1999-08-11 |
EP0659006A3 (en) | 1999-03-03 |
JPH07200424A (ja) | 1995-08-04 |
GB9325924D0 (en) | 1994-02-23 |
CN1097231C (zh) | 2002-12-25 |
EP0659006A2 (en) | 1995-06-21 |
US5539741A (en) | 1996-07-23 |
IN190028B (zh) | 2003-05-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN1097231C (zh) | 音频会议系统 | |
US7046780B2 (en) | Efficient buffer allocation for current and predicted active speakers in voice conferencing systems | |
Schulzrinne | Voice communication across the Internet: A network voice terminal | |
US9412377B2 (en) | Computer-implemented system and method for enhancing visual representation to individuals participating in a conversation | |
EP2661066B1 (en) | Multi-modal conferencing | |
US20050018828A1 (en) | System and method for indicating a speaker during a conference | |
US7593986B2 (en) | Method and system for generating a routing table for a conference | |
CN1123977A (zh) | 在快速分组网中分布电话会议的方法 | |
EP0580397A2 (en) | Conferencing apparatus | |
González et al. | Audio mixing for interactive multimedia communications | |
Campbell et al. | Building QoS into Distributed Systems: IFIP TC6 WG6. 1 Fifth International Workshop on Quality of Service (IWQOS’97), 21–23 May 1997, New York, USA | |
EP1453287B1 (en) | Automatic management of conversational groups | |
EP0650285A1 (en) | Audio communication apparatus | |
CN113676691A (zh) | 一种智能视频会议系统及方法 | |
JPH07298235A (ja) | テレビ会議装置及びそのポインティングカーソル表示制御方法 | |
US11800177B1 (en) | Systems and methods for synchronizing remote media streams | |
Chodrow et al. | Design and implementation of a multicast audio conferencing tool for a collaborative computing framework | |
Prasad | A new paradigm for audio conferencing on voice over IP (VoIP) | |
AU2001282272B2 (en) | Audio data processing | |
Smith | ATM RendezView: Enabling real-time multimedia delivery to-the-desktop. | |
Duran et al. | A Developer’s Guide to Distance Multimedia | |
US20060230101A1 (en) | Telecommunications system for diffusing a multimedia flux through a public communication network | |
JPH09153915A (ja) | 通信システム | |
Pasquale et al. | Operating System and Window System Research for Distributed Multi-media Applications: A Status Report | |
Plattner et al. | A System for the Cost-Value Evaluation of Teleteaching Systems and Its Application |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C06 | Publication | ||
PB01 | Publication | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
C19 | Lapse of patent right due to non-payment of the annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |