CN1460351B - 生成发往通信终端的多媒体文件的装置和方法 - Google Patents

Abstract

在中继中心发送各种类型的媒体(文本、声音、动画......)。根据本发明，将这些数据按照公共同步点(PS0......PS4)分解，组装包，包中组织了由相同的同步点界定的每种媒体的数据。这样，每个包包括了用于在通信终端上同时执行的数据。尤其应用于移动终端。

Description

生成发往通信终端的多媒体文件的装置和方法

技术领域

本发明涉及通信领域，尤其涉及从多组数据生成发往通信终端的多媒体文件的装置，所述多组数据分别对应于一种类型的多媒体文件内容。

本发明还涉及一种用来发往通信终端的多媒体文件，该文件包括多个数据包。

尤其是，通常称之为“移动互联网”(Internet mobile)的网络为本发明的方法和装置提供了很好的应用前景。

本发明更具体地说属于多媒体数据通信服务领域。所述多媒体数据比如是视频、音频、图片、文本、超文本数据以及其它数据。

背景技术

迄今为止，信息在通信网络上的分发都使用一些很独特的技术。尤其是“拉出”(Pull)技术，其中，内容提供商在一个数据库中准备要发送的信息。使用者要在得知该数据库的地址后访问该数据库。该地址是使用传统手段的广告攻势的对象，这些传统手段比如有广告牌、电视、电台或者其它的属于其它内容提供商的数据库。这种技术主要是通过互联网使用的。因此，这些“拉出”技术允许使用者特定地访问其所需的信息，并获得对所述信息的好的访问质量。事实上，所述信息生来就是确定的，这是因为使用者进行了选择。

但是，所述拉出技术不适用于信息的传播。这些技术只能是在使用者已预先得知有信息放在网上的情况下才能予以实施。因此，信息的传播所触及的人数少，虽然相对于已接触到的人群而言，对传播的信息感兴趣的人的比例较大。

信息的传播还可以按照另外一种叫做“推出”(push)的技术实现。这种技术是这样：内容提供商大量散布其希望传播的信息。然后，使用者通过合适的接收机，以免费或者付费的方式访问散布的信息。电台和电视就是应用这种所谓的“推出”式传播技术的应用的最能说明问题的例子。

在公知的MMS(Multimedia Messaging System，多媒体消息系统)系统的所谓多媒体消息中，所述技术有另外的应用。MMS系统允许发送有大量多媒体内容的消息。不仅可以包括照片、图像和图形，还可以包括视频流和谈话录音，它们例如作为“附件”附加在短消息上。还提出了消息可以从移动电话发送到移动电话，但也可以从移动电话发送到电子邮件地址，或者反之。

目前有各种使用多媒体文件的标准。在这方面尤其可注意到按照HTML(Hypertext Marking Language，超文本标记语言)协议、WML(Wireless Markup Language，无线标记语言)协议、cHTML(compact HTML，压缩HTML)协议或者SMIL(Synchronized Multimedia Integration Language，同步多媒体合成语言)协议显示的文件。

当这样的多媒体文件从服务器通过移动通信网向移动终端载入时，附在该文件上的各种内容(图像、文本、声音、动画等)(这些内容可以包含在该文件本身中或者用超文本链接指明)常常通过公知的称为“流式技术(streaming)”(流式提取)的技术传送给移动终端。这就出现了问题：即这些不同的内容在用户界面上协调再现的同步问题。当内容通过流式技术传输时，这种问题尤其明显，因为终端没有足够的存储空间来在执行前加载完整的多媒体内容。事实上，当不同的多媒体数据以数据包的形式同时传送时(通过因特网协议IP或TCP或UDP和/或RTP的数据块)，难以规划来自不同媒体(“媒体”的意思是指多媒体数据的类型，例如声音数据、图形数据等)的不同数据的同步。某些媒体可能需要更多的传输频带，因此在终端本地，它们要比其它媒体更晚获得，因此它们需要迅速地与已经到达并被等候中的终端存储起来的其它媒体同步，以便在用户界面上执行和演示。

解决网络传输的媒体的同步问题的一个方案是由SMIL协议提供的。但是，该方案只定义了所有媒体的起始点，而不核实媒体内容数据块在应当同步执行时在终端上是否全部可用。这就导致，如果一个数据包在网络传输过程中丢失了，或者它的到达与应与其同步的其它数据包岔开了，则对应于不同媒体的不同数据包不再是同步的。

发明内容

本发明就是要解决上述问题。

根据本发明的一个方面，提供一种从多个数据组生成用来发往通信终端的多媒体文件的装置，所述多个数据组分别对应于一种多媒体文件内容类型，该装置的特征在于包括：

用于描述所述多媒体文件中的同步点的说明装置，

根据所述同步点将每个所述数据组分别分解为一系列数据小组的分解装置，所述同步点分别与在终端的人机界面装置上执行的起始点和终止点相关联，与相同的同步起始和终止点相关的数据小组用于在终端的人机界面装置上同时执行，

多媒体文件组装装置，用于以一系列包的形式来组装所述多媒体文件，所述包包括一系列所述数据小组。

根据本发明的另一方面，提供一种中继服务器，适合接收分别对应于一种多媒体内容类型的数据组，用来发出将所述数据组重新组织起来的多媒体文件，其特征在于，它包括一个根据上述的多媒体文件生成装置。

根据本发明的另一方面，提供一种用来从多个数据组生成发往通信终端的多媒体文件的方法，所述多个数据组分别对应于一种多媒体文件内容类型，，其特征在于包括：

描述所述多媒体文件中的同步点；

根据所述同步点将每个所述数据组分别分解为一系列数据小组，所述同步点分别与在终端的人机界面装置上执行的起始点和终止点相关联，与相同的同步起始和终止点相关的数据小组用于在终端的人机界面装置上同时执行；

以一系列包的形式来组装所述多媒体文件，所述包包括一系列所述数据小组。

为此，本发明的目的是一种从多个数据组生成用来发往通信终端的多媒体文件的装置，所述多个数据组分别对应于多媒体文件的一种内容，该装置的特征在于包括：

根据确定的有关同步起始和终止点，将每个所述数据组分别分解为一系列小组的装置，与相同的同步执行起始时间点和终止时间点相关的小组用于在终端的人机界面装置上同时执行，

多媒体文件组装装置，所述多媒体文件的形式为一组数据包，所述数据包包括一系列数据小组，这些小组与相同的同步执行起始时间点和终止时间点相关。

这样，本发明可以使终端收到的所有数据小组(多媒体文件的内容类型)同步，不受特定数据组相互间的长度差异的影响。

另外，对于没有规定的内容类型的任何约束，本发明允许生成多媒体文件，而不管是什么媒体(内容类型：图像，图形，声音等)。

另外，如果在网上传输过程中某个文件或者数据组的某个包丢失，或者到达时间与其它的包岔开了，这不会导致同步的错乱，在终端上将继续进行以后的操作。只会出现由于所述包的丢失而导致的不同同步媒体的执行的一个间断，但这个间断对于终端用户来说，是所有同步媒体的展示在时间上的同一个总的中断。因此，在该中断之后，媒体的展示协调一致地继续进行，并且所有媒体仍然同步。

根据一种实施方式，本发明的装置包括用于描述多媒体文件中的同步点的说明装置。

根据本发明的一种实施方式，所述数据组包括文本数据、动画的或者非动画的图像数据，以及压缩或未压缩的声音数据。

本发明的一种实施方式包括一个中继服务器，适合接收分别对应于一种媒体内容类型的数据组，用来发出将所述数据组重新组织起来的多媒体文件，其特征在于，它包括一个根据本发明的多媒体文件生成装置。

本发明还有一个目的是用来发往通信终端的多媒体文件，该文件包括一系列数据包，其特征在于：每个所述数据包对应于串联起来的数据小组，所述数据小组分别与一种多媒体文件内容类型有关，并关联到相同的在终端人机界面上执行时的同步起始和终止点。

按照一种实施方式，本发明的文件包括用来描述与多媒体文件相关的同步点的描述部分。

按照一种实施方式，所述文件用来向其发送的通信终端是这样的移动终端：无线电话，或/和装备有无线通信设备的个人数字助理，或者是与因特网相连的个人计算机之类的固定终端。

附图说明

结合附图阅读下面的说明会更好地理解本发明。附图只是用于说明的目的，而不是用于限制本发明。附图中：

图1图示了向用户终端发送多媒体数据的系统，

图2是本发明一种实施方式的多媒体文件结构，

图3是按照本发明按照同步点加以分解的多媒体数据组，

图4是按照本发明一种实施方式的多媒体文件生成装置。

具体实施方式

图1示出了一种向客户终端2发送多媒体数据的系统。在该系统1的链路的一端，示出了各种内容的数据服务器3，称为媒体服务器。这些内容服务器可以包括任何类型的内容。例如，服务器30可以是文本数据服务器，服务器31是图像服务器，服务器32是动画服务器。应服务器4的加载请求，这三个服务器向MMS中继服务器4发送它们特有的数据。然后，各种数据按照预定的格式被转换。例如，在服务器4的输入端的转换装置41是SMIL标准的装置，该标准已在本申请开头进行了详细说明。SMIL标准是一种文本格式，一定数量的因特网工业化应用软件(因特网浏览器，内容阅读器等)支持该格式。所述装置41完成对媒体数据的转换后，在本身公知的多媒体数据重组及线性压缩装置42中，所述数据被重新组织并被压缩。这样处理后的数据然后被发送到本发明的多媒体文件生成装置。

在本实施方式中，所述装置43是一个MSE编码器。如下文所述，该编码器负责生成以完全同步的方式构建的多媒体数据包，所述数据包允许在所述包从所述编码器发出并被终端2收到后，向用户同步展示各种媒体。各种媒体在终端上的同步表现为：显示在屏幕上的文本和图像，以及由终端扬声器播出的声音，都是完全协调一致的。

可以注意到，模块41是用虚线表示的，因为在系统1的传输链中，它并非必不可少。事实上，可以想象得到，数据从服务器30、31、32向重组装置42的传送并不必然需要将各种数据按照预定的第一格式格式化。

图2示出了所述编码器43构建的多媒体文件5的结构的一个例子。该文件5首先包括用来标记文件5的界限的一个标题6和一个结束文件的系统命令7。文件5的主题包括一系列包8、9...，这些包也标记为“包#1”、“包#2”等。

每个包8、9包括同样的界定包的界线的语法结构(syntaxe)：表示包的开始的系统命令81、91及表示包的结束的系统命令82、92。在这两个命令之间，每个包包括一系列数据小组。为了简化起见，在图2中，只示出了包#1的两个数据小组83、84和包#2的两个数据小组93、94。我们知道，随下文所述的对媒体进行的分解情况而定，每个包可以包括多得多的数据小组。这些数据小组标记为“道#1”“道#2”等，分别包括与同一媒体有关的数据。例如，道#1包括显示文本的命令和/或数据，道#2包括显示图像的命令和/或数据，图2中没有图示的道#3包括有关声音的命令和/或压缩或未压缩的数据。

每个数据小组是从相应的例如图示于图3的数据组中分解出来的一部分。因此，如图3所示，第一个包#1的小组83对应于道#1的媒体中包括的并由同步起始点PS0和终止点PS1界定的数据。同样，第一个包#1的小组84对应于道#2包括的由同样的同步起始点PS0和终止点PS1界定的数据。对于与道#3的媒体相关，在上述两个同步点之间的数据小组85，是一样的情况。按此逻辑，可以理解，包的构建原则是：将来自不同的媒体道而由同样的同步点界定的数据小组组装在同一个数据包里面。这些同步点是由中继服务器处的剪辑器(monteur)确定的。所述剪辑器借助于本身公知的分解装置，按照同步点PS0到PS4(在图3所示的情况下)将信号中的各种媒体分解，从而将来自所述装置42的信号分解。如前所述，这些点是这样确定的，使它们在执行时完全对应。

那么，如图4所示，通过共同的同步点对应起来的所有媒体(或者道)的小组由组合器(combineur)11组织在同一个包中(所述包按照所述语法结构格式化，例如)，然后在时间上协调一致地被集成到所述多媒体文件中。

可以注意到，已经提到了多媒体文件可以包括多个包。也可以想象得到，多媒体文件可以只包括一个包，其它的包由随后的多媒体文件发送。

为了使终端能够识别同步点，剪辑器用本身公知的手段在描述多媒体文件中的不同同步点的脚本页中写入同步点。该脚本附在多媒体文件上或者作为其一部分。

当然，本发明不限于上述实施方式。

因此，本发明可应用于任何类型的消息传递，以及任何类型的网络(WEB，WAP，......)。因此，本发明也应用于移动终端(移动电话，有无线通讯功能的个人数字助理等)以及与因特网相联的个人计算机。

本发明的优点还在于其完全面向对象的特性。

Claims (7)

1.一种从多个数据组(道#1，道#2)生成用来发往通信终端(2)的多媒体文件(5)的装置，所述多个数据组分别对应于一种多媒体文件内容类型，该装置的特征在于包括：

用于描述所述多媒体文件中的同步点的说明装置(12)，

根据所述同步点(PS0，......PS4)将每个所述数据组分别分解为一系列数据小组的分解装置，所述同步点分别与在终端的人机界面装置上执行的起始点和终止点相关联，与相同的同步起始和终止点相关的数据小组用于在终端的人机界面装置上同时执行，

多媒体文件组装装置(11)，用于以一系列包(8、9......)的形式来组装所述多媒体文件，所述包包括一系列所述数据小组(83、84......93、94......)。

2.如权利要求1所述的装置，其特征在于，所述数据组包括文本数据、动画的或者非动画的图像数据，以及压缩或未压缩的声音数据。

3.一种中继服务器，适合接收分别对应于一种多媒体内容类型的数据组(道#1，道#2......)，用来发出将所述数据组重新组织起来的多媒体文件，其特征在于，它包括一个根据权利要求1或2所述的多媒体文件生成装置。

4.一种用来从多个数据组(道#1，道#2)生成发往通信终端(2)的多媒体文件的方法，所述多个数据组分别对应于一种多媒体文件内容类型，其特征在于包括：

描述所述多媒体文件中的同步点；

根据所述同步点(PS0，......PS4)将每个所述数据组分别分解为一系列数据小组，所述同步点分别与在终端的人机界面装置上执行的起始点和终止点相关联，与相同的同步起始和终止点相关的数据小组用于在终端的人机界面装置上同时执行；

以一系列包(8、9......)的形式来组装所述多媒体文件，所述包包括一系列所述数据小组(83、84......93、94......)。

5.如权利要求4所述的方法，其特征在于每个所述数据包对应于串联起来的数据小组(83、84......93、94......)。

6.如权利要求5所述的方法，其特征在于所述多媒体文件包括用来描述与多媒体文件相关的同步点的描述部分(12)。

7.如权利要求4、5或6所述的方法，其特征在于，所述多媒体文件发往的通信终端是这样的移动终端：包括无线电话或/和有无线通信功能的个人数字助理，或者是这样的固定终端：包括与因特网相连的个人计算机。

Images