[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN101243675B - 用于动态丰富媒体场景的传送机制 - Google Patents

用于动态丰富媒体场景的传送机制 Download PDF

Info

Publication number
CN101243675B
CN101243675B CN200680030021.1A CN200680030021A CN101243675B CN 101243675 B CN101243675 B CN 101243675B CN 200680030021 A CN200680030021 A CN 200680030021A CN 101243675 B CN101243675 B CN 101243675B
Authority
CN
China
Prior art keywords
scene
grouping
svg
media
stream
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN200680030021.1A
Other languages
English (en)
Other versions
CN101243675A (zh
Inventor
V·塞特勒
钟代笛
M·汉纳克西拉
R·维丹泰姆
S·奇图林
M·英格拉西亚
T·卡平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia Inc
Original Assignee
Core Wiresless Licensing SARL
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Core Wiresless Licensing SARL filed Critical Core Wiresless Licensing SARL
Priority to CN201610244708.0A priority Critical patent/CN105812377B/zh
Publication of CN101243675A publication Critical patent/CN101243675A/zh
Application granted granted Critical
Publication of CN101243675B publication Critical patent/CN101243675B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1101—Session protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Television Systems (AREA)

Abstract

一种用于支持通过FLUTE或者UDP下载SVG的传送机制。指定一种实现实况流传输和丰富媒体内容流传输的RTP净荷格式。根据本发明，在发送方基于净荷格式在RTP分组中封装丰富媒体内容。利用本发明，提供一种用于满足涉及到丰富媒体传输的数个用途情况或者场景的高效框架。

Description

用于动态丰富媒体场景的传送机制
技术领域
本发明涉及用于流传输(streaming)和下载丰富媒体内容的传送机制。具体而言，本发明也涉及用于通过点到点和广播/多播服务流传输和下载包含可缩放矢量图形(SVG)的丰富媒体内容的传送机制。
背景技术
SVG是用于媒体表示的有用格式。SVG可以针对实时股票和交通信息以及针对娱乐目的提供可以在其中嵌入和播放其它媒体的布局。近年来，第三代伙伴项目(3GPP)已经采用移动可缩放矢量图形(移动SVG)作为用于在为移动设备带来改进图形和图像扮演关键角色的新成像标准。
近来，3GPP和开放移动联盟(OMA)已经开始致力于通过便携和简单企业联合组织(PSS)和多媒体广播/多播服务(MBMS)流传输丰富媒体。这要求将光栅和矢量图形与现有音频、视频和定时文本媒体组合的能力。然而，与现有基于帧的媒体不同，SVG遵循具有指定的表示开始时间和持续时间的陈述性动画。需要使用ISO基本媒体文件格式内包含的轨道信息经由实时传送协议(RTP)分组在时间上同步和流传输丰富媒体中的所有不同轨道。当前，RTP净荷规范迎合基于帧的媒体的分组化而造成在基于帧的SVG和非基于帧的SVG之间的同步问题。
当前，只能经由HTTP下载并且渐进地下载SVG和其它媒体。当前没有用于允许通过FLUTE下载SVG的机制，其中该FLUTE是用实施SAC的Java编写的层叠样式表2级(CSS2)解析器。SAC是用于CSS解析器的基于事件的应用程序接口(API)。
此外，由于缺乏适当的RTP净荷格式，所以目前没有用于从ISO基本媒体文件之中或者直接从实况内容中流传输SVG内容的可用机制。
此前，已经致力于用于例如音频、视频和定时文本的媒体格式的传送机制。MacromediaFlash作为专用于矢量图形的格式并不支持实时(RTSP/RTP)流传输。Flash代之以仅使用从Web服务器的渐进下载或者经由仅在Windows环境中运行的Flash通信服务器的http流传输。
发明内容
本发明提供一种用于支持通过FLUTE或者用户数据报协议(UDP)下载SVG的支持机制。本发明也提供一种实现实况流传输和丰富媒体内容流传输的RTP净荷格式。如这里所用，“实况流传输”指代来自实况编码器的媒体流。根据本发明，在发送方基于净荷格式在RTP分组中封装丰富媒体内容。
本发明提供一种用于满足涉及到丰富媒体传输的数个使用情况或者场景的高效框架。
本发明的这些和其它目的、优点和特征及其组织和操作方式将从结合附图来阅读时的以下具体描述中变得明显，在这些附图中相似的单元在数幅图中通篇地具有相似的标号。
附图说明
图1描绘了根据本发明的SVG传送机制；
图2描绘了在本发明的传送机制中的RTP净荷字段的格式；
图3描绘了用于TYPE1分组的RTP净荷报头；
图4描绘了用于TYPE2分组的RTP分组报头；
图5描绘了用于TYPE3分组的RTP净荷报头；
图6描绘了用于TYPE4分组的RTP净荷报头；
图7描绘了用于TYPE5分组的RTP净荷报头；
图8是可以在本发明的实施中使用的移动电话的透视图；以及
图9是图8的移动电话的电话电路的示意表示图。
具体实施方式
SVGT版本1.2支持用于渐进下载的预取。然而，对于实时流传输，场景可能因动画和场景状态的改变而改变。场景描述及其空间/时间修改的这一序列需要从服务器流传输到客户机设备上的玩家。
使用<g>元素将SVG动画中的逻辑场景分组在一起。SVGT1.2规范建议：对于渐进下载和流传输的情况，所有场景定义必须是DOM树中根<svg>元素的子元素。各相邻顶级<g>元素应当包含动画中的相邻序时场景。
场景更新是一次一个地发送到客户机设备的对SVGDOM的增量进行更新。这些更新包括SVG元素添加、元素删除、元素替换和元素属性更新。
SVG支持与同步多媒体综合语言(SMIL)媒体元素相似的媒体元素。动态或者实时媒体元素在它们的时间容器内限定它们自己的时间表。所有的SVG媒体元素支持SVG定时属性以及运行时间同步。实时媒体元素是音频和视频并且嵌入于SVG中如下：
<audioxlink:href＝”1.ogg”volume＝”0.7”type＝”audio/vorbis”
begin＝”mybutton.click”repeatCount＝”3”/>
<videoxlink:href＝”ski.avi”volume＝”.8”type＝”video/x-msvideo”x＝”10”y＝”170”/>
另外，SVG也可以嵌入其它SVG文档，这些文档又可以通过嵌套嵌入更多SVG文档。嵌入的媒体元素可以通过SVG内容中的内部或者外部URL来链接。
动画元素指定了外部嵌入SVG文档或者提供同步动画矢量图形的SVG文档片段。如同视频元素一样，动画元素是大小取决于它的x、y、宽度和高度属性的图形对象。例如：
<animationbegin＝″1″dur＝″3″repeatCount＝″1.5″fill＝″freeze″x＝″100″y＝″100″
xlink:href＝″myIcon.svg″/>
另一方面，使用‘图像’元素在SVG中嵌入静态媒体如图像，比如：
<imagex＝″200″y＝″200″width＝″100px″height＝″100px″xlink:href＝″myimage.png″>
在图1中描绘了本发明的传送机制的概括图。如图1中所示，通过将内容划分成三个分离组将SVG从服务器100传送到客户机设备110。在RTP分组130中传送SVG和表示为120的其它嵌入SVG文件，而RTP会话140将信息传送到客户机设备110。嵌入的动态媒体150使用多个RTP连接160。RTP会话140也用来将嵌入的动态媒体150传送到客户机设备110。客户机设备110在180经由FLUTE下载在步骤170代表的嵌入静态媒体。
本发明的第一实施涉及到使用RTP净荷格式来实现丰富媒体流传输。在这一实施中将RTP单元分类如下。TYPE1分组包含一个或者多个采样描述。TYPE2分组包含完整SVG场景采样或者它的片段之一。TYPE3分组包含完整SVG场景更新采样或者它的片段之一。TYPE4分组包含当前活跃的SVG元素的列表。TYPE5分组包含采样相异信息。
在SVG格式本身内指定SVG场景的持续时间。在图2中示出包含SVG的RTP分组的格式。市场位M(1位)指示了当前分组包含是否SVG采样的最终片段(如果有)。对于TYPE1分组，假设如下规则：不能将采样描述分段，M位总是设置为1。对于TYPE2、TYPE3、TYPE4和TYPE5分组，M位如果它是完整采样或者采样的最终片段则设置为1。否则M位设置为0。只要客户机设备110收到M位设置为1的RTP分组130，它就认为当前采样的传输完整并且开始执行下一步骤(FEC检验和解码)。
时间戳指示了SVG采样的采样瞬间。对于TYPE1分组，时间戳设置为等于后继分组的时间戳。客户机设备110针对这一情况应当忽略时间戳。应当注意零的设置将打破RTP客户机可能基于到达之间的抖动计算而具有的任何逻辑。一种为没有固有时间性质的分组分配时间戳的典型方式是将分组与先前或者随后分组相关联并且拷贝它的时间戳。对于TYPE2和TYPE3分组，时间戳指示了当前SVG采样的采样瞬间。对于TYPE4分组，由于针对特定场景和场景更新组一次发送列表，所以用于TYPE4的时间戳在该组的开始时间(该组中第一采样的时间戳)和结束时间(该组中最后采样的时间戳)内。对于TYPE5分组，由于采样相异信息表明在当前场景图形与先前场景图形之间的差异，所以TYPE5分组的时间戳必须与当前采样相同。
对于实况流传输则使用适当时间戳时钟速率。这一值应当提供用于将SVG与其它媒体同步的足够定时分辨率。与其它媒体如音频和视频不同，没有为SVG定义的缺省采样大小或者采样速率。编码应用必须考虑实时会话的延迟约束并且评价FEC、重传还是其它类似技术是用于流修复的合理选项。
剩余RTP报头字段的使用遵循可以在www.faqs.org/rfcs/rfc3550.html找到的RFC2550的规则以及在使用中的简档。应当注意通过‘时间戳’和‘TYPE’来表示属于同一采样的多个片段。
净荷报头包括公共字段集，跟随其后的是用于各报头类型和采样内容的具体字段。所有净荷报头共有的字段具有以下格式。“类型字段”(3位)指定哪些具体报头字段跟随其后。定义如下TYPE值。
RTP单位分类如下。TYPE1分组包含一个或者多个采样描述。TYPE2分组包含完整SVE场景采样或者它的片段之一。TYPE3分组包含完整SVG场景更新采样或者它的片段之一。TYPE4分组包含当前活跃的SVG元素的列表。TYPE5分组包含采样相异信息。
“保留位字段”(R-4位)用于将来扩展。这一字段必须设置为零(0x0)并且被接收方忽略。
“优先级”(PR-2位)指示了特定采样的重要级。较高的值指示了较高的优先级。例如，在通过媒体网关传输数据的情形中，通过可靠信道发送更重要的数据，而通过可靠性较低的信道发送或者简单地丢弃重要性较低的分组。此外，这样的优先级机制允许编码器应用部分FEC保护。另外，利用这样的优先级系统，发送方可以在分组丢失的情况下复制更多重要分组。这一标志存在于所有五个分组类型中。
“计数器字段”(CTR-7位)与PR标志相联系。针对对应优先级的各新分组，四个单独计数器各递增一。CTR字段在达到最大限制之后回绕至零。序列号的不连续指示了丢失分组。(某一优先级的)计数器值的不连续指示了丢失分组的优先级。在下表1中描绘了这一现象。
序列号 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31
类型 1 1 4 4 3 3 3 4 4 5 3 3 3 1 2
PR 3 2 3 3 2 2 0 1 1 2 2 1 2 1 3
CTR3 1 2 3 4
CTR2 1 2 3 4 5 6
CTR1 1 2 3 4
CTR0 1
CTR 1 1 2 3 2 3 1 1 2 4 5 3 6 4 3
表1
以下部分具体说明了用于TYPE值的不同净荷报头。图3中所示TYPE1报头用来传送采样描述(静态和动态)。RTP传输总是始于包含静态采样描述的一个或者多个TYPE1分组，包括用于第一TYPE2分组的传输。如上所述使用TYPER、PR和CTR字段，其后是采样描述。各采样描述按次序包含如下四个字段：SDID|内容编码|文本编码|内容脚本类型。
“采样描述索引字段”(SDID-8位)是用来标识采样描述(SD)以有助于对净荷解码的索引。有两类SDID：静态和动态。静态和动态SD分别使用它们。静态采样描述在整个表示过程中保持活跃，而动态采样描述在表示下一场景采样之前保持活跃。静态和动态采样描述可以通过它们的关联SDID值来区别。静态和动态采样描述在它们的活跃时段过程中不能被修改。两种采样描述均在TYPE1分组中被传输。静态SDID用来标识静态采样描述。动态SDID用来表示动态SD。较大的值分配给动态SDID，而较低的值分配给静态SDID。例如，0-63分配给静态SDID；64-255分配个动态SDID。这一分配阈值在RTP传输之前用会话描述协议(SDP)带外传输。作为缺省，前64个SDID分配为静态的，而其余分配为动态的。然而，这一分配可以根据服务器、网络条件、采样描述的数目、采样描述的长度等而变化。
正如在以下例子中讨论的那样，SDID是连接整数。静态SDID的允许值范围为从0到63。换而言之，允许静态采样描述的最大数目为64。它们无需从0开始，但是它们必须连接。动态SDID的允许值范围为从64到255。在各活跃时段过程中，允许动态采样描述的最大数目为192。它们无需从64开始，但是它们必须连接。
版本简档的长度、文本编码类型和压缩类型分别为16、8和8位。“内容编码”字段是可能值为‘none’、‘bin_xml’、‘gzip’、‘compress’和‘deflate’的空终结串。这是根据www.w3.org/Protocols/rfc2616/rfc2616-sec3.html#3.5来指定的。‘文本编码’字段是IANA规范(可以在www.iana.org/assignments/character-sets找到)中可能值选自于‘名称’或者‘别名’字段如US-ASCII、BS4370等(视应用而定)的空终结串。
“内容脚本类型”(CSCF)字段标识用于给定采样的缺省脚本语言。这一属性为文档中的所有脚本瞬间设置缺省脚本语言。值内容类型指定了媒体类型。如果没有启用脚本，则这一字段的值为0。默认值是值为1的“ecmascrip”。
图4中所示TYPE2报头用来传送完整SVG场景采样。这一单位是在SVG采样小到足以在一个单位中传送而无需实现更小场景片段时使用的。TYPE、PD、SDID和R字段具有与在TYPE1中相似的解释。
“填充位数目字段”(PAD-3位)指示了在实际净荷的最终八元组中有多少填充位。
GRP字段(4位)指示了场景属于哪个组。一般而言，其后跟随一个或者多个场景更新的一个场景构成组。然而，分组性质是灵活的并且可以在编著级加以确定。分组允许每组一次发送活跃元素(TYPE4)的当前列表并且允许更高效的纠错机制。
采样描述索引字段(SDID)包含对如下采样描述的引用，该采样描述必须用来解析特定净荷中包含的场景描述。
LNK标志(L-1位)指示了当前SVG采样包含音频、视频、动画或者图像标记，该标记指示了SVG引用外部音频、视频、SVG或者图像内容。这一字段可以有助于客户机设备110决定解码次序并且预备外部媒体内容的新传输。
SIM字段(3位)用来表示采样相异信息(SDI)是否存在。SDI提供与采样如何不同于客户机上当前的场景图有关的信息。此信息可以比较两个场景或者两个场景(即具有场景更新的场景)。该选择视服务器的性质以及客户机可以如何处理这样的信息而定。
SIM字段具有数个值。如果当前分组不含SDI则SIM＝000。如果下一采样与当前分组中的采样相同则SIM＝001。如果下一采样为空SVG采样则SIM＝010。如果两个采样不同则SIM＝011，并且在当前分组的末尾附加SDI。这一点在SDI的长度小到足以被附加时发生。TYPES2-5支持附加SDI。如果两个采样不同则SIM＝100，而当SDI的长度为长时在TYPE7或者TYPE9中发送SDI。
S标志(1位)指示了当前分组是否包含当前采样的开始点。在M标志指示了当前采样的结束点时，S标志指示了开始点。M和S标志的组合提供如下信息。当M＝1和S＝1时，当前分组包含完整采样。当M＝0和S＝1时，当前分组包含采样的第一片段。当M＝1和S＝0时，当前分组包含采样的最终片段。当M＝0和S＝0时，当前分组包含采样的中间片段。在这些情形下，“采样”指代SVG场景、场景更新、SDI或者SVG元素的活跃列表。
TYPE3报头用来传送全部SVG场景更新采样。这一单位是在SVG场景更新小到足以在一个单位中传送而无需分段成更小采样时的情况下使用的。所有字段具有与在TYPE2报头中相似的解释。场景更新包含用于在当前场景中添加、删除和更换元素及其属性的信息。
TYPE4报头包含在特定时间戳在场景图中当前活跃SVG元素的定义。这允许客户机更好地管理元素和存储器。所有字段具有与其它类型相似的解释。GRP字段为了优化而每组仅一次传输允许TYPE4分组。何时传输组中TYPE4分组(在开头、中间或者末尾)取决于服务器100或者伴随SVG内容的任何特殊指令。字段的解释与在其它TYPE报头中相同。包含当前活跃SVG元素的SVG定义块存在于这一类型中。这允许客户机检验它的SVG场景图以确保它包含当前活跃的所有SVG元素。利用这一TYPE4格式的介绍，可以校正场景图中由于分组丢失而造成的误差。在SVG规范中，<defs>...</defs>块包含SVG元素列表。
TYPE5报头在SDI长到无法附接到TYPES2和TYPES3报头的情况下包含该SDI。所有字段的解释与在其它TYPE报头中相同。
本发明的第二实施涉及到动态嵌入媒体的传输。在这一实施中，仅为内部嵌入动态媒体提供SDP信息，而接收方可以请求来自外部流传输服务器的外部嵌入动态媒体。必须为整个SVG表示用SDP指定一个时钟速率。时钟的分辨率对于所需同步准确度和对于测量分组到达抖动而言必须是充分的。需要考虑在表示内嵌入动态媒体文件的时钟速率。例如，如果该表示包含嵌入视频，则建议时钟将不少于90,000。
在一个会话内的多个RTP连接用来传输动态嵌入媒体。编码器负责在生成RTP分组时计算时间戳以便保证恰当同步。各采样的时间戳需要映射到RTP分组的时间戳。
用SDP仅指示内部嵌入动态媒体的源位置。嵌入媒体可以来自主要文件中的轨道、同一目录中的内部嵌入文件或者同一目录中3GPP文件的项目。有四种方式指示这些位置：
1.file_name＝”video2.h263”
2.box＝-moov；track_ID＝1
3.item_ID＝3
4.item_name＝”video4.h263”
在这一情形下，‘item_ID’和‘item_name’是分别在3GPP文件中保存于ItemLocationBox和ItemInfoBox中的用于嵌入项目的关联信息。
SDP会话指定SVG格式、它的时钟速率和SDID阈值。下文示出了SDP的媒体级描述的例子。在这一情况下，在表示中嵌入具有同一格式的四种H.263视频媒体。各(“a＝fmtp”，“a＝-rtpmap”)对描述一个源位置。
m＝svg+xml12345RTP/AVP96
a＝rtpmap:96X-SVG+XML/100000
a＝fmtp:96sdid-threshold＝63；version_profile＝”1.2”；base_profile＝”1”
m＝video49234RTP/AVP9899100101
a＝rtpmap:98h263-2000/90000
a＝fmtp:98box＝moov；track_ID＝”1”；profile＝”3”；level＝”10”
a＝rtpmap:99h263-2000/90000
a＝fmtp:99file_name＝”video2.h263”；profile＝”3”；level＝”10”
a＝rtpmap:100h263-2000/90000
a＝fmtp:100item_ID＝”3”；profile＝”3”；level＝”10”
a＝rtpmap:101h263-2000/90000
a＝fmtp:101item_name＝“video4.h263”；profile＝”3”；level＝”10”
无需指定主要SVG文件的源位置。然而，如果在主要SVG文件中有嵌入的SVG文件或者内容，则应当用SDP指定该文件或者内容的源位置作为单独媒体级SDP描述。
本发明的第三实施涉及到静态嵌入媒体的传输。静态嵌入媒体文件(例如图像)可以通过如下方式来发送：(1)经由FLUTE会话预先将它们发送到UE；(2)以与在MBMS会话之前发送安全密钥到客户机的方式相似的方式在流传输会话之前在点到点承载上将静态媒体发送到各客户机；(3)如果足够无线电资源可用，则具有与RTP传输会话相独立的并行FLUTE传输会话；或者(4)由于有限的无线电资源而仅有一个传输会话用以传输所有数据。这样的传输具有来自两个用户会话的数据——一个用于RTP而另一个用于FLUTE。
可以在SVG组级(包括场景和场景更新组)而不是在表示级实施上述选项(1)和(2)。因此，紧接在传输组之后，可以在分离FLUTE会话中发送嵌入静态文件。
仅为内部嵌入的静态媒体或者SVG内容提供SDP信息。对于FLUTE会话，接收器可以显式地从服务器下载外部嵌入的静态媒体或者SVG内容。在FLUTE会话的内部的文件递送表(FDT)字段中而不是用SDP指示了内部嵌入媒体的URL。已经在Internet-Draft：SDPDescriptorsforFLUTE(www.ietf.org/internet-drafts/dtaft-mehta-rmt-flute-sdp-02.txt)中定义了针对FLUTE的SDP描述的语法。
以下是用于本发明的其它可选实施例。
实施4：与实施1相同但是字段重新排序。
实施5：上文讨论的第一实施指定了净荷报头格式中字段的最小可能大小。某些字段可以比指定值更长。
实施6：在这一实施中，PtM是3GPPMBMS；PtM是3GPP2BCMCS；PtM是DVB-HIPDC；而PtM是OMABCAST。
实施7：场景相异信息可以提供场景差异、场景更新和/或场景图、一个或者多个场景和场景更新的组合。
实施8：SVG元素的当前活跃列表的传输频率可以针对场景和场景更新组、仅针对各场景或者以预定时间间隔。这一选择取决于服务器、编著环境和/或可用带宽。
实施9：用于丰富媒体的RTP净荷可以应用于预先编著/预先记录的内容以及实况内容。
实施10：用于FLUTE会话的SDP信息可以针对参数如时钟速率和SDID阈值具有灵活的缺省值。
图8和图9示出了本发明可以实施的一个代表移动电话12。这一移动电话12可以根据所讨论的特定系统而用作客户机终端或者服务器。然而应当理解本发明并不旨在于限于一个特定类型的移动电话12或者其它电子设备。图8和图9的移动电话包括壳体30、液晶显示器形式的显示器32、键盘34、麦克风36、耳机38、电池40、红外线端口42、天线44、根据本发明一个实施例形式为UICC的智能卡46、读卡器48、射频电路52、编码解码器电路54、控制器56和存储器58。单独电路和单元都是本领域中公知的类型，例如在移动电话的Nokia范围中公知的类型。
在方法步骤的背景下描述了本发明，这些方法步骤可以在一个实施例中通过程序产品来实施，该程序产品包括在联网环境下由计算机执行的计算机可执行指令如程序代码。
一般而言，程序包括执行特定任务或者实施特定抽象数据类型的例程、程序、对象、组件、数据结构等。与数据结构相关联的计算机可执行指令以及程序模块代表用于执行这里公开的方法步骤的程序代码的例子。特定序列的这样的可执行指令或者关联数据结构代表用于实施在这样的步骤中描述的功能的对应动作的例子。
本发明的软件和Web实施可以利用标准编程技术、利用基于规则的逻辑和其它用以实施各种数据库搜索步骤、相关步骤、比较步骤和判决步骤的逻辑来实施。也应当注意如这里使用以及权利要求中的字眼“组件”和“模块”旨在于涵盖使用一行或者多行软件代码和/或硬件实施和/或用于接收人工输入的设备的实施。
已经出于示例和描述的目的呈现了对本发明实施例的以上描述。并不旨在于穷举或者将本发明限制于所公开的准确形式，而修改和变化根据上述教导是可能的或者可以从本发明的实践中加以获悉。选择和描述实施例是为了说明本发明的原理及其实际应用以使本领域技术人员能够在各种实施例中以及利用对构思的特定用途而言适合的各种修改来运用本发明。

Claims (18)

1.一种用于递送内容到客户机设备的方法，包括：
将分组流中的多媒体表示传输到所述客户机设备，所述多媒体表示被使用标记语言来指定，
其中，所述多媒体表示包括至少一个场景描述和至少一个场景更新，以及其中，分组流包括含有从所述至少一个场景描述或者所述至少一个场景更新导出的信息的场景分组，
其中，至少一个分组包含在多媒体表示中当前活跃的可缩放矢量图形SVG图形元素的列表，其中，其后跟随一个或者多个场景更新的一个场景构成组，并且针对特定组所述当前活跃的SVG图形元素的列表被发送一次。
2.根据权利要求1所述的方法，其中各场景分组包括针对所述场景分组内包含的所述内容的优先级信息。
3.根据权利要求2所述的方法，其中各场景分组包括相对于针对所述场景分组的所述优先级信息而言的序列信息。
4.根据权利要求1所述的方法，其中所述分组流包括多个实时传送协议分组。
5.根据权利要求1所述的方法，还包括传输在所述分组流以外的嵌入静态媒体到客户机设备。
6.根据权利要求5所述的方法，其中经由层叠样式表解析器传输所述嵌入静态媒体。
7.根据权利要求5所述的方法，还包括通过多个实时传送协议连接传输嵌入动态媒体到客户机设备。
8.根据权利要求1所述的方法，其中各场景分组包括指示了所述场景分组的所述内容的类型字段。
9.一种用于递送内容到客户机设备的设备，包括：
用于将分组流中的多媒体表示传输到所述客户机设备的装置，所述多媒体表示被使用标记语言来指定，其中，所述多媒体表示包括至少一个场景描述和至少一个场景更新，以及
其中，分组流包括含有从所述至少一个场景描述或者所述至少一个场景更新导出的信息的场景分组，以及
其中，至少一个分组包含在多媒体表示中当前活跃的可缩放矢量图形SVG图形元素的列表，其中，其后跟随一个或者多个场景更新的一个场景构成组，并且针对特定组所述当前活跃的SVG图形元素的列表被发送一次。
10.根据权利要求9所述的设备，其中各场景分组包括针对所述场景分组内包含的所述内容的优先级信息。
11.根据权利要求10所述的设备，其中各场景分组包括相对于针对所述场景分组的所述优先级信息而言的序列信息。
12.根据权利要求9所述的设备，其中所述分组流包括多个实时传送协议分组。
13.根据权利要求9所述的设备，还包括用于传输在所述分组流以外的嵌入静态媒体到客户机设备的装置。
14.根据权利要求13所述的设备，其中经由层叠样式表解析器传输所述嵌入静态媒体。
15.根据权利要求13所述的设备，还包括用于通过多个实时传送协议连接传输嵌入动态媒体到客户机设备的装置。
16.根据权利要求9所述的设备，其中各场景分组包括指示了所述场景分组的所述内容的类型字段。
17.一种电子设备，包括：
处理器；以及
存储器单元，可操作地连接到处理器并且包括用于将分组流中的多媒体表示传输到所述客户机设备的装置，所述多媒体表示被使用标记语言来指定，
其中，所述多媒体表示包括至少一个场景描述和至少一个场景更新，并且其中，所述分组流包括含有从所述至少一个场景描述或者所述至少一个场景更新导出的信息的场景分组，以及
其中，至少一个分组包含在多媒体表示中当前活跃的可缩放矢量图形SVG图形元素的列表，其中，其后跟随一个或者多个场景更新的一个场景构成组，并且针对特定组所述当前活跃的SVG图形元素的列表被发送一次。
18.根据权利要求17所述的电子设备，其中各场景分组包括针对所述场景分组内包含的所述内容的优先级信息。
CN200680030021.1A 2005-06-27 2006-06-26 用于动态丰富媒体场景的传送机制 Expired - Fee Related CN101243675B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610244708.0A CN105812377B (zh) 2005-06-27 2006-06-26 用于动态丰富媒体场景的传送机制

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US69444005P 2005-06-27 2005-06-27
US60/694,440 2005-06-27
PCT/IB2006/001751 WO2007000649A1 (en) 2005-06-27 2006-06-26 Transport mechanisms for dynamic rich media scenes

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201610244708.0A Division CN105812377B (zh) 2005-06-27 2006-06-26 用于动态丰富媒体场景的传送机制

Publications (2)

Publication Number Publication Date
CN101243675A CN101243675A (zh) 2008-08-13
CN101243675B true CN101243675B (zh) 2016-05-11

Family

ID=37595057

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201610244708.0A Expired - Fee Related CN105812377B (zh) 2005-06-27 2006-06-26 用于动态丰富媒体场景的传送机制
CN200680030021.1A Expired - Fee Related CN101243675B (zh) 2005-06-27 2006-06-26 用于动态丰富媒体场景的传送机制

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201610244708.0A Expired - Fee Related CN105812377B (zh) 2005-06-27 2006-06-26 用于动态丰富媒体场景的传送机制

Country Status (5)

Country Link
US (2) US8239558B2 (zh)
EP (2) EP1897326B1 (zh)
CN (2) CN105812377B (zh)
ES (1) ES2536546T3 (zh)
WO (1) WO2007000649A1 (zh)

Families Citing this family (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007028137A2 (en) * 2005-09-01 2007-03-08 Nokia Corporation Method for embedding svg content into an iso base media file format for progressive downloading and streaming of rich media content
ES2526814T3 (es) * 2006-01-11 2015-01-15 Core Wireless Licensing S.à.r.l. Extensiones para el Formato de Contenedores de Medios enriquecidos para su uso por parte de servidores de flujo continuo de difusión general/multidifusión
US9198084B2 (en) 2006-05-26 2015-11-24 Qualcomm Incorporated Wireless architecture for a traditional wire-based protocol
KR100827156B1 (ko) 2006-12-26 2008-05-02 삼성전자주식회사 방송 화면 구성 정보를 제공하는 방법 및 이를 위한ｄｖｂ―ｈ 시스템
CN101809962B (zh) * 2007-09-25 2015-03-25 爱立信电话股份有限公司 与媒体结构有关的方法和装置
KR101461973B1 (ko) * 2007-12-28 2014-11-14 엘지전자 주식회사 노티피케이션 메시지 송수신 방법 및 노티피케이션 메시지 수신 장치
WO2009104083A2 (en) * 2008-02-22 2009-08-27 Nokia Corporation System and method for insertion of advertisement into presentation description language content
FR2930057B1 (fr) * 2008-04-11 2010-11-12 Streamezzo Procede de creation d'un service, dispositif et programme d'ordinateur correspondants, procede de generation de mise a jour d'un contenu, serveur, terminal et programme d'ordinateur correspondants.
CN102158811B (zh) * 2008-04-11 2013-10-09 华为技术有限公司 一种bcast中通知消息呈现方式的方法和装置
US8707151B2 (en) 2008-04-21 2014-04-22 Samsung Electronics Co., Ltd Apparatus and method for composing scenes using Rich Media contents
US7814221B1 (en) * 2008-06-13 2010-10-12 West Corporation Real-time streaming protocol gateway and proxy for serving and caching static media over a low bandwidth connection
AU2009291759B2 (en) * 2008-09-10 2015-07-09 Nextnav, Llc Wide area positioning system
US9057606B2 (en) 2009-09-10 2015-06-16 Nextnav, Llc Wide area positioning system
US8917209B2 (en) 2009-09-10 2014-12-23 Nextnav, Llc Coding in a wide area positioning system (WAPS)
US9035829B2 (en) 2008-09-10 2015-05-19 Nextnav, Llc Wide area positioning systems and methods
KR20100040545A (ko) * 2008-10-10 2010-04-20 삼성전자주식회사 구조화된 리치 미디어 데이터 기반의 사용자 인터페이스를 제공하기 위한 장치 및 방법
US9398089B2 (en) 2008-12-11 2016-07-19 Qualcomm Incorporated Dynamic resource sharing among multiple wireless devices
CN101877641B (zh) * 2009-04-29 2012-09-05 华为技术有限公司 Ims网络中文件下载方法、装置和系统
WO2010075785A1 (zh) * 2008-12-30 2010-07-08 华为技术有限公司 Ims网络中文件下载方法、装置和系统
CN101540956B (zh) * 2009-04-15 2011-09-21 中兴通讯股份有限公司 场景流接收方法及接收终端
US9264248B2 (en) 2009-07-02 2016-02-16 Qualcomm Incorporated System and method for avoiding and resolving conflicts in a wireless mobile display digital interface multicast environment
US9291712B2 (en) 2009-09-10 2016-03-22 Nextnav, Llc Cell organization and transmission schemes in a wide area positioning system (WAPS)
US9372266B2 (en) 2009-09-10 2016-06-21 Nextnav, Llc Cell organization and transmission schemes in a wide area positioning system (WAPS)
US9582238B2 (en) 2009-12-14 2017-02-28 Qualcomm Incorporated Decomposed multi-stream (DMS) techniques for video display systems
US8773470B2 (en) 2010-05-07 2014-07-08 Apple Inc. Systems and methods for displaying visual information on a device
US20110276405A1 (en) * 2010-05-10 2011-11-10 Microsoft Corporation Combinatorial advertisements
CN102291373B (zh) 2010-06-15 2016-08-31 华为技术有限公司 元数据文件的更新方法、装置和系统
KR20120010089A (ko) 2010-07-20 2012-02-02 삼성전자주식회사 Ｈｔｔｐ 기반의 멀티미디어 스트리밍 서비스의 품질 향상을 위한 방법 및 장치
US9413803B2 (en) 2011-01-21 2016-08-09 Qualcomm Incorporated User input back channel for wireless displays
US10135900B2 (en) 2011-01-21 2018-11-20 Qualcomm Incorporated User input back channel for wireless displays
US9582239B2 (en) 2011-01-21 2017-02-28 Qualcomm Incorporated User input back channel for wireless displays
US9787725B2 (en) 2011-01-21 2017-10-10 Qualcomm Incorporated User input back channel for wireless displays
US9065876B2 (en) 2011-01-21 2015-06-23 Qualcomm Incorporated User input back channel from a wireless sink device to a wireless source device for multi-touch gesture wireless displays
US10108386B2 (en) 2011-02-04 2018-10-23 Qualcomm Incorporated Content provisioning for wireless back channel
US9503771B2 (en) 2011-02-04 2016-11-22 Qualcomm Incorporated Low latency wireless display for graphics
US9176217B2 (en) 2011-08-02 2015-11-03 Nextnav, Llc Cell organization and transmission schemes in a wide area positioning system (WAPS)
KR20130040132A (ko) * 2011-10-13 2013-04-23 한국전자통신연구원 이종 ip 네트워크를 통한 미디어 코덱에 독립적인 미디어 데이터 전송 방법
US9525998B2 (en) 2012-01-06 2016-12-20 Qualcomm Incorporated Wireless display with multiscreen service
CA2874771A1 (en) 2012-06-05 2013-12-12 Nextnav, Llc Systems and methods for location positioning of user device
US9286490B2 (en) 2013-09-10 2016-03-15 Nextnav, Llc Systems and methods for providing conditional access to transmitted information
US9390279B2 (en) 2012-09-11 2016-07-12 Nextnav, Llc Systems and methods for providing conditional access to transmitted information
CN108614844B (zh) * 2016-12-13 2020-12-29 腾讯科技（北京）有限公司 多媒体文件生成方法及装置
US10395412B2 (en) 2016-12-30 2019-08-27 Microsoft Technology Licensing, Llc Morphing chart animations in a browser
US10304225B2 (en) 2016-12-30 2019-05-28 Microsoft Technology Licensing, Llc Chart-type agnostic scene graph for defining a chart
US11086498B2 (en) 2016-12-30 2021-08-10 Microsoft Technology Licensing, Llc. Server-side chart layout for interactive web application charts

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1239646A2 (en) * 2001-03-09 2002-09-11 Kabushiki Kaisha Toshiba Contents playback method and apparatus
CN1441929A (zh) * 2000-07-10 2003-09-10 佳能株式会社 传送多媒体描述
US20040230560A1 (en) * 2003-05-16 2004-11-18 Dethe Elza Methods and systems for enabling collaborative authoring of hierarchical documents
US20050023098A1 (en) * 2003-07-01 2005-02-03 Imad Mahawili Energy recovery system

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6735634B1 (en) * 1999-06-10 2004-05-11 Blue Coat Systems Method for real time protocol media recording
AUPR063400A0 (en) * 2000-10-06 2000-11-02 Canon Kabushiki Kaisha Xml encoding scheme
BRPI0208736B8 (pt) * 2001-03-21 2019-01-29 Blackberry Ltd método e aparelho para fornecer conteúdo a dispositivos de mídia
EP1261204A2 (en) * 2001-03-29 2002-11-27 Matsushita Electric Industrial Co., Ltd. Method and apparatus for data reproduction
US7747853B2 (en) * 2001-06-06 2010-06-29 Sony Corporation IP delivery of secure digital content
AUPR947701A0 (en) * 2001-12-14 2002-01-24 Activesky, Inc. Digital multimedia publishing system for wireless devices
CN100367794C (zh) * 2002-04-12 2008-02-06 三菱电机株式会社 元数据编辑装置
US7246318B2 (en) * 2002-06-28 2007-07-17 Microsoft Corporation Application programming interface for utilizing multimedia data
US7483532B2 (en) * 2003-07-03 2009-01-27 Microsoft Corporation RTP payload format
SE0302778D0 (sv) * 2003-10-17 2003-10-17 Ericsson Telefon Ab L M Container format for multimedia presentations
DE10355345A1 (de) * 2003-11-25 2005-06-23 Deutsche Thomson-Brandt Gmbh Verfahren und Vorrichtung zum Speichern oder Wiederfinden von definierten Positionen in einem Datenstrom
US7983244B2 (en) * 2003-12-31 2011-07-19 Nokia Corporation Interworking between domains of a communication network operated based on different switching principles
US7664882B2 (en) * 2004-02-21 2010-02-16 Microsoft Corporation System and method for accessing multimedia content
US20050223098A1 (en) * 2004-04-06 2005-10-06 Matsushita Electric Industrial Co., Ltd. Delivery mechanism for static media objects
WO2006042300A2 (en) * 2004-10-12 2006-04-20 Mindego, Inc. System and method for creating, distributing, and executing rich multimedia applications

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1441929A (zh) * 2000-07-10 2003-09-10 佳能株式会社 传送多媒体描述
EP1239646A2 (en) * 2001-03-09 2002-09-11 Kabushiki Kaisha Toshiba Contents playback method and apparatus
US20040230560A1 (en) * 2003-05-16 2004-11-18 Dethe Elza Methods and systems for enabling collaborative authoring of hierarchical documents
US20050023098A1 (en) * 2003-07-01 2005-02-03 Imad Mahawili Energy recovery system

Also Published As

Publication number Publication date
EP2894831B1 (en) 2020-06-03
US20120271963A1 (en) 2012-10-25
EP2894831A1 (en) 2015-07-15
CN101243675A (zh) 2008-08-13
US8239558B2 (en) 2012-08-07
CN105812377B (zh) 2019-05-17
US20070157283A1 (en) 2007-07-05
ES2536546T3 (es) 2015-05-26
CN105812377A (zh) 2016-07-27
WO2007000649A1 (en) 2007-01-04
EP1897326B1 (en) 2015-03-18
EP1897326A1 (en) 2008-03-12
EP1897326A4 (en) 2012-11-28

Similar Documents

Publication Publication Date Title
CN101243675B (zh) 用于动态丰富媒体场景的传送机制
US11665384B2 (en) Method and apparatus for transmitting media data in multimedia transport system
CN105594219B (zh) 用于广播信号的发射/接收处理的设备和方法
CN107113460B (zh) 针对空中广播媒体数据的会话描述信息
US7917644B2 (en) Extensions to rich media container format for use by mobile broadcast/multicast streaming servers
CN103430559B (zh) 用于在广播系统中配置控制消息的装置及方法
CN104040993A (zh) 用于发送相应地接收媒体流的方法
US20070186005A1 (en) Method to embedding SVG content into ISO base media file format for progressive downloading and streaming of rich media content
CN110870282B (zh) 使用网络内容的文件轨处理媒体数据
CN107637040A (zh) 使用websocket子协议来传输媒体数据
CN102498722B (zh) 利用选择mpeg-2传输流多路复用的多媒体流的基础分组进行该流的分发
CN101924742B (zh) 媒体传输方法及设备、媒体存储方法及设备
CN105765943B (zh) 发送广播信号的装置、接收广播信号的装置、发送广播信号的方法和接收广播信号的方法
Herpel et al. MPEG-4 Systems: Elementary stream management
US20050105555A1 (en) Data processing method and apparatus, and data distribution method and information processing apparatus
CN108141625A (zh) 发送设备、接收设备和数据处理方法
CN101049014B (zh) 数字通信系统上的辅助内容处理
CN101547346B (zh) 富媒体电视中场景描述的收发方法及设备
RU2467506C2 (ru) Управление потоком расширенного медиа
CN103959796A (zh) 数字视频码流的解码方法拼接方法和装置
Setlur et al. More: a mobile open rich media environment
JP4756848B2 (ja) データ配信方法および情報処理装置
Mohamed Novel push-model framework for realizing multi-service MPEG4 streams in broadcast applications
JP2005348352A (ja) 送信装置、受信装置、送信方法及び通信方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: NOKIA 2011 PATENT ASSETS TRUSTS CORPORATION

Free format text: FORMER OWNER: NOKIA OY

Effective date: 20120323

C41 Transfer of patent application or patent right or utility model
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: Delaware

Applicant after: 2011 Intellectual Property Asset Trust

Address before: Delaware

Applicant before: NOKIA 2011 patent trust

COR Change of bibliographic data

Free format text: CORRECT: APPLICANT; FROM: NOKIA 2011 PATENT ASSETS TRUSTS CORPORATION TO: 2011 INTELLECTUAL PROPERTY ASSETS TRUST CORPORATION

TA01 Transfer of patent application right

Effective date of registration: 20120323

Address after: Delaware

Applicant after: NOKIA 2011 patent trust

Address before: Espoo, Finland

Applicant before: NOKIA Corp.

ASS Succession or assignment of patent right

Owner name: CORE WIRELESS LICENSING S.A.R.L.

Free format text: FORMER OWNER: 2011 INTELLECTUAL PROPERTY ASSET TRUST CORPORATION

Effective date: 20120427

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20120427

Address after: Luxemburg Luxemburg

Applicant after: NOKIA Inc.

Address before: Delaware

Applicant before: 2011 Intellectual Property Asset Trust

C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160511

Termination date: 20210626