[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN102740154A - 应用于多媒体内容的播放方法与播放装置 - Google Patents

应用于多媒体内容的播放方法与播放装置 Download PDF

Info

Publication number
CN102740154A
CN102740154A CN2012100733412A CN201210073341A CN102740154A CN 102740154 A CN102740154 A CN 102740154A CN 2012100733412 A CN2012100733412 A CN 2012100733412A CN 201210073341 A CN201210073341 A CN 201210073341A CN 102740154 A CN102740154 A CN 102740154A
Authority
CN
China
Prior art keywords
multimedia
content
user
video
display screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012100733412A
Other languages
English (en)
Other versions
CN102740154B (zh
Inventor
简敏纮
方柏凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Taiwan Semiconductor Manufacturing Co TSMC Ltd
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Publication of CN102740154A publication Critical patent/CN102740154A/zh
Application granted granted Critical
Publication of CN102740154B publication Critical patent/CN102740154B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/376—Image reproducers using viewer tracking for tracking left-right translational head movements, i.e. lateral movements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/366—Image reproducers using viewer tracking
    • H04N13/383—Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00—Details of stereoscopic systems
    • H04N2213/006—Pseudo-stereoscopic systems, i.e. systems wherein a stereoscopic effect is obtained without sending different images to the viewer's eyes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供一种应用于多媒体内容的播放方法与播放装置，所述方法包含：接收多媒体内容；对多媒体内容进行播放；侦测使用者状态并产生侦测结果；当侦测结果指示使用者状态有所变化时，调整多媒体内容的播放。本发明的应用于多媒体内容的播放方法及播放装置能侦测用户的状态以正确地与自动地调整包含视频及/或音频的多媒体内容的播放，用户可以具有更佳的多媒体内容播放的观赏/聆听体验。

Description

应用于多媒体内容的播放方法与播放装置
技术领域
本发明是关于多媒体数据的播放，尤指依据使用者状态的侦测结果来调整多媒体内容的播放以及其相关装置。
背景技术
传统的平面(two-dimensional，2D)显示技术是呈现单一画面(frame)给使用者的双眼，然而，近来由于科技的发展，使用者所追求的已是具有立体感与更逼真的影像显示，而不再是高质量影像，因此，立体(three-dimensional，3D)显示技术便被提出来，以呈现不同的画面给使用者左眼与右眼，如此一来，使用者的大脑会将两眼所看到不同的画面认作立体画面。然而，用户必须手动控制平面/立体视频播放设定以满足个人偏好的观赏需求；同样地，关于音频的播放，用户也必须手动控制音频播放设定以满足个人偏好的聆听需求。因此，用户也许会渴望有更佳的视频观赏与/或音频聆听的体验，所以，需要一种创新的播放器制，其可正确地与自动地调整包含视频及/或音频的多媒体内容的播放。
发明内容
依据本发明的实施方式，其提出一种依据使用者状态的侦测结果来调整多媒体内容的播放方法以及播放装置，以解决上述问题。
依据本发明的第一实施方式，其揭示一种多媒体内容的播放方法，包含：接收多媒体内容、对多媒体内容进行播放、侦测使用者状态并据以产生侦测结果，以及当侦测结果指示使用者状态有变化时，调整多媒体内容的播放。
依据本发明的第二实施方式，其揭示一种多媒体内容的播放装置，包含接收功能模块、播放功能模块以及侦测功能模块。所述接收功能模块用以接收所述多媒体内容。所述播放功能模块耦接于接收功能模块，用以对多媒体内容进行播放。侦测功能模块耦接于播放功能模块，用以侦测使用者状态并据以产生侦测结果。当侦测结果指示使用者状态有变化时，播放功能模块会调整多媒体内容的播放。
本发明的多媒体内容的播放方法及播放装置能侦测用户的状态以正确地与自动地调整包含视频及/或音频的多媒体内容的播放，用户可以具有更佳的多媒体内容播放的观赏/聆听体验。
附图说明
图1为本发明的实施方式中广义的多媒体播放装置的模块示意图。
图2为本发明多媒体播放装置的第一实施方式的模块示意图。
图3为足球场上不同视角所对应的视频比特流的示意图。
图4为运用图2的装置来进行自动调整多媒体播放的示意图。
图5为本发明多媒体播放装置的第二实施方式的模块示意图。
图6为运用图5的装置来进行自动调整多媒体播放的示意图。
图7为本发明多媒体播放装置的第三实施方式的模块示意图。
图8为运用图7的装置来进行自动调整多媒体播放的示意图。
图9为本发明多媒体播放装置的第四实施方式的模块示意图。
图10为运用图9的装置来进行自动调整多媒体播放的示意图。
图11为本发明多媒体播放装置的第五实施方式的模块示意图。
图12为关于多视角立体算法如何呈现环绕音效给用户的示意图。
具体实施方式
在说明书及权利要求书当中使用了某些词汇来称呼特定的元件。本领域的技术人员应可理解，硬件制造商可能会用不同的名词来称呼同一个元件。本说明书及权利要求书并不以名称的差异来作为区分元件的方式，而是以元件在功能上的差异来作为区分的准则。在通篇说明书及权利要求书当中所提及的“包含”是开放式的用语，故应解释成“包含但不限定于”。此外，“耦接”一词在此是包含任何直接及间接的电气连接手段。因此，若文中描述第一装置耦接于第二装置，则代表第一装置可直接电气连接于第二装置，或通过其它装置或连接手段间接地电气连接到第二装置。
本发明的主要概念在于：在多媒体内容播放的期间，通过侦测使用者的状态以正确地与自动地调整包含视频及/或音频之多媒体内容的播放。举例来说，当使用者状态改变时，使用者状态的侦测结果(例如使用者的人脸角度(user’s face angle)或是用户的人脸位置/用户的位置(user’s face location/user’s location))会做为控制信号，以正确地调整多媒体内容的播放，如此一来，即便在多媒体内容播放的控制过程中没有使用者的介入，使用者可以具有更佳的多媒体内容播放的观赏/聆听体验。进一步的细节将说明如下。
图1为本发明的实施方式中广义的多媒体播放装置的模块示意图。播放装置100包含(但并不局限于)：接收功能模块(receiving block)102、播放功能模块(playback block)105以及侦测功能模块(detectingblock)106。接收功能模块102用来接收多媒体内容DATA_IN。播放功能模块104耦接于接收功能模块102，用以通过驱动输出装置101来对多媒体内容DATA_IN进行播放。侦测功能模块106耦接于播放功能模块104，用以侦测使用者状态并据以产生一个指示所侦测到的使用者状态的侦测结果DR，此外，由侦测功能模块106所产生的侦测结果DR会被传送到播放功能模块104。在本实施方式中，当侦测结果DR指示出使用者状态的改变时，播放功能模块104会调整多媒体内容DATA_IN的播放，举例来说，当使用者处于第一观赏/聆听状态时，输出装置101会呈现由多媒体内容DATA_IN所得的视频/音频信息(video/audio information)的第一播放结果，以及当使用者处于第二观赏/聆听状态时，输出装置101会呈现由多媒体内容DATA_IN所得的视频/音频信息的第二播放结果。如此一来，播放装置100具备自动调整多媒体内容DATA_IN播放的能力，以在多媒体内容DATA_IN播放的期间满足具有不同观赏/聆听状态的使用者的观赏/聆听需求。以下会通过基于图1所示的架构而衍生的多个实施方式，来说明有关播放装置100的详细的技术特征。
请参阅图2，图2为本发明多媒体播放装置的第一实施方式的模块示意图。播放装置200包含(但并不局限于)：接收接口(receivinginterface)202、视频播放模块(video playback module)204以及人脸侦测模块(face detection module)206。请注意，播放装置200的组态基于图1所示之播放装置架构，举例来说，图1所示的输出装置101是由显示屏幕(display screen)201来实作、图1所示的接收功能模块102是由图2所示的接收接口202来加以实作、图1所示的侦测功能模块106是由人脸侦测模块206来加以实作，以及图1所示的播放功能模块104是由视频播放模块204来加以实作。在本实施方式中，多媒体内容DATA_IN包含有分别对应至多个视角的多个视频比特流(video bitstream)BS1～BSN，举例来说(但本发明并不局限于此)，多媒体内容DATA_IN包含足球赛的视频数据，其中多个视频比特流BS1～BSN(例如图3中的BS_1～BS_5)分别对应于足球场的多个视角A1～A5，因此，足球赛中的事件可被记录在多个视频比特流BS_1～BS_5中，举例来说，踢角球的事件较适合以视频比特流BS_2与BS_4来记录、射门事件较适合以视频比特流BS_1与BS_5来记录，以及开球/传球事件较适合以视频比特流BS_3来记录。
由接收接口202所接收的视频比特流BS1～BSN会被传送至视频播放模块204，以进行更进一步的处理。如图2所示，视频播放模块204包含(但并不局限于)：译码电路(decoding circuit)212、选择电路(selective circuit)214以及视频控制器(video controller)216，其中译码电路212包含多个译码单元(decoding unit)211_1～211_M。请注意，基于实际上的设计需求/考虑，译码单元211_1～211_M的数量可以等于或小于视频比特流BS1～BSN的数量。在译码单元211_1～211_M的数量等于视频比特流BS1～BSN的数量的情形下，译码单元211_1～211_M用来分别且同时地对视频比特流BS1～BSN进行译码。另外，在译码单元211_1～211_M的数量小于视频比特流BS1～BSN的数量的另一情形下，译码单元211_1～211_M便分别且同时地对视频比特流BS1～BSN中所选择出来的一部分视频比特流进行译码。此外，译码视频比特流所产生的画面会从译码电路212传送到选择电路214。选择电路214会依据由人脸侦测模块206所产生的侦测结果DR_A，来选择译码单元211_1～211_M所分别产生的多个输出S_1～S_M中的一个输出，并且传送所选到的输出S至视频控制器216。接着，视频控制器216便驱动显示屏幕201以显示所选到的输出S中的画面。
于本实施方式中，上述的使用者状态为使用者的人脸角度，因此，接收接口202另接收由影像获取设备(image capturing device)(例如，视频摄影机(video camera))218所产生的获取影像(captured image)IMG。举例来说，影像获取设备218与显示屏幕201可设置于同一个显示设备(例如，电视机)中。人脸侦测模块206则会基于获取影像IMG来进行人脸侦测，以侦测使用者状态(亦即使用者的人脸角度)。当侦测结果DR_A指示使用者的人脸角度有所改变时，选择电路214会通过选择输出S_1～S_M中的另一个输出来改变所选到的输出S。
简而言之，当使用者的人脸对应于第一角度时，视频播放模块204会控制显示屏幕201以显示对应第一视角的第一视频比特流的画面，以及当使用者的人脸对应于第二角度时(亦即使用者的人脸角度有所改变时)，则视频播放模块204会控制显示屏幕201以显示对应第二视角(相异于第一视角)的第二视频比特流的画面。
请一并参阅图3与图4，图4为运用图2所示的播放装置200来进行自动调整多媒体内容播放的操作示意图。如图4中的附图(B)所示，当使用者以与图3所示的视角A3相同或相近的正常视角来观赏显示屏幕201时，视频播放模块204会驱动显示屏幕201以显示视频比特流BS_3所对应的画面FBS_3。如图4中附图(A)所示，当使用者想要观赏于足球场的右边角落所发生的事件时，使用者会将脸以逆时钟方向(counterclockwise)转动，由于使用者的人脸角度与图3所示的视角A4相同或相近，因此，因应侦测结果DR_A(其指出使用者的人脸角度的逆时钟方向变化)，视频播放模块204会通过驱动显示屏幕201显示视频比特流BS_4的画面FBS_4以自动调整视频的播放。如图4中的附图(C)所示，当使用者想要观赏于足球场的左边角落所发生的事件时，使用者会将脸以顺时钟方向(clockwise)转动，由于使用者的人脸角度与图3所示的视角A2相同或相近，因此，根据侦测结果DR_A(其指出使用者的人脸角度的顺时钟方向变化)，视频播放模块204会通过驱动显示屏幕201显示视频比特流BS_2的画面FBS_2以自动调整视频的播放。请注意，图4所示的例子仅作为范例说明之用，并非用来作为本发明之限制，换言之，只要多媒体内容的播放会根据指示出使用者人脸角度产生变化的侦测结果而自动地调整时，皆符合本发明的发明精神。
请参阅图5，图5为本发明多媒体播放装置的第二实施方式的模块示意图。图5所示的播放装置500的组态与图2所示的播放装置的组态相似，而两者最主要的差异在于人脸侦测模块506所侦测的用户状态是用户的人脸位置(亦即用户的位置)而不是用户的人脸角度，因此，人脸侦测模块506会产生一个指示用户的人脸位置的侦测结果DR_P至选择电路514。当侦测结果DR_P指出用户的人脸位置有所改变(亦即用户的位置产生改变)时，选择电路514会借着由输出S_1～S_M中的一个输出切换至另一个输出以改变所选到的输出S。
简而言之，当使用者的人脸对应于第一位置时，视频播放模块504会控制显示屏幕201以显示对应第一视角的第一视频比特流的画面，以及当使用者的人脸对应于第二位置时(亦即用户的人脸位置有所改变)，视频播放模块504会控制显示屏幕201以显示对应第二视角(相异于第一视角)的第二视频比特流的画面。
请一并参阅图3与图6，图6为运用图5所示的播放装置500来进行自动调整多媒体内容播放的操作示意图。如图6中的附图(B)所示，当使用者处在特定位置并以与图3所示的视角A3相同或相近的正常视角来观赏显示屏幕201时，视频播放模块504会驱动显示屏幕201以显示视频比特流BS_3所对应的画面FBS_3。如图6中附图(A)所示，当使用者想要观赏于足球场的左边角落所发生的事件时，使用者会往左方移动至一个新的位置，因此，因应侦测结果DR_A(其指出用户的人脸位置向左移动)，视频播放模块504会通过驱动显示屏幕201显示视频比特流BS_2所对应的画面FBS_2来自动调整视频的播放。如图6中附图(C)所示，当使用者想要观赏于足球场的右边角落所发生的事件时，使用者会往右方移动至一个新的位置，因此，根据侦测结果DR_A(其指出用户的人脸位置向右移动)，视频播放模块504会通过驱动显示屏幕201显示视频比特流BS_4所对应的画面FBS_4来自动调整视频的播放。请注意，图6所示的例子仅作为范例说明之用，并非用来作为本发明之限制，换言之，只要多媒体内容的播放会因应指示出用户的人脸位置的变化(亦即用户位置的变化)的侦测结果而自动地调整时，皆符合本发明的发明精神。
请参阅图7，图7为本发明多媒体播放装置的第三实施方式的模块示意图。播放装置700包含(但不局限于)：接收接口702、视频播放模块704，以及人脸侦测模块706。请注意，播放装置700的组态基于图1所示的播放装置架构，举例来说，图1所示的输出装置101是由显示屏幕201来加以实作、图1所示的接收功能模块102是以图7所示的接收接口702来加以实作、图1所示的侦测功能模块106是以人脸侦测模块706来加以实作，以及图1所示的播放功能模块104是以视频播放模块704来加以实作。在本实施方式中，多媒体内容DATA_IN包含至少一个视频比特流BS，举例来说，视频比特流BS可以是上述多个视频比特流BS1～BSN之中的一个视频比特流。
由接收接口702所接收的视频比特流BS会被传送至视频播放模块704，以进行更进一步的处理。如图7所示，视频播放模块704包含(但并不局限于)：译码电路712、判断电路(determining circuit)714、处理电路(processing circuit)716以及视频控制器718。视频比特流BS译码所产生的多个画面(亦即译码电路712的输出S_BS)，会从译码电路712被传送到判断电路714。判断电路714会依据人脸侦测模块706所产生的侦测结果DR_P，来选择多个画面中每一个画面的一个局部影像(partial image)。处理电路716则依据视频效果设定(videoeffect setting)来处理多个画面所分别选出的多个局部影像，以产生多个已处理影像(processed image)，然后传送多个已处理影像至视频控制器718。接着，视频控制器718会驱动显示屏幕201以显示多个已处理影像。
于本实施方式中，上述的使用者状态是用户的人脸位置/用户的位置，因此，接收接口702另接收由上述的影像获取设备(例如，视频摄影机)218所产生的获取影像IMG。人脸侦测模块706的运作与图5所示的人脸侦测模块506的运作相同，换言之，人脸侦测模块706会基于获取影像IMG来进行人脸侦测，以侦测使用者状态(亦即用户的人脸位置)。当侦测结果DR_P指示用户的人脸位置有所改变时，判断电路714可改变自译码电路712所产生的每一个画面中选取出局部影像的位置，及/或处理电路716可调整目前正在使用的视频效果设定。
举例来说，当侦测结果DR_P传送用户的人脸位置/用户的位置的第一指示值而据此判断出使用者的人脸对应于第一位置的时候，视频播放模块704会依据第一指示值，自视频比特流BS所得的多个第一画面中每一个第一画面中选择第一局部影像、依据第一视频效果设定来处理多个第一画面所选取的多个第一局部影像以产生多个已处理第一影像，以及依据多个已处理第一影像来驱动显示屏幕201。当侦测结果DR_P传送用户的人脸位置/用户的位置的第二指示值而据此判断出使用者的人脸对应于第二位置的时候，视频播放模块704会依据第二指示值，自视频比特流BS所得的多个第二画面中每一个第二画面选择第二局部影像、依据与第一视频效果设定相异的第二视频效果设定来处理多个第二画面所选取的多个第二局部影像以产生多个已处理第二影像，以及依据多个已处理第二影像来驱动显示屏幕201。
请参阅图8，图8为运用图7所示的播放装置700来进行自动调整多媒体内容播放的操作示意图。如图8中的附图(B)所示，当用户处在位置P1以及用户的人脸位置靠近显示屏幕201的显示区802的时候，视频播放模块704会显示因应用户人脸位置的第一缩放设定(zooming setting)与第一指示值所产生的多个第一已处理影像IMG_1。当用户由位置P1移动至新的位置P2时，此时，用户人脸位置会靠近显示屏幕201的显示区806，因此，如图8中附图(A)所示，视频播放模块704会显示因应用户人脸位置的第二缩放设定与第二指示值所产生的多个第二已处理影像IMG_2，具体地说，由于侦测结果DR_P所指示的用户人脸位置的第二指示值的缘故，因此显示区806中的多个局部影像会被选取，并接着被以第二缩放设定所定义的放大比例(zoom-in ratio)来放大。当用户由位置P1移动至新的位置P3时，此时，用户人脸位置会靠近显示屏幕201的显示区804，因此，如图8中附图(C)所示，视频播放模块704会显示因应用户人脸位置的第三缩放设定与第三指示值所产生的多个第三已处理影像IMG_3，具体地说，由于侦测结果DR_P所指示的用户人脸位置的第三指示值的缘故，因此，显示区804中多个局部影像会被选取，并接着被以第三缩放设定所定义的放大比例来放大。请注意，用户与显示屏幕201之间的距离D1、D2以及D3，彼此之间是不同的。在设计范例中，多个缩放设定会具有不同的放大/缩小(zoom-out)比例，例如，由于D1＞D2，第一缩放设定会具有一个小于第二缩放设定的放大比例；以及由于D2＞D3，第二缩放设定会具有一个小于第三缩放设定的放大比例。然而，以上仅作为范例说明之用，并非用来作为本发明的限制，也就是说，只要多媒体内容的播放会因应指示出用户的人脸位置/用户的位置的变化的侦测结果而自动地调整，皆符合本发明的发明精神。
请注意，图7所示的判断电路714可为选择性(optional)的组件，换言之，在另一实施方式中，可以省略判断电路714。请参阅图9，图9为本发明多媒体播放装置的第四实施方式的模块示意图。播放装置700与播放装置900彼此之间主要的不同之处在于图9所示的播放装置900中的视频播放模块904并没有判断电路，因此，译码电路712的输出S_BS会被传送至处理电路916。于此实施方式中，处理电路916依据视频效果设定以通过处理视频比特流BS中多个画面来产生多个已处理画面，并接着传送多个已处理画面至视频控制器718，接下来，视频控制器718会驱动显示屏幕201以显示多个已处理画面。请注意，当侦测结果DR_P指示用户的人脸位置/用户的位置有所改变时，处理电路916可调整目前正在使用的视频效果设定，因而调整视频的播放。
举例来说，当侦测结果DR_P传送用户人脸位置的第一指示值而据此判断出使用者人脸对应于第一位置的时候，视频播放模块904会依据第一视频设定来处理视频比特流BS中多个第一画面以产生多个第一已处理画面，并依据多个第一已处理画面来驱动显示屏幕201。当侦测结果DR_P传送用户人脸位置的第二指示值而据此判断出使用者人脸对应于第二位置的时候，视频播放模块904会依据与第一视频设定相异的第二视频设定来处理视频比特流BS中多个第二画面以产生多个第二已处理画面，并依据多个第二已处理画面来驱动显示屏幕201。举例来说(但本发明并不局限于此)，第一视频设定包含第一缩放设定，以及第二视频设定包含第二缩放设定。
请参阅图10，图10为运用图9所示的播放装置900来进行自动调整多媒体内容播放的操作示意图。如图10中附图(B)所示，当用户处在位置P1来观赏显示屏幕201时，视频播放模块904会显示因应用户人脸位置的第一指示值而配置的第一缩放设定所产生的多个第一已处理影像IMG_1。如图10中附图(A)所示，当用户由位置P1移动至新的位置P2时，视频播放模块904会显示因应用户人脸位置的第二指示值而配置的第二缩放设定所产生的多个第二已处理影像IMG_2’，具体地说，中间显示区802的多个局部影像由第二缩放设定所定义的放大比例来放大。如图10中附图(C)所示，当用户由位置P1移动至新的位置P3时，视频播放模块904会显示因应用户人脸位置的第三指示值而配置的第三缩放设定所产生的多个第三已处理影像IMG_3’，具体地说，中间显示区802的多个局部影像由第三缩放设定所定义的放大比例来放大。请注意，用户与显示屏幕201之间的距离D1、D2以及D3，彼此之间是不同的。在设计范例中，多个缩放设定会具有不同的放大/缩小比例，例如，由于D1＞D2，第一缩放设定会具有一个小于第二缩放设定的放大比例；以及由于D2＞D3，第二缩放设定会具有一个小于第三缩放设定的放大比例。由图10可轻易了解，无论用户的人脸位置/用户的位置为何，在同样的中间显示区802内的多个局部影像皆可通过多个适当的放大比例值来放大。然而，以上仅作范例说明之用，并非用来作为本发明的限制，也就是说，只要多媒体内容的播放会因应指示出用户的人脸位置/用户的位置的变化的侦测结果而自动地调整，皆符合本发明之发明精神。
除了视频播放控制以外，同样的概念也可应用于音频(audio)播放控制以提升使用者聆听的体验。请参阅图11，图11为本发明多媒体播放装置的第五实施方式的模块示意图。播放装置1100包含有(但不局限于)：接收接口1102、音频播放模块(audio playback module)1104以及人脸侦测模块1106。请注意，播放装置1100的组态是基于图1所示的播放装置架构，举例来说，图1所示的输出装置101是由扬声系统(speak system)1101来加以实作、图1所示的接收功能模块102是以接收接口1102来加以实作、图1所示的侦测功能模块106是以人脸侦测模块1106来加以实作，以及图1所示的播放功能模块104是以音频播放模块1104来加以实作。在本实施方式中，多媒体内容DATA_IN包含音频数据DA，例如是已编码/已调变(encoded/modulated)的音频输入。
接收接口1102所接收的音频数据DA会被传送到音频播放模块1104以供进一步处理。如图11所示，音频播放模块1104包含有(但不局限于)：译码电路1112、处理电路1114以及音频输出电路(audiooutput circuit)1116。音频数据DA译码所产生的多个音频取样(audiosample)会从译码电路1112传送到处理电路1114，而处理电路1114会依据音频效果设定来对于译码电路1112的输出S_A进行处理，并且传送多个已处理音频取样(processed audio sample)至音频输出电路1116，接下来，音频输出电路1116会驱动扬声系统1101以播放多个已处理音频取样。请注意，音频效果设定是依据人脸侦测模块1106所产生的侦测结果DR_P来加以设定。
举例来说(但本发明不局限于此)，扬声系统1101可以是一个双声道扬声系统(two-channel speaker system)，以及音频效果设定环绕音频设定(surrounding audio setting)。多视角立体算法(multi-viewstereo algorithm，MVS algorithm)可被应用于处理电路1114以创造出用户所渴望的环绕音效(surrounding sound effect)。图12说明了多视角立体算法如何运作以呈现环绕音效给用户。如图12所示，双声道扬声系统包含左声道扬声器(left-channel speaker)SPKL以及右声道扬声器(right-channel speaker)SPKR，且由左声道输入XL与右声道输入XR所驱动以呈现环绕音效给用户。请注意，图中所示的多个角度值θL与θR系由用户的位置来决定，换言之，当用户位置有所改变时，多视角立体算法所使用的多个参数也应适度地调整。如图12所示，左声道扬声器SPKL的音频输入可传送到用户的左耳与右耳，而其中的传送方式可利用多个参数HLL与HLR来模型化；同样地，右声道扬声器SPKR的音频输入可传送到用户的右耳与左耳，而其中的传送方式可利用多个参数HRR与HRL来模型化。为了要呈现环绕音效给用户，左声道输入XL与右声道输入XR可利用下列公式来决定：
X L X R = H L H LL - ( H RL H LL ) ( H R H RR ) - ( H LR H RR ) ( H L H LL ) H R H RR S L S R - - - ( 1 )
在上述公式(1)中，参数SL与SR代表音源(sound source)，以及参数HL与HR由环绕声音应该被建立以供用户聆听的位置所决定。请注意，当音源为单音源(mono audio source)时，参数SL会等于参数SR；否则，参数SL与参数SR代表不同声道的资料。在图12所示的范例中，参数HL与HR会具有以下关系：HL＝HR＝H90。考虑角度值θL＝θR＝30°的情形下，上述参数HLL、HLR、HRR以及HRL会具有以下关系：HRL＝HLR＝H330以及HLL＝HRR＝H30。在实际应用上，可预先建构对照表(look-up table)，对照表储存了由多个用户的人脸位置/用户的位置所索引(index)的多个参数值集合(parameter value set)，举例来说，由图12所示的用户位置所索引的参数值集合包含HRL＝H330、HLR＝H330、HLL＝H30以及HRR＝H30。因此，基于用以指示出用户的人脸位置/用户的位置的侦测结果DR_P，音频效果设定会通过从预先建构的对照表中读取出所需的参数值集合来进行自动更新。
在此实施方式中，上述的使用者状态是用户的人脸位置/用户的位置，因此，人脸侦测模块1106的运作上述人脸侦测模块506/706的运作相同，也就是说，接收接口1102另接收由影像获取设备(例如，视频摄影机)218所产生的获取影像IMG。举例来说，影像获取设备218与扬声系统1101可被设置于同一显示设备(例如，电视机)中，因此，人脸侦测模块1106会对获取影像IMG进行人脸侦测以侦测使用者状态(亦即用户的人脸位置/用户的位置)。
当侦测结果DR_P指示用户的人脸位置/用户的位置有所改变时，处理电路1114也会因此改变音频效果设定。简而言之，当使用者人脸对应于第一位置以及接收接口1102接收音频数据DA的第一音频片段时，音频播放模块1104会依据第一音频效果设定来驱动扬声系统1101以播放第一音频片段；以及当用户人脸对应于第二位置(亦即用户人脸位置/用户位置有所改变)以及接收接口1102接收音频数据DA的第二音频片段时，音频播放模块1104会依据与第一音频设定相异的第二音频效果设定来驱动扬声系统1101以播放第二音频片段。举例来说(但本发明不局限于此)，第一音频设定是第一环绕音频设定，以及第二音频设定是第二环绕音频设定，而在一个较佳的实施方式中，第一环绕音频设定与第二环绕音频设定可分别对应于不同的音场深度(soundstage depth)，以提供使用者较佳的聆听体验。然而，以上仅作为范例说明之用，并非用来作为本发明的限制，也就是说，只要多媒体内容的播放会因应指示出用户的人脸位置/用户的位置的变化的侦测结果而自动地调整，皆符合本发明之发明精神。
如上文所述，播放装置1100具有驱动双声道扬声系统的能力以呈现环绕音效给予用户，而在播放装置1100使用于立体视频播放环境时，处理电路1114亦可考虑关于立体视频播放的景深(the depth offield)。举例来说，接收接口1102另接收与立体视频数据的播放相关的景深参数PD，并传送景深参数PD至处理电路1114，例如(但本发明并不局限于此)，景深参数PD可由用户接口/人机接口(userinterface/man-machine interface)来设定与提供，因此，除了侦测结果DR_P以外，景深参数PD亦可被参考来设定处理电路1114正在使用的音频效果设定。
在上述多个实施方式中，图1所示的侦测功能模块106是用人脸侦测模块206/506/706/1106来加以实作，然而，以上并非用来局限本发明的其他变形，换言之，任何具有可侦测使用者状态(例如，使用者的人脸角度、用户的人脸位置或用户的位置)的技术皆可运用其中，举例来说，当使用者按压遥控器(remote control)上的一个按键/按钮时，由遥控器所传送的控制信号可被感应以辨识出用户位置。此外，包含于多媒体内容DATA_IN的视频数据可传送平面视频内容或立体视频内容，及/或包含于多媒体内容DATA_IN的音频数据可传送单声道音频内容或双声道音频内容。再者，运用一种不是缩放设定的视频效果设定及/或运用一种不是环绕音频设定的音频效果设定也是可行的。
本领域中技术人员应能理解，在不脱离本发明的精神和范围的情况下，可对本发明做许多更动与改变。因此，上述本发明的范围具体应以后附的权利要求界定的范围为准。

Claims (28)

1.一种应用于多媒体内容的播放方法，包含有：
接收所述多媒体内容；
对所述多媒体内容进行播放；
侦测使用者状态，并据以产生侦测结果；以及
当所述侦测结果指示所述使用者状态具有变化时，调整所述多媒体内容的播放。
2.如权利要求1所述的应用于多媒体内容的播放方法，其特征在于，侦测所述使用者状态的步骤，包含：
接收获取影像；以及
对所述获取影像进行人脸侦测，以侦测所述使用者状态。
3.如权利要求1所述的应用于多媒体内容的播放方法，其特征在于，所述使用者状态是使用者的人脸角度。。
4.如权利要求3所述的应用于多媒体内容的播放方法，其特征在于，所述多媒体内容包含分别对应至多个视角的多个视频比特流；对所述多媒体内容进行播放的步骤包含：控制显示屏幕以显示对应第一视角的第一视频比特流的画面；以及调整所述多媒体内容的播放的步骤包含：当所述使用者的人脸角度改变时，控制所述显示屏幕以显示对应第二视角的第二视频比特流的画面，其中所述第一视角不同于所述第二视角。
5.如权利要求1所述的应用于多媒体内容的播放方法，其特征在于，所述使用者状态是用户的位置。
6.如权利要求5所述的应用于多媒体内容的播放方法，其特征在于，所述多媒体内容包含分别对应至多个视角的多个视频比特流；对所述多媒体内容进行播放的步骤包含：控制显示屏幕以显示对应第一视角的第一视频比特流的画面；以及调整所述多媒体内容的播放的步骤包含：当所述用户的位置改变时，控制所述显示屏幕以显示对应第二视角的第二视频比特流的画面，其中所述第一视角不同于所述第二视角。
7.如权利要求5所述的应用于多媒体内容的播放方法，其特征在于，所述多媒体内容包含视频比特流；对所述多媒体内容进行播放的步骤包含：依据至少所述视频比特流的多个第一画面以及第一视频效果设定来驱动显示屏幕；以及调整所述多媒体内容的播放的步骤包含：当所述用户的位置改变时，依据至少所述视频比特流的多个第二画面以及与所述第一视频效果设定相异的第二视频效果设定来驱动所述显示屏幕。
8.如权利要求7所述的应用于多媒体内容的播放方法，其特征在于，依据至少所述视频比特流的所述多个第一画面以及所述第一视频效果设定来驱动所述显示屏幕的步骤包含：依据所述第一视频效果设定来处理所述多个第一画面以产生多个已处理第一画面，以及依据所述多个已处理第一画面来驱动所述显示屏幕；以及依据至少所述视频比特流的所述多个第二画面以及与所述第二视频效果设定来驱动所述显示屏幕的步骤包含：依据所述第二视频效果设定来处理所述多个第二画面以产生多个已处理第二画面，以及依据所述多个已处理第二画面来驱动所述显示屏幕。
9.如权利要求7所述的应用于多媒体内容的播放方法，其特征在于，所述第一视频效果设定包含第一缩放设定，以及所述第二视频效果设定包含第二缩放设定。
10.如权利要求7所述的应用于多媒体内容的播放方法，其特征在于，依据至少所述视频比特流的所述多个第一画面与所述第一视频效果设定来驱动所述显示屏幕的步骤包含：
依据所述用户位置的第一指示值，选择所述多个第一画面的每一第一画面中的第一局部影像；
依据所述第一视频效果设定来处理所述多个第一画面所选取出的多个第一局部影像，以产生多个已处理第一影像；以及
依据所述多个已处理第一影像来驱动所述显示屏幕；以及
依据至少所述视频比特流的所述多个第二画面以及与所述第二视频效果设定来驱动所述显示屏幕的步骤包含有：
依据所述用户位置的第二指示值，选择所述多个第二画面的每一第二画面中的第二局部影像，其中所述第二指示值是不同于所述第一指示值；
依据所述第二视频效果设定来处理所述多个第二画面所选取出的多个第二局部影像，以产生多个已处理第二影像；以及
依据所述多个已处理第二影像来驱动所述显示屏幕。
11.如权利要求5所述的应用于多媒体内容的播放方法，其特征在于，所述多媒体内容包含音频数据；对所述多媒体内容进行播放的步骤包含：当接收到所述音频数据的第一音频片段时，依据第一音频效果设定来驱动扬声系统以播放所述第一音频片段；以及调整所述多媒体内容的播放的步骤包含：当所述用户的位置改变且接收到所述音频数据的第二音频片段时，依据与所述第一音频效果设定相异的第二音频效果设定来驱动所述扬声系统以播放所述第二音频片段。
12.如权利要求11所述的应用于多媒体内容的播放方法，其特征在于，所述第一音频效果设定是第一环绕音频设定，以及所述第二音频效果设定是第二环绕音频设定。
13.如权利要求11所述的应用于多媒体内容的播放方法，其中所述第一环绕音频设定与所述第二环绕音频设定是对应于不同的音场深度。
14.如权利要求11所述的应用于多媒体内容的播放方法，其特征在于，另包含：
接收与立体视频数据的播放相关的景深参数；
其中所述景深参数是被参考来设定所述第一音频效果设定与所述第二音频效果设定中至少其一。
15.一种应用于多媒体内容的播放装置，包含有：
接收功能模块，用以接收所述多媒体内容；
播放功能模块，耦接于所述接收功能模块，用以对所述多媒体内容进行播放；
侦测功能模块，耦接于所述播放功能模块，用以侦测使用者状态，并据以产生侦测结果；
其中当所述侦测结果指示所述使用者状态有变化时，所述播放功能模块会调整所述多媒体内容的播放。
16.如权利要求15所述的应用于多媒体内容的播放装置，其特征在于，所述接收功能模块另接收获取影像，以及所述侦测功能模块对所述获取影像进行人脸侦测以侦测所述使用者状态。
17.如权利要求15所述的应用于多媒体内容的播放装置，其特征在于，所述用户状态是使用者的人脸角度。
18.如权利要求17所述的应用于多媒体内容的播放装置，其特征在于，所述多媒体内容包含分别对应多个视角的多个视频比特流；所述播放功能模块控制显示屏幕显示对应第一视角的第一视频比特流的画面；以及当所述使用者的人脸角度改变时，所述播放功能模块控制所述显示屏幕显示对应第二视角的第二视频比特流的画面，其中所述第一视角不同于所述第二视角。
19.如权利要求15所述的应用于多媒体内容的播放装置，其特征在于，所述用户状态是用户的位置。
20.如权利要求19所述的应用于多媒体内容的播放装置，其特征在于，所述多媒体内容包含分别对应多个视角的多个视频比特流；所述播放功能模块控制显示屏幕显示对应第一视角的第一视频比特流的画面；以及当所述用户的位置改变时，所述播放功能模块控制所述显示屏幕显示对应第二视角的第二视频比特流的画面，其中所述第一视角不同于所述第二视角。
21.如权利要求19所述的应用于多媒体内容的播放装置，其特征在于，所述多媒体内容包含视频比特流；所述播放功能模块依据至少所述视频比特流的多个第一画面以及第一视频效果设定来驱动显示屏幕；以及当所述用户的位置改变时，依据至少所述视频比特流的多个第二画面以及与所述第一视频效果设定相异的第二视频效果设定来驱动所述显示屏幕。
22.如权利要求21所述的应用于多媒体内容的播放装置，其特征在于，所述播放功能模块依据所述第一视频效果设定来处理所述多个第一画面以产生多个已处理第一画面，以及依据所述多个已处理第一画面来驱动所述显示屏幕；以及所述播放功能模块另依据所述第二视频效果设定来处理所述多个第二画面以产生多个已处理第二画面，以及依据所述多个已处理第二画面来驱动所述显示屏幕。
23.如权利要求21所述的应用于多媒体内容的播放装置，其特征在于，所述第一视频效果设定包含第一缩放设定，以及所述第二视频效果设定包含第二缩放设定。
24.如权利要求21所述的应用于多媒体内容的播放装置，其特征在于，所述播放功能模块会依据所述用户位置的第一指示值，选择所述多个第一画面的每一第一画面中的第一局部影像、依据所述第一视频效果设定来处理所述多个第一画面所选取出的多个第一局部影像以产生多个已处理第一影像，以及依据所述多个已处理第一影像来驱动所述显示屏幕；以及所述播放功能模块另依据所述用户位置的第二指示值，选择所述多个第二画面的每一第二画面中的第二局部影像，其中所述第二指示值不同于所述第一指示值、依据所述第二视频效果设定来处理所述多个第二画面所选取出的多个第二局部影像以产生多个已处理第二影像，以及依据所述多个已处理第二影像来驱动所述显示屏幕。
25.如权利要求19所述的应用于多媒体内容的播放装置，其特征在于，所述多媒体内容包含音频数据；当所述接收功能模块接收到所述音频数据的第一音频片段时，所述播放功能模块会依据第一音频效果设定来驱动扬声系统以播放所述音频数据的所述第一音频片段；以及当所述用户的位置改变与所述接收功能模块接收到所述音频数据的第二音频片段时，所述播放功能模块会依据与所述第一音频效果设定相异的第二音频效果设定来驱动所述扬声系统以播放所述第二音频片段。
26.如权利要求25所述的应用于多媒体内容的播放装置，其特征在于，所述第一音频效果设定是第一环绕音频设定，以及所述第二音频效果设定是第二环绕音频设定。
27.如权利要求25所述的应用于多媒体内容的播放装置，其特征在于，所述第一环绕音频设定与所述第二环绕音频设定对应于不同的音场深度。
28.如权利要求25所述的应用于多媒体内容的播放装置，其特征在于，所述接收功能模块另接收与立体视频数据的播放相关的景深参数，以及所述景深参数被参考来设定所述第一音频效果设定与所述第二音频效果设定中至少其一。
CN201210073341.2A 2011-04-14 2012-03-19 应用于多媒体内容的播放方法与播放装置 Active CN102740154B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/087,349 2011-04-14
US13/087,349 US8988512B2 (en) 2011-04-14 2011-04-14 Method for adjusting playback of multimedia content according to detection result of user status and related apparatus thereof

Publications (2)

Publication Number Publication Date
CN102740154A true CN102740154A (zh) 2012-10-17
CN102740154B CN102740154B (zh) 2015-07-15

Family

ID=46994799

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210073341.2A Active CN102740154B (zh) 2011-04-14 2012-03-19 应用于多媒体内容的播放方法与播放装置

Country Status (3)

Country Link
US (2) US8988512B2 (zh)
CN (1) CN102740154B (zh)
TW (1) TWI513305B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103546672A (zh) * 2013-11-07 2014-01-29 苏州君立软件有限公司 一种图像采集系统
CN103873917A (zh) * 2012-12-13 2014-06-18 联想(北京)有限公司 一种多媒体播放处理方法及系统
WO2015180647A1 (en) * 2014-05-27 2015-12-03 Mediatek Inc. Projection processor for projective display system
CN105263072A (zh) * 2014-07-14 2016-01-20 宏碁股份有限公司 多媒体播放系统及其声道控制方法
CN106416239A (zh) * 2014-05-29 2017-02-15 奈克斯特Vr股份有限公司 用于交付内容和/或回放内容的方法和装置
CN107147824A (zh) * 2016-06-22 2017-09-08 深圳市量子视觉科技有限公司 多视角视频的输出方法和装置
WO2017161907A1 (zh) * 2016-03-22 2017-09-28 腾讯科技（深圳）有限公司 视频编码方法及装置、设备、存储介质
CN111225269A (zh) * 2020-01-17 2020-06-02 北京达佳互联信息技术有限公司 视频播放方法、装置、播放终端及存储介质
US10694115B2 (en) 2015-09-30 2020-06-23 Huawei Technologies Co., Ltd. Method, apparatus, and terminal for presenting panoramic visual content
CN114285933A (zh) * 2021-12-23 2022-04-05 天翼视讯传媒有限公司 一种实现手机视频、图片随人脸位置变化而变化的方法
US11336966B2 (en) 2014-05-29 2022-05-17 Nevermind Capital Llc Methods and apparatus for delivering content and/or playing back content
CN114816641A (zh) * 2022-05-09 2022-07-29 海信视像科技股份有限公司 显示设备、多媒体内容显示方法和存储介质

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011205487A (ja) * 2010-03-26 2011-10-13 Panasonic Corp 指向性音響システム
JP5772069B2 (ja) * 2011-03-04 2015-09-02 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US8988512B2 (en) * 2011-04-14 2015-03-24 Mediatek Inc. Method for adjusting playback of multimedia content according to detection result of user status and related apparatus thereof
KR101873759B1 (ko) * 2012-04-10 2018-08-02 엘지전자 주식회사 영상 표시 장치 및 그 제어방법
TWI499289B (zh) * 2013-01-25 2015-09-01 Wistron Corp 媒體內容推薦方法及媒體播放系統
TWI558229B (zh) 2014-05-06 2016-11-11 宏碁股份有限公司 多媒體播放系統及其聲道控制方法
TWI556624B (zh) * 2014-07-18 2016-11-01 友達光電股份有限公司 影像顯示方法以及影像顯示裝置
US10481856B2 (en) * 2017-05-15 2019-11-19 Microsoft Technology Licensing, Llc Volume adjustment on hinged multi-screen device
US11748406B2 (en) * 2021-11-01 2023-09-05 Lucasfilm Entertainment Company Ltd. LLC AI-assisted sound effect editorial

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5287437A (en) * 1992-06-02 1994-02-15 Sun Microsystems, Inc. Method and apparatus for head tracked display of precomputed stereo images
CN101742096A (zh) * 2010-01-21 2010-06-16 中华电信股份有限公司 多视角互动电视系统与方法
CN101931823A (zh) * 2009-06-24 2010-12-29 夏普株式会社 显示3d图像的方法和设备

Family Cites Families (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6266106B1 (en) * 1997-09-24 2001-07-24 Sanyo Electric Co., Ltd. Liquid crystal shutter glasses having inclined liquid crystal glasses
US6816904B1 (en) * 1997-11-04 2004-11-09 Collaboration Properties, Inc. Networked video multimedia storage server environment
US20020163482A1 (en) * 1998-04-20 2002-11-07 Alan Sullivan Multi-planar volumetric display system including optical elements made from liquid crystal having polymer stabilized cholesteric textures
US6590983B1 (en) * 1998-10-13 2003-07-08 Srs Labs, Inc. Apparatus and method for synthesizing pseudo-stereophonic outputs from a monophonic input
US6788274B2 (en) * 2000-01-31 2004-09-07 National Institute Of Information And Communications Technology Apparatus and method for displaying stereoscopic images
US7127081B1 (en) * 2000-10-12 2006-10-24 Momentum Bilgisayar, Yazilim, Danismanlik, Ticaret, A.S. Method for tracking motion of a face
US7155036B2 (en) * 2000-12-04 2006-12-26 Sony Corporation Face detection under varying rotation
US6421259B1 (en) * 2000-12-28 2002-07-16 International Business Machines Corporation Modular DC distribution system for providing flexible power conversion scalability within a power backplane between an AC source and low voltage DC outputs
US7027620B2 (en) * 2001-06-07 2006-04-11 Sony Corporation Method of recognizing partially occluded and/or imprecisely localized faces
US7221809B2 (en) * 2001-12-17 2007-05-22 Genex Technologies, Inc. Face recognition system and method
US20040072584A1 (en) * 2002-03-01 2004-04-15 Kern Ronald J. Wireless distribution of multimedia content
US8599266B2 (en) * 2002-07-01 2013-12-03 The Regents Of The University Of California Digital processing of video images
DE10243096A1 (de) * 2002-09-16 2004-03-25 Michael Thiemann Streamingportal, Computervorrichtung mit dem Streamingportal, Verfahren zum Bereitstellen des Streamingportals, Computerprogrammprodukt, computerlesbares Medium, Computernetzwerk zum Bereitstellen des Streamingportals, erstes, zweites und drittes Computersystem und Verwendung derselben
US20060203085A1 (en) * 2002-11-28 2006-09-14 Seijiro Tomita There dimensional image signal producing circuit and three-dimensional image display apparatus
US7643683B2 (en) * 2003-03-06 2010-01-05 Animetrics Inc. Generation of image database for multifeatured objects
US7428000B2 (en) * 2003-06-26 2008-09-23 Microsoft Corp. System and method for distributed meetings
US7738554B2 (en) * 2003-07-18 2010-06-15 Microsoft Corporation DC coefficient signaling at small quantization step sizes
WO2006012679A1 (en) * 2004-08-03 2006-02-09 Silverbrook Research Pty Ltd Head mounted display with wave front modulator
KR20060029074A (ko) * 2004-09-30 2006-04-04 삼성에스디아이 주식회사 전자방출 표시장치 및 이의 제조방법
US20070035628A1 (en) * 2005-08-12 2007-02-15 Kunihiko Kanai Image-capturing device having multiple optical systems
JP4595750B2 (ja) * 2005-08-29 2010-12-08 ソニー株式会社 画像処理装置および方法、並びにプログラム
US8214516B2 (en) * 2006-01-06 2012-07-03 Google Inc. Dynamic media serving infrastructure
US20070277203A1 (en) * 2006-05-25 2007-11-29 Samsung Electronics Co., Ltd. Apparatus and method for receiving digital multimedia broadcast in electronic device
JP4683339B2 (ja) * 2006-07-25 2011-05-18 富士フイルム株式会社 画像トリミング装置
US20080118086A1 (en) * 2006-11-16 2008-05-22 Scott Krig Method and System For Controlling Volume Settings For Multimedia Devices
US7693535B2 (en) * 2006-12-22 2010-04-06 Sony Ericsson Mobile Communications Ab Communication systems and methods for providing a group play list for multimedia content records
TWI363555B (en) * 2007-01-25 2012-05-01 Inventec Appliances Corp Communication apparatus with network multimedia playback function
US8253797B1 (en) * 2007-03-05 2012-08-28 PureTech Systems Inc. Camera image georeferencing systems
JP4782725B2 (ja) * 2007-05-10 2011-09-28 富士フイルム株式会社 合焦装置および方法並びにプログラム
JP4600435B2 (ja) * 2007-06-13 2010-12-15 ソニー株式会社 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム
DE202007010389U1 (de) * 2007-07-24 2007-09-27 Maier, Florian Vorrichtung zur automatischen Positionierung von gekoppelten Kameras zur plastischen Bilddarstellung
JP4946730B2 (ja) * 2007-08-27 2012-06-06 ソニー株式会社 顔画像処理装置及び顔画像処理方法、並びにコンピュータ・プログラム
US8488901B2 (en) * 2007-09-28 2013-07-16 Sony Corporation Content based adjustment of an image
US8155090B2 (en) * 2007-11-01 2012-04-10 Telefonaktiebolaget L M Ericsson (Publ) Method and apparatus for efficient multimedia delivery in a wireless packet network
US8612384B2 (en) * 2008-04-02 2013-12-17 Michael Andrew Hall Methods and apparatus for searching and accessing multimedia content
WO2009157159A1 (ja) * 2008-06-24 2009-12-30 パナソニック株式会社 記録媒体、再生装置、集積回路、再生方法、プログラム
EP2293553B1 (en) * 2008-06-26 2013-09-11 Panasonic Corporation Recording medium, reproducing device, recording device, reproducing method, recording method, and program
US9532001B2 (en) * 2008-07-10 2016-12-27 Avaya Inc. Systems, methods, and media for providing selectable video using scalable video coding
US8331023B2 (en) * 2008-09-07 2012-12-11 Mediatek Inc. Adjustable parallax barrier 3D display
US20100081486A1 (en) * 2008-09-26 2010-04-01 Kim Justin C Portable wireless communication device
AU2009299356A1 (en) * 2008-09-30 2011-08-25 Panasonic Corporation Reproduction device, recording medium, and integrated circuit
RU2519433C2 (ru) * 2008-10-21 2014-06-10 Конинклейке Филипс Электроникс Н.В. Способ и система для обработки входного трехмерного видеосигнала
JP5472584B2 (ja) * 2008-11-21 2014-04-16 ソニー株式会社 撮像装置
US8111247B2 (en) * 2009-03-27 2012-02-07 Sony Ericsson Mobile Communications Ab System and method for changing touch screen functionality
GB2471137B (en) * 2009-06-19 2011-11-30 Sony Comp Entertainment Europe 3D image processing method and apparatus
US9131279B2 (en) * 2009-08-06 2015-09-08 Qualcomm Incorporated Preparing video data in accordance with a wireless display protocol
US8442244B1 (en) * 2009-08-22 2013-05-14 Marshall Long, Jr. Surround sound system
KR101695809B1 (ko) * 2009-10-09 2017-01-13 엘지전자 주식회사 이동 단말기 및 그 제어방법
US8274592B2 (en) * 2009-12-22 2012-09-25 Eastman Kodak Company Variable rate browsing of an image collection
US8964013B2 (en) * 2009-12-31 2015-02-24 Broadcom Corporation Display with elastic light manipulator
KR101349227B1 (ko) * 2010-03-29 2014-02-11 한국전자통신연구원 멀티미디어 시스템에서 객체 정보 제공 장치 및 방법
US8446461B2 (en) * 2010-07-23 2013-05-21 Superd Co. Ltd. Three-dimensional (3D) display method and system
US9226045B2 (en) * 2010-08-05 2015-12-29 Qualcomm Incorporated Signaling attributes for network-streamed video data
US20120086777A1 (en) * 2010-10-08 2012-04-12 Industrial Technology Research Institute Systems and methods for detecting and displaying three-dimensional videos
US8988512B2 (en) * 2011-04-14 2015-03-24 Mediatek Inc. Method for adjusting playback of multimedia content according to detection result of user status and related apparatus thereof

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5287437A (en) * 1992-06-02 1994-02-15 Sun Microsystems, Inc. Method and apparatus for head tracked display of precomputed stereo images
CN101931823A (zh) * 2009-06-24 2010-12-29 夏普株式会社 显示3d图像的方法和设备
CN101742096A (zh) * 2010-01-21 2010-06-16 中华电信股份有限公司 多视角互动电视系统与方法

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103873917A (zh) * 2012-12-13 2014-06-18 联想(北京)有限公司 一种多媒体播放处理方法及系统
CN103546672B (zh) * 2013-11-07 2016-09-07 苏州君立软件有限公司 一种图像采集系统
CN103546672A (zh) * 2013-11-07 2014-01-29 苏州君立软件有限公司 一种图像采集系统
US10136114B2 (en) 2014-05-27 2018-11-20 Mediatek Inc. Projection display component and electronic device
WO2015180647A1 (en) * 2014-05-27 2015-12-03 Mediatek Inc. Projection processor for projective display system
CN106416239A (zh) * 2014-05-29 2017-02-15 奈克斯特Vr股份有限公司 用于交付内容和/或回放内容的方法和装置
US11871085B2 (en) 2014-05-29 2024-01-09 Nevermind Capital Llc Methods and apparatus for delivering content and/or playing back content
CN106416239B (zh) * 2014-05-29 2019-04-09 奈克斯特Vr股份有限公司 用于交付内容和/或回放内容的方法和装置
US11336966B2 (en) 2014-05-29 2022-05-17 Nevermind Capital Llc Methods and apparatus for delivering content and/or playing back content
CN105263072A (zh) * 2014-07-14 2016-01-20 宏碁股份有限公司 多媒体播放系统及其声道控制方法
CN105263072B (zh) * 2014-07-14 2018-12-18 宏碁股份有限公司 多媒体播放系统及其声道控制方法
US10694115B2 (en) 2015-09-30 2020-06-23 Huawei Technologies Co., Ltd. Method, apparatus, and terminal for presenting panoramic visual content
WO2017161907A1 (zh) * 2016-03-22 2017-09-28 腾讯科技（深圳）有限公司 视频编码方法及装置、设备、存储介质
US10951818B2 (en) 2016-03-22 2021-03-16 Tencent Technology (Shenzhen) Company Limited Video encoding method and apparatus, device, and storage medium
CN107147824A (zh) * 2016-06-22 2017-09-08 深圳市量子视觉科技有限公司 多视角视频的输出方法和装置
CN111225269A (zh) * 2020-01-17 2020-06-02 北京达佳互联信息技术有限公司 视频播放方法、装置、播放终端及存储介质
CN114285933A (zh) * 2021-12-23 2022-04-05 天翼视讯传媒有限公司 一种实现手机视频、图片随人脸位置变化而变化的方法
CN114816641A (zh) * 2022-05-09 2022-07-29 海信视像科技股份有限公司 显示设备、多媒体内容显示方法和存储介质

Also Published As

Publication number Publication date
US8988512B2 (en) 2015-03-24
CN102740154B (zh) 2015-07-15
US20150153940A1 (en) 2015-06-04
US9367218B2 (en) 2016-06-14
TW201242356A (en) 2012-10-16
TWI513305B (zh) 2015-12-11
US20120262555A1 (en) 2012-10-18

Similar Documents

Publication Publication Date Title
CN102740154B (zh) 应用于多媒体内容的播放方法与播放装置
US20100328419A1 (en) Method and apparatus for improved matching of auditory space to visual space in video viewing applications
US9497390B2 (en) Video processing method, apparatus, and system
US20110029874A1 (en) Systems and methods for adjusting volume of combined audio channels
US20130106997A1 (en) Apparatus and method for generating three-dimension data in portable terminal
CN102273215A (zh) 影像再现装置
US20120230525A1 (en) Audio device and audio system
CN110958537A (zh) 一种智能音箱及智能音箱使用的方法
CN102484737A (zh) 使用显示装置的屏幕大小的信号处理方法及其设备
US20140362198A1 (en) Stereoscopic Video Processor, Stereoscopic Video Processing Method and Stereoscopic Video Processing Program
CN108834038A (zh) 用于渲染声学信号的方法和设备
WO2017208821A1 (ja) 音響処理装置および方法、並びにプログラム
US20140015941A1 (en) Image display apparatus, method for displaying image and glasses apparatus
CN101489168A (zh) 手持装置及其音讯输出的切换方法
KR102561371B1 (ko) 디스플레이장치와, 기록매체
CN106293603A (zh) 音频输出系统和输出方法
JP2006109241A (ja) 音声出力装置、映像表示装置
JP2009055099A (ja) コンテンツ視聴システム
WO2020031453A1 (ja) 情報処理装置及び情報処理方法、並びに映像音声出力システム
KR20100028326A (ko) 미디어 처리 방법 및 그를 위한 장치
KR102284914B1 (ko) 프리셋 영상이 구현되는 사운드 트랙킹 시스템
JP2006166362A (ja) 音響装置
US20120281073A1 (en) Customization of 3DTV User Interface Position
KR101534295B1 (ko) 멀티 뷰어 영상 및 3d 입체음향 제공방법 및 장치
JP5166567B2 (ja) 電子機器、映像データの表示制御方法、およびプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220225

Address after: ottawa

Patentee after: Xueshan Technology Co.,Ltd.

Address before: China Taiwan Hsinchu Science Park Hsinchu city Dusing a road No.

Patentee before: MEDIATEK Inc.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20220513

Address after: Taiwan, Hsinchu, China Science Industry Park, Hsinchu Road, force six, No. eight

Patentee after: Taiwan Semiconductor Manufacturing Co.,Ltd.

Address before: ottawa

Patentee before: Xueshan Technology Co.,Ltd.