JP2021108481A - 360ビデオストリーミングのための予測ビットレート選択 - Google Patents
360ビデオストリーミングのための予測ビットレート選択 Download PDFInfo
- Publication number
- JP2021108481A JP2021108481A JP2021065818A JP2021065818A JP2021108481A JP 2021108481 A JP2021108481 A JP 2021108481A JP 2021065818 A JP2021065818 A JP 2021065818A JP 2021065818 A JP2021065818 A JP 2021065818A JP 2021108481 A JP2021108481 A JP 2021108481A
- Authority
- JP
- Japan
- Prior art keywords
- viewports
- frames
- high resolution
- view orientation
- metadata
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000013598 vector Substances 0.000 claims description 20
- 238000000034 method Methods 0.000 claims description 19
- 230000008859 change Effects 0.000 claims description 6
- 230000000694 effects Effects 0.000 claims description 6
- 238000012986 modification Methods 0.000 claims description 4
- 230000004048 modification Effects 0.000 claims description 4
- 230000006870 function Effects 0.000 description 4
- 238000004519 manufacturing process Methods 0.000 description 3
- 230000007704 transition Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000003139 buffering effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000002730 additional effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/80—Responding to QoS
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
- H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/752—Media network packet handling adapting media to network capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/56—Provisioning of proxy services
- H04L67/568—Storing data temporarily at an intermediate stage, e.g. caching
- H04L67/5681—Pre-fetching or pre-delivering data based on network characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
- H04N21/44213—Monitoring of end-user related data
- H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/637—Control signals issued by the client directed to the server or network components
- H04N21/6373—Control signals issued by the client directed to the server or network components for rate control, e.g. request to the server to modify its transmission rate
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
- H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
- H04L69/322—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
- H04L69/329—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the application layer [OSI layer 7]
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Databases & Information Systems (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Social Psychology (AREA)
- Human Computer Interaction (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Closed-Circuit Television Systems (AREA)
- Transforming Electric Information Into Light Information (AREA)
Abstract
Description
本出願は、2017年4月6日に出願された米国特許出願番号第15/481,324号の優先権の利益を主張し、その内容全体が参照によって本明細書に組み込まれる。
典型的には、ネットワークを介して360度ビデオをストリーミングすることは、全て1つの品質のビデオストリームのセットを受信することを伴う。より新しいストリーミング技術は、視聴者が着目している領域において高品質のストリームをロードすることのみによって、帯域幅利用を減少させることを可能にする。この技術は、視聴者が、多くの時間またはバッファリソースとして必要とすることなく、より高解像度のビデオストリームをロードすることを可能にするという、追加的な効果を有する。
360度ビデオ内において、図1に見られ得るように、画像を見るためにカメラが撮り得る多くの方位が存在し得る。カメラ101は、ポイント108に固定され、シーン100が、360度可視領域を作成するためにカメラ101の周囲を包んでいる。カメラは、シーン内の画像103を見るために、固定ポイント108を中心に回転してもよい。シーンは、ビューポート102と呼ばれる異なる領域に分解されてもよい。各ビューポート102は、クライアントによってロードされる、異なるビデオストリームであってもよい。図2に見られるように、ビデオの各セクションが、これらのビューポートに分割されてもよい。カメラ101は、任意の方向、例えば、上104、下106、左105、または右107に方位を変更して、1つのビューポート102から別のビューポートにシフトしてもよい。
演出とも呼ばれる、ビデオストリームのフレームの効果の追加中に、クライアントが、演出効果に合致するように高解像度フレームをプリフェッチすることが望ましい場合がある。限定ではなく例として、クライアントが、大きな音の見かけ方向の高解像度フレームをプリフェッチすることが望ましい場合がある。代替的には、演出中に、クライアントが、多くの特殊効果または特殊なカメラの動きがある場所におけるフレームをプリフェッチすることが望ましい場合がある。
本開示の代替的な態様によれば、クライアントは、図2及び図3に見られるように、予測メタデータを使用して、潜在的な将来のビューポートにあると判断されるストリームをプリフェッチしてもよい。予測メタデータは、エンドユーザが、単一解像度ストリームを採用するシステムにおけるよりも高解像度のフレームを彼らの視野内で受信することを保証するために、演出中に生成されてもよい。
図3は、本開示の態様による、立方体マッピング図法を示す。各フレーム内にパーセンテージとして表される予測データは、ビューポート301の実際の動き305に合致しない。この例では、作者予測のプリフェッチベクトル303もまた、ビューポート301の実際の移動ベクトル305に合致しない。図3に提示される場合において、実際のビューポートは、結局302となる一方、システムは、予測データに基づくフレーム301、または作者定義プリフェッチベクトルに基づくフレーム304のいずれかをプリフェッチする。よって、図3の場合、システムは、視聴者方位メタデータに従い続けるか、あるいはデフォルトで単一品質レベルとなるかを判断してもよい。
本開示の別の態様は、最終視聴者データに基づく予測メタデータの生成である。クライアントデバイスは、ビューポートの方位に関して視聴者からデータを収集してもよい。クライアントデバイスは、この視聴者データを使用して、予測データを生成し、予測データに従ってビデオストリームをプリフェッチしてもよい。クライアントデバイスは、また、ビデオストリームのための確率メタデータを生成し、または精密化するために、他のクライアントまたはサーバと予測データを共有してもよい。
本開示の代替的な実施形態において、サーバは、メタデータを使用して、クライアントデバイスに送信するために高解像度ストリームを選択する。本実施形態の態様によれば、サーバによって使用されるメタデータは、作者定義、視聴者から生成された確率データ、または他の予測データであってもよい。サーバは、360度ビデオストリームについての要求をクライアントデバイスから受信してもよい。サーバは、要求されたストリームについての視聴者方位メタデータについてチェックしてもよい。このようなメタデータを見つけると、サーバは、メタデータに従って高解像度ストリームをクライアントに送信してもよい。サーバは、また、実際の視聴者方位データを受信し、実際のビューポートのビューにおける高解像度ストリームを送信してもよい。さらに、サーバがメタデータに基づいて高解像度ビデオストリームを送信し続けるべきかどうかを判断するために、サーバは、上述のような予測忠実性チェックを実行してもよい。
図4は、本開示の態様によるシステムを示す。システムは、ディスプレイ401及びユーザ入力デバイス402に連結されたコンピューティングデバイス400を含んでもよい。ディスプレイデバイス401は、陰極線管(CRT)、フラットパネルスクリーン、タッチスクリーン、またはテキスト、数字、グラフィカルシンボル、もしくは他の視覚的対象物を表示する他のデバイスの形式であってもよい。ユーザ入力デバイス402は、コントローラ、タッチスクリーン、またはユーザがユーザビュー方位と対話し、360度ビデオストリームを選択することを可能にする他のデバイスであってもよい。いくつかの実施態様において、ディスプレイ401は、没入型360度ビデオ体験のために360度ビデオの複数のビューポートを同時に表示するように構成される、360度ディスプレイであってもよい。他の実施態様において、ディスプレイ401は、従来の二次元ディスプレイであってもよい。このような実施態様では、ユーザは、コンピューティングデバイスとの対話によってビューポートを判断することが可能であってもよい。
Claims (16)
- a)複数のビューポートについてのデータを含む、360度ビデオストリームのためのビュー方位メタデータを取得することと、
b)前記ビュー方位メタデータによって判断される前記複数のビューポートのうちの特定のビューポートについての1つ以上の高解像度フレームに対応するデータをプリフェッチすることであって、
前記ビュー方位メタデータが予測確率に関するものであり、
フレームを前記プリフェッチすることが、前記予測確率に第1の閾値を適用して前記複数のビューポートのうちの前記特定のビューポートを決定することを含む、
前記プリフェッチすることと、
c)前記1つ以上の高解像度フレームを表示することであって、前記1つ以上の高解像度フレームが、前記複数のビューポートのうちの残りのビューポートについてよりも高い解像度によって特徴付けられる、前記表示することと、
を含む方法。 - 前記ビュー方位メタデータが、作者定義プリフェッチベクトルである、請求項1に記載の方法。
- 前記ビュー方位メタデータが、前記360度ビデオストリームのシーンにおける演出効果に合致するように作成されるプリフェッチベクトルである、請求項1に記載の方法。
- 前記予測確率が、フォーカスグループによって生成される、請求項1に記載の方法。
- 前記予測確率が、ユーザ生成のフレーム位置データを用いて生成される、請求項1に記載の方法。
- 前記予測確率がまた、作者定義プリフェッチベクトルを含む、請求項1に記載の方法。
- 前記作者定義プリフェッチベクトルが、ビューポートフレーム変更の前記確率に適用される重みである、請求項6に記載の方法。
- ビューポートフレーム変更の前記予測確率が、マルコフモデルについての確率である、請求項1に記載の方法。
- 前記ビュー方位メタデータが、移動ベクトルである、請求項1に記載の方法。
- b)が、前記予測確率が第2の閾値を超えるときに、中間解像度フレームをプリフェッチすることを含む、請求項1に記載の方法。
- 前記ビュー方位メタデータが、ユーザが見そうな場所の確率を表す、請求項1に記載の方法。
- 前記ビュー方位メタデータが、ユーザが見そうにない場所の確率を表す、請求項1に記載の方法。
- 前記ビュー方位メタデータによって判断される1つ以上の高解像度フレームに対応するデータをプリフェッチすることが、残りの前記フレームよりも高い解像度のセクションを有するフレームをプリフェッチすることを含む、請求項1に記載の方法。
- a)複数のビューポートについてのデータを含む、360度ビデオストリームのためのビュー方位メタデータを取得することと、
b)前記ビュー方位メタデータによって判断される前記複数のビューポートのうちの特定のビューポートについての1つ以上の高解像度フレームに対応するデータをプリフェッチすることであって、
前記ビュー方位メタデータが予測確率に関するものであり、
フレームを前記プリフェッチすることが、前記予測確率に第1の閾値を適用して前記複数のビューポートのうちの前記特定のビューポートを決定することを含む、
前記プリフェッチすることと、
c)前記1つ以上の高解像度フレームを表示することであって、前記1つ以上の高解像度フレームが、前記複数のビューポートのうちの残りのビューポートについてよりも高い解像度によって特徴付けられる、前記表示することと、
を含む方法をコンピュータに実行させるプログラム命令を含む、非一時的コンピュータ可読媒体。 - プロセッサと、
前記プロセッサに連結されたディスプレイと、
具現化されるプロセッサ実行可能命令を有する前記プロセッサに連結されたメモリであって、前記命令が、前記プロセッサによる実行時に方法を実施するように構成される、前記メモリと、
を含むシステムであって、
前記方法が、
a)複数のビューポートについてのデータを含む、360度ビデオストリームのためのビュー方位メタデータを取得することと、
b)前記ビュー方位メタデータによって判断される前記複数のビューポートのうちの特定のビューポートについての1つ以上の高解像度フレームに対応するデータをプリフェッチすることであって、
前記ビュー方位メタデータが予測確率に関するものであり、
フレームを前記プリフェッチすることが、前記予測確率に第1の閾値を適用して前記複数のビューポートのうちの前記特定のビューポートを決定することを含む、
前記プリフェッチすることと、
c)前記ディスプレイを用いて前記1つ以上の高解像度フレームを表示することであって、前記1つ以上の高解像度フレームが、前記複数のビューポートのうちの残りのビューポートについてよりも高い解像度によって特徴付けられる、前記表示することと、
を含む、システム。 - 前記ディスプレイが、前記複数のビューポートを同時に表示するように構成される360度ディスプレイである、請求項15に記載のシステム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/481,324 US10547704B2 (en) | 2017-04-06 | 2017-04-06 | Predictive bitrate selection for 360 video streaming |
US15/481,324 | 2017-04-06 | ||
JP2019541128A JP6867501B2 (ja) | 2017-04-06 | 2018-03-13 | 360ビデオストリーミングのための予測ビットレート選択 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019541128A Division JP6867501B2 (ja) | 2017-04-06 | 2018-03-13 | 360ビデオストリーミングのための予測ビットレート選択 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021108481A true JP2021108481A (ja) | 2021-07-29 |
JP7129517B2 JP7129517B2 (ja) | 2022-09-01 |
Family
ID=63711412
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019541128A Active JP6867501B2 (ja) | 2017-04-06 | 2018-03-13 | 360ビデオストリーミングのための予測ビットレート選択 |
JP2021065818A Active JP7129517B2 (ja) | 2017-04-06 | 2021-04-08 | 360ビデオストリーミングのための予測ビットレート選択 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019541128A Active JP6867501B2 (ja) | 2017-04-06 | 2018-03-13 | 360ビデオストリーミングのための予測ビットレート選択 |
Country Status (5)
Country | Link |
---|---|
US (2) | US10547704B2 (ja) |
EP (1) | EP3607739B1 (ja) |
JP (2) | JP6867501B2 (ja) |
CN (1) | CN110832849B (ja) |
WO (1) | WO2018187003A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10547704B2 (en) | 2017-04-06 | 2020-01-28 | Sony Interactive Entertainment Inc. | Predictive bitrate selection for 360 video streaming |
JPWO2020184188A1 (ja) * | 2019-03-08 | 2020-09-17 | ||
CN110166850B (zh) * | 2019-05-30 | 2020-11-06 | 上海交通大学 | 多重cnn网络预测全景视频观看位置的方法和系统 |
US10972789B2 (en) | 2019-06-03 | 2021-04-06 | At&T Intellectual Property I, L.P. | Methods, systems, and devices for providing service differentiation for different types of frames for video content |
CN110248178B (zh) * | 2019-06-18 | 2021-11-23 | 深圳大学 | 利用物体跟踪和历史轨迹全景视频的视口预测方法及系统 |
US10972753B1 (en) * | 2019-09-13 | 2021-04-06 | Apple Inc. | Versatile tile coding for multi-view video streaming |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011133516A (ja) * | 2009-12-22 | 2011-07-07 | Canon Inc | 画像表示装置およびその制御方法、プログラム |
JP2015097343A (ja) * | 2013-11-15 | 2015-05-21 | 日本電信電話株式会社 | 映像配信システム、映像配信装置及び映像配信プログラム |
JP2016165105A (ja) * | 2015-03-05 | 2016-09-08 | ノキア テクノロジーズ オーユー | 映像ストリーミング方法 |
JP2016167699A (ja) * | 2015-03-09 | 2016-09-15 | 日本電信電話株式会社 | 映像配信方法、映像配信装置及び映像配信プログラム |
US20170084086A1 (en) * | 2015-09-22 | 2017-03-23 | Facebook, Inc. | Systems and methods for content streaming |
Family Cites Families (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20010056574A1 (en) * | 2000-06-26 | 2001-12-27 | Richards Angus Duncan | VTV system |
US8599266B2 (en) * | 2002-07-01 | 2013-12-03 | The Regents Of The University Of California | Digital processing of video images |
US7719563B2 (en) * | 2003-12-11 | 2010-05-18 | Angus Richards | VTV system |
JP4326406B2 (ja) * | 2004-06-15 | 2009-09-09 | シャープ株式会社 | コンテンツ視聴装置、テレビジョン装置、コンテンツ視聴方法、プログラム、及び記録媒体 |
US8101067B2 (en) * | 2004-10-13 | 2012-01-24 | Marathon Oil Canada Corporation | Methods for obtaining bitumen from bituminous materials |
JP2008145809A (ja) * | 2006-12-12 | 2008-06-26 | Sony Corp | 全周画像入出力装置 |
US8554784B2 (en) * | 2007-08-31 | 2013-10-08 | Nokia Corporation | Discovering peer-to-peer content using metadata streams |
CH702836B1 (fr) * | 2008-06-23 | 2011-09-30 | Omega Sa | Pièce décorative réalisée par incrustation et pièce d'horlogerie comprenant une telle pièce. |
JP5428509B2 (ja) * | 2009-05-11 | 2014-02-26 | ソニー株式会社 | 2次元固体撮像装置、及び、2次元固体撮像装置における偏光光データ処理方法 |
US8874538B2 (en) | 2010-09-08 | 2014-10-28 | Nokia Corporation | Method and apparatus for video synthesis |
US8953022B2 (en) * | 2011-01-10 | 2015-02-10 | Aria Glassworks, Inc. | System and method for sharing virtual and augmented reality scenes between users and viewers |
US10585472B2 (en) | 2011-08-12 | 2020-03-10 | Sony Interactive Entertainment Inc. | Wireless head mounted display with differential rendering and sound localization |
IN2013CH03069A (ja) * | 2013-07-09 | 2015-08-28 | Samsung India Software Operations Pvt Ltd | |
US20150124171A1 (en) * | 2013-11-05 | 2015-05-07 | LiveStage°, Inc. | Multiple vantage point viewing platform and user interface |
GB2525170A (en) * | 2014-04-07 | 2015-10-21 | Nokia Technologies Oy | Stereo viewing |
US10356022B2 (en) * | 2014-07-06 | 2019-07-16 | Movy Co. | Systems and methods for manipulating and/or concatenating videos |
US10204658B2 (en) * | 2014-07-14 | 2019-02-12 | Sony Interactive Entertainment Inc. | System and method for use in playing back panorama video content |
US10257494B2 (en) * | 2014-09-22 | 2019-04-09 | Samsung Electronics Co., Ltd. | Reconstruction of three-dimensional video |
US9686520B2 (en) * | 2015-01-22 | 2017-06-20 | Microsoft Technology Licensing, Llc | Reconstructing viewport upon user viewpoint misprediction |
US9906590B2 (en) | 2015-08-20 | 2018-02-27 | Verizon Digital Media Services Inc. | Intelligent predictive stream caching |
EP3347810A1 (en) * | 2015-09-10 | 2018-07-18 | Google LLC | Playing spherical video on a limited bandwidth connection |
US9858706B2 (en) * | 2015-09-22 | 2018-01-02 | Facebook, Inc. | Systems and methods for content streaming |
WO2017066346A1 (en) * | 2015-10-12 | 2017-04-20 | Cinova Media | Method and apparatus for optimizing video streaming for virtual reality |
CN105323552B (zh) * | 2015-10-26 | 2019-03-12 | 北京时代拓灵科技有限公司 | 一种全景视频播放方法及系统 |
US10476922B2 (en) * | 2015-12-16 | 2019-11-12 | Disney Enterprises, Inc. | Multi-deterministic dynamic linear content streaming |
US10484621B2 (en) * | 2016-02-29 | 2019-11-19 | Gopro, Inc. | Systems and methods for compressing video content |
US10645362B2 (en) * | 2016-04-11 | 2020-05-05 | Gopro, Inc. | Systems, methods and apparatus for compressing video content |
US10602191B2 (en) * | 2016-05-13 | 2020-03-24 | Gopro, Inc. | Apparatus and methods for video compression |
US10462466B2 (en) * | 2016-06-20 | 2019-10-29 | Gopro, Inc. | Systems and methods for spatially selective video coding |
CN106060570B (zh) * | 2016-06-30 | 2019-06-14 | 北京奇艺世纪科技有限公司 | 一种全景视频图像播放、编码方法及装置 |
US10388075B2 (en) * | 2016-11-08 | 2019-08-20 | Rockwell Automation Technologies, Inc. | Virtual reality and augmented reality for industrial automation |
US10547704B2 (en) * | 2017-04-06 | 2020-01-28 | Sony Interactive Entertainment Inc. | Predictive bitrate selection for 360 video streaming |
MX2019014416A (es) * | 2017-06-02 | 2020-02-05 | Vid Scale Inc | Suministro de video en 360 grados a través de la red de próxima generación. |
JP6599966B2 (ja) * | 2017-12-25 | 2019-10-30 | ファナック株式会社 | 電子装置 |
US10873614B2 (en) * | 2018-01-17 | 2020-12-22 | Samsung Electronics Co., Ltd. | Method and apparatus for configuration and deployment of media processing in the network |
-
2017
- 2017-04-06 US US15/481,324 patent/US10547704B2/en active Active
-
2018
- 2018-03-13 EP EP18781769.7A patent/EP3607739B1/en active Active
- 2018-03-13 JP JP2019541128A patent/JP6867501B2/ja active Active
- 2018-03-13 WO PCT/US2018/022259 patent/WO2018187003A1/en unknown
- 2018-03-13 CN CN201880016424.3A patent/CN110832849B/zh active Active
-
2020
- 2020-01-22 US US16/749,225 patent/US11128730B2/en active Active
-
2021
- 2021-04-08 JP JP2021065818A patent/JP7129517B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011133516A (ja) * | 2009-12-22 | 2011-07-07 | Canon Inc | 画像表示装置およびその制御方法、プログラム |
JP2015097343A (ja) * | 2013-11-15 | 2015-05-21 | 日本電信電話株式会社 | 映像配信システム、映像配信装置及び映像配信プログラム |
JP2016165105A (ja) * | 2015-03-05 | 2016-09-08 | ノキア テクノロジーズ オーユー | 映像ストリーミング方法 |
JP2016167699A (ja) * | 2015-03-09 | 2016-09-15 | 日本電信電話株式会社 | 映像配信方法、映像配信装置及び映像配信プログラム |
US20170084086A1 (en) * | 2015-09-22 | 2017-03-23 | Facebook, Inc. | Systems and methods for content streaming |
Also Published As
Publication number | Publication date |
---|---|
US10547704B2 (en) | 2020-01-28 |
JP7129517B2 (ja) | 2022-09-01 |
EP3607739B1 (en) | 2023-10-11 |
WO2018187003A1 (en) | 2018-10-11 |
CN110832849A (zh) | 2020-02-21 |
JP2020506614A (ja) | 2020-02-27 |
JP6867501B2 (ja) | 2021-04-28 |
CN110832849B (zh) | 2022-01-11 |
US20180295205A1 (en) | 2018-10-11 |
US11128730B2 (en) | 2021-09-21 |
EP3607739A1 (en) | 2020-02-12 |
US20200162757A1 (en) | 2020-05-21 |
EP3607739A4 (en) | 2020-12-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6867501B2 (ja) | 360ビデオストリーミングのための予測ビットレート選択 | |
US10306180B2 (en) | Predictive virtual reality content streaming techniques | |
US10284753B1 (en) | Virtual reality media content generation in multi-layer structure based on depth of field | |
US20180014049A1 (en) | Orientation Based, Aspect Ratio Switching Video Playback System | |
US10277669B1 (en) | Communication channel between device and CDN during playback | |
US10499066B2 (en) | Method and apparatus for improving efficiency of content delivery based on consumption data relative to spatial data | |
KR20150006771A (ko) | 비디오의 선택된 부분들을 고해상도로 렌더링하는 방법 및 장치 | |
JP2009518103A (ja) | ユーザがモバイル機器によって大画面ゲームをプレイできるようにするための方法およびシステム | |
KR20160143778A (ko) | 비디오 게임에 있어서 관심 영역에 따른 힌트를 이용한 비디오 코딩 | |
WO2018205643A1 (zh) | Vr多媒体的体验质量确定方法及装置 | |
KR20140041681A (ko) | 예측 다층 캐싱 아키텍처들 | |
US20100073379A1 (en) | Method and system for rendering real-time sprites | |
US20130336638A1 (en) | Switching between time order and popularity order sending of video segments | |
EP3357253A1 (en) | Gapless video looping | |
CN112054986A (zh) | 动态分配计算资源以在云游戏系统中生成亮点 | |
CN115474085B (zh) | 媒体内容播放方法、装置、设备和存储介质 | |
KR102706760B1 (ko) | 멀티 플레이어 프로그램에서 높은 입력 레이턴시를 유도하는 기법 | |
US10469794B2 (en) | Information processing apparatus, information processing method, and information processing system for content management using play lists | |
KR20230104602A (ko) | 미디어 스트림들의 동적 사용자 디바이스 업스케일링 | |
CN114445600A (zh) | 一种特效道具的展示方法、装置、设备及存储介质 | |
JP7318123B2 (ja) | 適応的バッファを使用してビデオコンテンツをストリーミングするための方法、システム、および媒体 | |
WO2022040637A1 (en) | Spatial foveated streaming -media distribution for extended reality devices | |
KR102487558B1 (ko) | 재생 중인 라이브 영상의 탐색을 위한 썸네일을 요청하는 방법 및 시스템 | |
CN117950547A (zh) | 显示方法、装置、设备、存储介质和程序产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210408 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220224 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220315 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220502 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220809 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220822 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7129517 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |