[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP7134247B2 - 情報処理装置 - Google Patents

情報処理装置 Download PDF

Info

Publication number
JP7134247B2
JP7134247B2 JP2020556084A JP2020556084A JP7134247B2 JP 7134247 B2 JP7134247 B2 JP 7134247B2 JP 2020556084 A JP2020556084 A JP 2020556084A JP 2020556084 A JP2020556084 A JP 2020556084A JP 7134247 B2 JP7134247 B2 JP 7134247B2
Authority
JP
Japan
Prior art keywords
image
display
displayed
display area
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020556084A
Other languages
English (en)
Other versions
JPWO2020095906A1 (ja
Inventor
充弘 岡田
晶光 安田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment Inc
Original Assignee
Sony Interactive Entertainment Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Interactive Entertainment Inc filed Critical Sony Interactive Entertainment Inc
Publication of JPWO2020095906A1 publication Critical patent/JPWO2020095906A1/ja
Application granted granted Critical
Publication of JP7134247B2 publication Critical patent/JP7134247B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37Details of the operation on graphic patterns
    • G09G5/377Details of the operation on graphic patterns for mixing or overlaying two or more graphic patterns
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)

Description

本発明は、動画像を他の画像に重ねて表示させる情報処理装置、情報処理方法、及びプログラムに関する。
画面内に何らかの画像(以下、全体画像という)を表示させてその画像を閲覧しながら、同時に別の動画像も閲覧したい場合がある。限られた表示領域を用いてこのような同時閲覧を可能にするため、別の動画像を、全体画像が表示されている領域の一部を占める小さな領域内に表示させる情報処理装置がある。このような情報処理装置によれば、全体画像の一部は動画像によって隠れてしまうものの、全体画像を広い範囲に表示させながら同時に動画像を表示させることができる。
上記従来例の技術において、ユーザーは再生中の動画像の別の箇所を再生させることを希望する場合がある。このような場合のユーザーインタフェースについては、まだ十分に検討されていない。
本発明は上記実情を考慮してなされたものであって、その目的の一つは、動画像を他の画像に重ねて表示させる場合において、動画像の再生位置をユーザーが変更する際の好適なインタフェースを提供することのできる情報処理装置、情報処理方法、及びプログラムを提供することにある。
本発明に係る情報処理装置は、画像を表示中に、当該画像が表示されている表示領域内の所定領域に、当該画像とは別の注目動画像を表示させる動画像表示制御部と、ユーザーの指示に応じて、前記注目動画像から複数のフレーム画像を抽出してなる画像列を、前記表示領域内に並べて表示させる画像列表示制御部と、を含み、前記画像列表示制御部は、前記画像列を、前記表示領域内における前記所定領域に応じて決まる位置に表示させることを特徴とする。
本発明に係る情報処理方法は、画像を表示中に、当該画像が表示されている表示領域内の所定領域に、当該画像とは別の注目動画像を表示させる動画像表示ステップと、ユーザーの指示に応じて、前記注目動画像から複数のフレーム画像を抽出してなる画像列を、前記表示領域内に並べて表示させる画像列表示ステップと、を含み、前記画像列表示ステップでは、前記画像列を、前記表示領域内における前記所定領域に応じて決まる位置に表示させることを特徴とする。
本発明に係るプログラムは、画像を表示中に、当該画像が表示されている表示領域内の所定領域に、当該画像とは別の注目動画像を表示させる動画像表示ステップと、ユーザーの指示に応じて、前記注目動画像から複数のフレーム画像を抽出してなる画像列を、前記表示領域内に並べて表示させる画像列表示ステップと、をコンピュータに実行させるためのプログラムであって、前記画像列表示ステップでは、前記画像列を、前記表示領域内における前記所定領域に応じて決まる位置に表示させるプログラムである。このプログラムは、コンピュータ読み取り可能で非一時的な情報記憶媒体に格納されて提供されてよい。
本発明の実施の形態に係る情報処理装置の構成を示す構成ブロック図である。 本発明の実施の形態に係る情報処理装置の機能を示す機能ブロック図である。 注目動画像の表示例を示す図である。 複数の注目動画像の表示例を示す図である。 副表示領域に隣接する領域内にサムネイル画像列を表示する例を示す図である。 副表示領域に隣接する領域内にサムネイル画像列を表示する別の例を示す図である。 副表示領域と重なる領域内にサムネイル画像列を表示する例を示す図である。 一つの注目動画像に対して複数のサムネイル画像列を表示する例を示す図である。 副表示領域と重なる領域内にサムネイル画像列を表示する別の例を示す図である。
以下、本発明の実施形態について、図面に基づき詳細に説明する。
図1は、本発明の一実施形態に係る情報処理装置1の構成を示す構成ブロック図である。情報処理装置1は、例えば携帯型ゲーム機や家庭用ゲーム機、パーソナルコンピュータ、スマートフォン、ビデオプレーヤー等であって、同図に示されるように、制御部11と、記憶部12と、インタフェース部13と、を含んで構成されている。また、情報処理装置1は表示装置14及び操作デバイス15と接続されている。
制御部11は、CPU等のプロセッサを少なくとも一つ含み、記憶部12に記憶されているプログラムを実行して各種の情報処理を実行する。なお、本実施形態において制御部11が実行する処理の具体例については、後述する。記憶部12は、RAM等のメモリデバイスを少なくとも一つ含み、制御部11が実行するプログラム、及び当該プログラムによって処理されるデータを格納する。
インタフェース部13は、表示装置14、及び操作デバイス15との間のデータ通信のためのインタフェースである。情報処理装置1は、インタフェース部13を介して有線又は無線のいずれかで表示装置14、及び操作デバイス15のそれぞれと接続される。具体的にインタフェース部13は、情報処理装置1が供給する映像データを表示装置14に送信するために、HDMI(登録商標)(High-Definition Multimedia Interface)等のマルチメディアインタフェースを含むこととする。また、操作デバイス15に対してユーザーが行った操作内容を示す信号を受信するために、USB(Universal Serial Bus)等のデータ通信インタフェースを含んでいる。
表示装置14は、液晶ディスプレイや有機ELディスプレイ等であって、情報処理装置1から供給される映像信号に応じた画像を画面上に表示する。操作デバイス15は、例えばキーボードやマウス、家庭用ゲーム機のコントローラなどであって、ユーザーからの操作入力を受け付ける。なお、表示装置14、及び操作デバイス15は、いずれも情報処理装置1の筐体内に内蔵されてもよいし、情報処理装置1と有線又は無線により接続される別個の装置であってもよい。操作デバイス15は、情報処理装置1の筐体表面に配置された押しボタンやタッチパネルであってもよい。以下では具体例として、操作デバイス15は家庭用ゲーム機向けのコントローラであり、操作デバイス15の筐体表面には、ユーザーの指が接触した位置の情報を出力するタッチパッド15aと、各種の操作入力を行うためのボタン15bと、が配置されているものとする。なお、タッチパッド15aは、その全体に対する押し込み操作を受付可能であってもよい。
以下、情報処理装置1が実現する機能について、図2を用いて説明する。図2に示すように、情報処理装置1は、機能的に、全体画像表示制御部21と、動画像表示制御部22と、画像列表示制御部23と、を含んで構成されている。これらの機能は、制御部11が記憶部12に記憶されたプログラムに従って動作することにより実現される。このプログラムは、インターネット等の通信ネットワークを介して情報処理装置1に提供されてもよいし、光ディスク等のコンピュータ読み取り可能な情報記憶媒体に格納されて提供されてもよい。
全体画像表示制御部21は、表示装置14の画面内に全体画像を表示させる制御を行う。ここで全体画像は、例えばユーザーがプレイ中のゲーム画像であってもよいし、後述する注目動画像とは別の動画像であってもよい。また、その他の種類の画像であってもよい。全体画像がゲーム画像の場合、全体画像表示制御部21はゲームプログラムによって実現されることになる。また、全体画像が映画等の動画像である場合、全体画像表示制御部21はビデオプレーヤープログラム等によって実現されてよい。全体画像が表示される画面内の領域を、以下では主表示領域Mという。主表示領域Mは、表示装置14が表示可能な画面内の領域全体であってもよいし、その一部の領域であってもよい。
動画像表示制御部22は、全体画像が主表示領域Mに表示されている状態において、注目動画像を全体画像と重なる位置に表示させ、再生する制御を行う。以下では、注目動画像が表示される領域を、副表示領域Sと表記する。副表示領域Sは、主表示領域Mよりも小さな矩形の領域であって、その全体が主表示領域M内に含まれている。動画像表示制御部22は、この副表示領域S内に全体が収まるようなサイズで注目動画像を表示する。ここで、副表示領域Sと重なる部分の全体画像は、注目動画像に隠れて表示されないことになる。そのため、副表示領域Sの大きさは、主表示領域Mと比較して十分小さいことが望ましい。少なくとも副表示領域Sの各辺は、対応する主表示領域Mの各辺の半分以下であるものとする。
注目動画像は、光ディスクやハードディスクドライブ等の外部記憶媒体から読み出されて再生される動画像であってもよいし、インターネット等の通信ネットワークを介して配信される動画像であってもよい。また、電波等を介して配信される放送番組などであってもよい。動画像表示制御部22が主表示領域Mと重なる位置に副表示領域Sを配置し、その内部で注目動画像を再生することにより、ユーザーは、大きなサイズで表示される全体画像を閲覧しながら、同時に注目動画像も閲覧することができる。
注目動画像は、全体画像として表示されている内容に関連する関連動画像であってもよい。例えば全体画像として何らかの動画像が主表示領域Mに表示され、再生されている場合、注目動画像は、全体画像として再生中の動画像に関連する動画像であってよい。具体的に動画像表示制御部22は、ユーザーが指示したタイミングや、主表示領域M内で現在再生中の動画像の再生終了が近づいたタイミングなどで、現在再生中の動画像に関連する関連動画像を、注目動画像として副表示領域Sに表示する。ここで関連動画像は、例えば各動画像のタイトルの類似度や、各動画像に設定されたタグ情報などによって候補動画像の中から選出されてよい。候補動画像は、情報処理装置1に接続された外部記憶媒体に格納されている動画像であってもよいし、インターネット等の通信ネットワークを介して公開されている動画像であってもよい。また、全体画像表示制御部21がゲームプログラムを実行し、全体画像としてゲーム画面が表示されている場合、動画像表示制御部22は、当該ゲームに関連する動画像として公開されている候補動画像の中から、関連動画像を選出してもよい。
図3は、副表示領域Sの配置例を示している。この図の例では、主表示領域Mの右下寄りの位置に副表示領域Sが配置されており、その内部で注目動画像が再生される。主表示領域M内における副表示領域Sの位置は、予め定められた位置であってもよいが、ユーザーによって指定された位置であってもよい。この場合、ユーザーは、主表示領域Mに表示されている全体画像の内容などに応じて、全体画像の閲覧の邪魔になりにくく、自身が見やすい位置に副表示領域Sを配置することができる。ユーザーは、操作デバイス15に設けられた方向指示キーを操作するなどして、注目動画像の表示中にその表示位置を変化させることとしてもよい。また、注目動画像の表示を開始する前に、予め副表示領域Sの位置を指定してもよい。
動画像表示制御部22は、同時期に複数の注目動画像を主表示領域M内に表示させてもよい。図4は、この場合の副表示領域Sの配置例を示す図である。この図の例では、主表示領域M全体に全体画像が表示されており、主表示領域Mの右上寄りの位置に副表示領域S1が、右下寄りの位置に副表示領域S2が、それぞれ配置されている。そして、副表示領域S1内では注目動画像1が、副表示領域S2内では注目動画像1とは別の注目動画像2が、それぞれ再生される。これによりユーザーは、全体画像を閲覧しながら、同時に注目動画像1及び2が再生される様子を閲覧できる。なお、主表示領域M内には3個以上の副表示領域Sが配置され、3個以上の注目動画像が同時期に表示されてもよい。特に前述したように主表示領域Mに表示中の内容に関連する関連動画像を注目動画像とする場合、動画像表示制御部22は、このような関連動画像を複数選出し、同時期に表示してもよい。
画像列表示制御部23は、注目動画像から抽出した複数のフレーム画像を含んで構成される画像列を、主表示領域M内に表示させる制御を行う。例えば画像列表示制御部23は、注目動画像を再生する際に所定の時間間隔などで順に表示される複数のフレーム画像を抽出し、表示用サイズのサムネイル画像に変換する。そして、ユーザーの指示に応じて、このようにして抽出されたサムネイル画像からなる画像列(以下、サムネイル画像列という)を、主表示領域M内に並べて表示する。このとき各サムネイル画像の表示サイズは、注目動画像の表示サイズと略同サイズか、これより小さなサイズであってよい。このようなサムネイル画像列を表示することにより、ユーザーは注目動画像の内容を時系列に沿って概観することができる。以下では、サムネイル画像列が表示される主表示領域M内の領域を、サムネイル表示領域Tと表記する。
本実施形態において画像列表示制御部23は、ユーザーが操作デバイス15に対して入力した指示に応じて、サムネイル画像列を表示するものとする。サムネイル画像列は、注目動画像が副表示領域S内で再生されている間に表示されてもよいし、注目動画像の再生が停止している状態で表示されてもよい。なお、注目動画像の再生中にサムネイル画像列の表示が指示された場合、注目動画像の再生は中断されるものとする。注目動画像の再生が中断された状態においてサムネイル画像列を表示する場合、画像列表示制御部23は、中断された時点の再生位置を中心として、その前後に表示されるフレーム画像が並んだサムネイル画像列を表示する。これによりユーザーは、サムネイル画像列を閲覧することで、これまでに再生された注目動画像の内容や、これから再生される注目動画像の内容を確認できる。また、注目動画像の再生が開始していない状態でサムネイル画像列を表示する場合、画像列表示制御部23は、注目動画像の先頭から順に抽出されたフレーム画像が並んだサムネイル画像列を表示するものとする。
本実施形態において画像列表示制御部23は、主表示領域M内におけるサムネイル表示領域Tの位置を、副表示領域Sの位置に応じて決定する。注目動画像と同様に、サムネイル画像列についても、主表示領域M内の固定された位置に表示すると、全体画像を閲覧しにくくなってしまう場合がある。そこで画像列表示制御部23は、副表示領域Sの位置に応じてサムネイル画像列の表示位置を決定することで、ユーザーが把握しやすく、かつ全体画像の閲覧を邪魔しにくい態様でサムネイル画像列を表示することができる。
以下、サムネイル画像列の表示制御の具体例について、説明する。
第1の例として、副表示領域Sに隣接するサムネイル表示領域Tにサムネイル画像列を表示する例について、説明する。図5はこの場合の表示例であって、図3で例示した副表示領域Sに注目動画像が表示されている状態でサムネイル画像列の表示が指示された場合の表示例を示している。この図の例では、サムネイル画像列は横方向に並んで配置された複数のサムネイル画像によって構成されている。そして、この例におけるサムネイル表示領域Tは、主表示領域M内の右下寄りに配置された副表示領域Sに対して、その下方に隣接するように配置されている。すなわち、サムネイル画像列は、副表示領域Sよりさらに主表示領域Mの外周寄りの位置に隣接して配置される。このように、副表示領域Sよりも主表示領域Mの外周に近い位置にサムネイル画像列を配置することにより、全体画像の中央近傍をサムネイル画像列が隠さないようにすることができる。なお、ここではサムネイル画像列を構成する各フレーム画像を横方向に並べて配置することとしたが、縦方向に並べて配置してもよい。その場合も、主表示領域Mの外周に近い位置にサムネイル画像列を配置することにより、サムネイル画像列の表示が全体画像の閲覧を妨げにくくすることができる。
なお、サムネイル画像が配列される方向(図5では横方向)に沿ったサムネイル表示領域Tの幅は、予め定められた大きさであってもよいし、主表示領域M全体の幅に一致する幅であってもよい。少なくともサムネイル表示領域Tは、副表示領域Sの同じ方向の幅を超える幅である必要がある。また、サムネイル表示領域Tの横方向の位置は、少なくとも副表示領域Sと重なるような位置であるものとする。
注目動画像の再生が中断された状態でサムネイル画像列の表示が開始された場合、中断された再生位置に対応するサムネイル画像が、サムネイル表示領域T内の所定の基準位置に配置される。この基準位置は、サムネイル画像が配列される方向の中心位置であってよい。また、副表示領域Sに隣接する位置であってもよい。図5の例では、基準位置に表示されるサムネイル画像に対して、その周囲を囲む枠線画像Fが表示されている。このように、基準位置のサムネイル画像は、他のサムネイル画像と識別可能な態様で表示される。基準位置をサムネイル表示領域Tの中心位置とすると、基準位置のサムネイル画像よりも過去の時点に対応するサムネイル画像、及び未来の時点に対応するサムネイル画像を同じ数だけサムネイル表示領域T内に表示することができる。
さらに、サムネイル画像列の表示中に、ユーザーはその中のいずれかのサムネイル画像を選択する操作を行ってもよい。具体的に、ここではサムネイル画像が横方向に沿って配列されているので、この配列方向に沿ってユーザーは左方向、又は右方向を指示する操作を行う。これに応じて画像列表示制御部23は、サムネイル表示領域T内に表示中のサムネイル画像をスクロールさせ、基準位置に表示されるサムネイル画像を順に切り替える。なお、このスクロールに伴って、それまでサムネイル表示領域T内に表示されていなかったサムネイル画像が順次表示されることになる。これにより、注目動画像の再生開始時点から再生終了時点までの全体にわたって、その途中で表示されるフレーム画像に対応するサムネイル画像をサムネイル表示領域T内に表示させることができる。ユーザーは、目的とするサムネイル画像が基準位置に表示された状態で、選択完了を指示する操作入力を行う。
サムネイル画像の選択完了をユーザーが指示すると、画像列表示制御部23はサムネイル画像列の表示を終了し、動画像表示制御部22はユーザーが選択したサムネイル画像に対応する再生位置(すなわち、当該サムネイル画像に対応するフレーム画像が表示されるタイミング)から注目動画像の再生を再開する。これにより、ユーザーは注目動画像の再生位置を巻き戻ししたり先送りしたりして、所望の再生位置から注目動画像を再生することができる。なお、ユーザーの操作内容に応じて、副表示領域S内で注目動画像の再生を開始する代わりに、主表示領域Mに全体画像として注目動画像を表示させることとしてもよい。こうすれば、ユーザーはそれまで副表示領域Sに表示されていた注目動画像を、より大きなサイズで主表示領域M内に表示させ、かつ、自身が指定した位置からその再生を開始させることができる。
また、図5の例では、サムネイル表示領域T内にサムネイル画像列と並んでタイムラインバーTLが表示されている。タイムラインバーTLは、注目動画像の全体の再生時間に対応し、そのうち、現在サムネイル表示領域T内に表示されているサムネイル画像列に対応する再生位置が強調表示されている。これによりユーザーは、サムネイル表示領域T内に表示されているサムネイル画像列が注目動画像の全体の再生時間のうちどの時間帯に対応するのかを把握できる。
図6は、図4で例示したように複数の副表示領域Sが配置されている状態において、サムネイル画像列を副表示領域Sに隣接するように表示する場合の例を示している。図4の例では、複数の副表示領域Sが縦方向に沿って並んで配置されている。この場合に画像列表示制御部23は、ユーザーからの上下方向の指示に応じてサムネイル画像列を表示する対象となる注目動画像を選択してもよい。
具体例として、サムネイル画像列を表示する機能を呼び出す操作に続けて、ユーザーが上方向を指示する操作を操作デバイス15に対して入力した場合、画像列表示制御部23は、上側に表示されている注目動画像1から抽出されたフレーム画像を含むサムネイル画像列を表示する。このとき、図6に示すように、サムネイル画像列を副表示領域S1の上側に隣接する位置に表示する。この場合のサムネイル画像列の表示位置は、副表示領域S1から見て外周側の位置であり、また、副表示領域S1から見て副表示領域S2と反対側の位置でもある。このような位置にサムネイル画像列を表示することで、サムネイル画像列を副表示領域S1の下側(すなわち、副表示領域S2側)に表示する場合と比較して、サムネイル画像列が複数の注目動画像のうちどの注目動画像に対応しているか、分かり易くすることができる。逆に、下方向を指示する操作が入力された場合、画像列表示制御部23は、下側に表示されている注目動画像2から抽出されたフレーム画像を含むサムネイル画像列を表示する。この場合のサムネイル画像列の表示位置は、図5の例と同様、副表示領域S2の下側に隣接する位置であってよい。
また、ユーザーは、複数の注目動画像のうち、サムネイル画像列を表示する対象となる注目動画像を選択するために、タッチパッド15aを使用することとしてもよい。具体的には、主表示領域M内において選択対象の注目動画像が表示されている位置と対応する、タッチパッド15a内の位置をタッチする操作を行うことで、ユーザーは、複数の注目動画像のうちのいずれかを選択できる。図6の例では、タッチパッド15aの検出範囲のうち右上側の領域内をタッチすることで注目動画像1を、右下側の領域内をタッチすることで注目動画像2を、それぞれ選択できる。こうすれば、ユーザーは直感的に注目動画像を選択することができる。なお、選択された注目動画像に対応するサムネイル画像列が表示された状態で、ユーザーがタッチパッド15aを用いて左右方向のスライド操作を行った場合、その方向に応じてサムネイル画像列をスクロールさせてもよい。さらに、タッチパッド15a全体を押し込む操作などによって、基準位置に表示されているサムネイル画像の選択を受け付けてもよい。このような制御によれば、サムネイル画像列を表示させる操作、及びサムネイル画像列内のサムネイル画像を選択する操作をタッチパッド15aだけで受け付けることができる。そのため、主表示領域M内に表示されている全体画像に対する操作をボタン15bから受け付ける場合、全体画像に対する操作と注目動画像に対する操作の競合を避けることができる。
次に、サムネイル画像列の表示制御の第2の例として、副表示領域Sと重なるサムネイル表示領域T内にサムネイル画像列を表示する例について、説明する。図7は、この場合の表示例を示している。この図においては、図4で例示した状態から、図6と同様に上側の注目動画像1を選択する操作が行われたものとしている。図7に示すように、この第2の例では、選択された注目動画像1に重なる位置に、サムネイル表示領域Tが配置される。これにより、現在表示されているサムネイル画像列が注目動画像1に対応していることが明確となる。このとき、注目動画像1が表示されていた副表示領域S1はサムネイル表示領域Tに隠され、注目動画像1自体は表示されなくなる。
この図の例では、基準位置がサムネイル表示領域Tの中心位置で、かつ副表示領域S1と重なる位置になるようにサムネイル表示領域Tが配置されている。換言すると、サムネイル表示領域Tが、副表示領域S1を中心に左右対称の大きさとなるよう配置されている。これにより、それまで注目動画像が表示されていた副表示領域S1の位置がそのまま基準位置になるので、ユーザーは視線を大きく動かさずそのままサムネイル画像列を確認することができる。
さらに、画像列表示制御部23は、一つの注目動画像から抽出された複数のサムネイル画像列を並べて表示してもよい。図8は、この場合の表示例を示している。この図の例では、副表示領域S1と重なるサムネイル表示領域T内に、上下2段に並べて2個のサムネイル画像列が表示される。この2個のサムネイル画像列は、同じ注目動画像から互いに異なる時間間隔で抽出されたフレーム画像によって構成されている。一例として、上段のサムネイル画像列は注目動画像再生時に5分間隔で表示されるフレーム画像によって構成され、下段のサムネイル画像列は1分間隔で表示されるフレーム画像によって構成されるものとする。ユーザーからスクロールの指示が受け付けられた場合、画像列表示制御部23は、2個のサムネイル画像列を互いに連動するようにスクロールさせる。すなわち、基準位置において上下に並んで表示されるサムネイル画像が、略同じ再生位置に対応するように両者をスクロールさせる。そのため、時間間隔が短い方のサムネイル画像列は比較的速いスピードでスクロールし、時間間隔が長い方のサムネイル画像列は比較的遅いスピードでスクロールする。こうすれば、必要に応じて時間間隔が短いサムネイル画像列によって注目動画像の詳細を確認できるので、サムネイル画像列を高速でスクロールさせるときにもサムネイル画像列の内容を確認しやすくすることができる。なお、画像列表示制御部23は、このような2種のサムネイル画像列を常に同時に表示してもよいし、高速のスクロールが指示された場合など、所定条件を満たす操作が行われた場合だけ表示することとし、所定条件を満たすまでは1種のサムネイル画像列だけを表示することとしてもよい。
図7の例では、サムネイル画像列を副表示領域Sと重なるサムネイル表示領域T内に表示する場合に、それまで副表示領域Sが表示されていた位置が基準位置になるように、サムネイル表示領域Tの配置位置を決定している。しかしながらこれに限らず、画像列表示制御部23は、基準位置を副表示領域Sが表示されていた位置から移動させてもよい。また、これまでの説明では、どの例においても、サムネイル画像はサムネイル表示領域T内において時系列に沿って左右方向(水平方向)に並んで配置されることとした。しかしながらこれに限らず、サムネイル画像列の配列方向は任意の方向であってよい。
図9は、このようなサムネイル画像列の表示制御の変形例を示す図である。この図の例では、図3に例示した副表示領域Sが表示されていた状態においてサムネイル画像列の表示が指示されたものと想定している。この例では、これまでの例と異なり、サムネイル画像は上下方向(垂直方向)に並んで配列されている。
この例では、サムネイル表示領域Tは、主表示領域Mの上端から下端まで、上下方向に沿って領域全体にまたがって配置されている。さらに、基準位置は副表示領域Sが表示されていた位置ではなく、サムネイル表示領域Tの略中央(すなわち、主表示領域Mの略中央)に設定されている。このように基準位置を副表示領域Sの位置から移動させることで、サムネイル画像列の配列方向に沿ったサムネイル表示領域Tの長さを長くしながら、基準位置をサムネイル表示領域Tの中心に配置することができる。これにより、元々表示されていた注目動画像のサイズと比較してサムネイル画像を縮小させることなく、比較的多くのサムネイル画像を一度に表示させることができる。なお、図中に例示されるように枠線画像Fを表示するなどして、基準位置に配置されるフレーム画像を他と識別可能な態様で表示することで、基準位置を副表示領域Sから移動させても、ユーザーにどこが基準位置かを知らせることができる。
なお、以上説明した例における特徴事項は、互いに組み合わせて適用されてもよい。例えば第1の例におけるサムネイル表示領域T内に、2種以上のサムネイル画像列を並べて表示することとしてもよい。また、第2の例におけるサムネイル画像列に対しても、第1の例と同様の操作によってスクロールやサムネイル画像の選択を行うこととしてよい。
以上説明した本実施形態に係る情報処理装置1によれば、全体画像に重ねて注目動画像を副表示領域Sに表示させる場合に、その再生位置を変更する指示を受け付けるためのサムネイル画像列を、副表示領域Sに応じて決まる位置に表示することで、全体画像の閲覧を妨げにくい態様でサムネイル画像列を表示させることができる。
なお、本発明の実施の形態は、以上説明したものに限られない。以上の説明における副表示領域Sやサムネイル表示領域Tの配置位置や、ユーザーによる操作の内容は、例示に過ぎず、これ以外のものであってもよい。例えば、以上の説明ではサムネイル表示領域Tの配置位置は副表示領域Sに隣接する位置又は重なる位置であることとしたが、これに限らず、所定の距離範囲内で離隔した位置などであってもよい。また、サムネイル表示領域Tの配置位置は、予め定められた複数の候補位置の中から選択されることとしてもよい。この場合、画像列表示制御部23は、表示しようとするサムネイル画像列に対応する注目動画像が表示されている位置に応じて、複数の候補位置の中からサムネイル表示領域Tの位置を選択する。これにより、注目動画像と対応し、かつ全体画像の閲覧を妨げにくい位置にサムネイル画像列を表示することができる。
1 情報処理装置、11 制御部、12 記憶部、13 インタフェース部、14 表示装置、15 操作デバイス、21 全体画像表示制御部、22 動画像表示制御部、23 画像列表示制御部。

Claims (6)

  1. 画像を表示中に、当該画像が表示されている表示領域内の所定領域に、当該画像とは別の注目動画像を表示させる動画像表示制御部と、
    ユーザーの指示に応じて、前記注目動画像から複数のフレーム画像を抽出してなる画像列を、前記表示領域内に並べて表示させる画像列表示制御部と、
    を含み、
    前記画像列表示制御部は、前記画像列を、前記表示領域内における前記所定領域に応じて決まる位置に表示させる
    情報処理装置であって、
    前記画像列表示制御部は、前記画像列を、前記所定領域と重なり、かつ前記所定領域の外側に直線上に延びる領域内に表示させる
    ことを特徴とする情報処理装置。
  2. 画像を表示中に、当該画像が表示されている表示領域内の所定領域に、当該画像とは別の注目動画像を表示させる動画像表示制御部と、
    ユーザーの指示に応じて、前記注目動画像から複数のフレーム画像を抽出してなる画像列を、前記表示領域内に並べて表示させる画像列表示制御部と、
    を含み、
    前記画像列表示制御部は、前記画像列を、前記表示領域内における前記所定領域に応じて決まる位置に表示させる
    情報処理装置であって、
    前記画像列表示制御部は、前記画像列を、前記所定領域から見て前記表示領域の外周側に前記所定領域と隣接する領域内に表示させる
    ことを特徴とする情報処理装置。
  3. 請求項1又は2に記載の情報処理装置において、
    前記動画像表示制御部は、互いに異なる複数の注目動画像のそれぞれを、前記表示領域内の互いに離れた所定領域に同時期に表示させ、
    前記画像列表示制御部は、前記複数の注目動画像のそれぞれに対応する画像列を、当該注目動画像が表示される所定領域に応じて決まる位置に表示させる
    ことを特徴とする情報処理装置。
  4. 請求項1からのいずれか一項に記載の情報処理装置において、
    前記画像列表示制御部は、一つの注目動画像から複数のフレーム画像を抽出して得られる2種の画像列を、前記所定領域に応じて決まる位置に並べて表示させる
    ことを特徴とする情報処理装置。
  5. 画像を表示中に、当該画像が表示されている表示領域内の所定領域に、当該画像とは別の注目動画像を表示させる動画像表示ステップと、
    ユーザーの指示に応じて、前記注目動画像から複数のフレーム画像を抽出してなる画像列を、前記表示領域内に並べて表示させる画像列表示ステップと、
    を含み、
    前記画像列表示ステップでは、前記画像列を、前記表示領域内における前記所定領域に応じて決まる位置に表示させる
    情報処理方法であって、
    前記画像列表示ステップでは、前記画像列を、前記所定領域と重なり、かつ前記所定領域の外側に直線上に延びる領域内に表示させる、
    又は、
    前記画像列表示ステップでは、前記画像列を、前記所定領域から見て前記表示領域の外周側に前記所定領域と隣接する領域内に表示させる、
    ことを特徴とする情報処理方法。
  6. 画像を表示中に、当該画像が表示されている表示領域内の所定領域に、当該画像とは別の注目動画像を表示させる動画像表示ステップと、
    ユーザーの指示に応じて、前記注目動画像から複数のフレーム画像を抽出してなる画像列を、前記表示領域内に並べて表示させる画像列表示ステップと、
    をコンピュータに実行させるためのプログラムであって、
    前記画像列表示ステップでは、前記画像列を、前記表示領域内における前記所定領域に応じて決まる位置に表示させる
    プログラムであり、
    前記画像列表示ステップでは、前記画像列を、前記所定領域と重なり、かつ前記所定領域の外側に直線上に延びる領域内に表示させる、
    又は、
    前記画像列表示ステップでは、前記画像列を、前記所定領域から見て前記表示領域の外周側に前記所定領域と隣接する領域内に表示させる、
    プログラム。
JP2020556084A 2018-11-09 2019-11-05 情報処理装置 Active JP7134247B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018211509 2018-11-09
JP2018211509 2018-11-09
PCT/JP2019/043318 WO2020095906A1 (ja) 2018-11-09 2019-11-05 情報処理装置

Publications (2)

Publication Number Publication Date
JPWO2020095906A1 JPWO2020095906A1 (ja) 2021-09-02
JP7134247B2 true JP7134247B2 (ja) 2022-09-09

Family

ID=70610708

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020556084A Active JP7134247B2 (ja) 2018-11-09 2019-11-05 情報処理装置

Country Status (3)

Country Link
US (1) US12141427B2 (ja)
JP (1) JP7134247B2 (ja)
WO (1) WO2020095906A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008263457A (ja) 2007-04-12 2008-10-30 Sony Corp 情報提示装置及び情報提示方法、並びにコンピュータ・プログラム
JP2012054829A (ja) 2010-09-02 2012-03-15 Sharp Corp 映像提示装置、映像提示方法、映像提示プログラム、記憶媒体
JP2014096786A (ja) 2012-10-12 2014-05-22 Sharp Corp 録画再生装置、および、録画再生方法
JP2018511843A (ja) 2015-05-20 2018-04-26 テンセント・テクノロジー・(シェンジェン)・カンパニ 同じ画面上にコンテンツを表示するための方法及びデバイス並びに端末デバイス

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7956848B2 (en) * 2007-09-04 2011-06-07 Apple Inc. Video chapter access and license renewal
US8811499B2 (en) * 2008-04-10 2014-08-19 Imagine Communications Corp. Video multiviewer system permitting scrolling of multiple video windows and related methods
JP5231928B2 (ja) 2008-10-07 2013-07-10 株式会社ソニー・コンピュータエンタテインメント 情報処理装置および情報処理方法
US20100281371A1 (en) * 2009-04-30 2010-11-04 Peter Warner Navigation Tool for Video Presentations
US9454303B2 (en) * 2012-05-16 2016-09-27 Google Inc. Gesture touch inputs for controlling video on a touchscreen
US9632685B2 (en) * 2012-05-31 2017-04-25 Eric Qing Li Method of navigating through a media program displayed on a portable electronic device in a magnified time scale
TWI486794B (zh) * 2012-07-27 2015-06-01 Wistron Corp 影片預覽方法及系統及其電腦程式產品
US9736526B2 (en) * 2013-04-10 2017-08-15 Autodesk, Inc. Real-time scrubbing of videos using a two-dimensional grid of thumbnail images
US9542407B2 (en) * 2013-09-30 2017-01-10 Blackberry Limited Method and apparatus for media searching using a graphical user interface
US9830061B1 (en) * 2014-04-09 2017-11-28 Google Inc. Methods, systems, and media for providing media guidance with contextual controls
US10431259B2 (en) * 2014-04-23 2019-10-01 Sony Corporation Systems and methods for reviewing video content
US10042537B2 (en) * 2014-05-30 2018-08-07 Apple Inc. Video frame loupe
US10489658B2 (en) * 2015-02-03 2019-11-26 Sony Interactive Entertainment Inc. Video processing device
JP6098681B2 (ja) 2015-05-22 2017-03-22 カシオ計算機株式会社 表示装置、表示方法及びプログラム
CN106802759A (zh) * 2016-12-21 2017-06-06 华为技术有限公司 视频播放的方法及终端设备
US10225602B1 (en) * 2016-12-30 2019-03-05 Jamdeo Canada Ltd. System and method for digital television operation and control-contextual interface

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008263457A (ja) 2007-04-12 2008-10-30 Sony Corp 情報提示装置及び情報提示方法、並びにコンピュータ・プログラム
JP2012054829A (ja) 2010-09-02 2012-03-15 Sharp Corp 映像提示装置、映像提示方法、映像提示プログラム、記憶媒体
JP2014096786A (ja) 2012-10-12 2014-05-22 Sharp Corp 録画再生装置、および、録画再生方法
JP2018511843A (ja) 2015-05-20 2018-04-26 テンセント・テクノロジー・(シェンジェン)・カンパニ 同じ画面上にコンテンツを表示するための方法及びデバイス並びに端末デバイス

Also Published As

Publication number Publication date
WO2020095906A1 (ja) 2020-05-14
JPWO2020095906A1 (ja) 2021-09-02
US12141427B2 (en) 2024-11-12
US20210349622A1 (en) 2021-11-11

Similar Documents

Publication Publication Date Title
KR100830739B1 (ko) 멀티미디어 재생 장치, 재생 방법, 및 컴퓨터프로그램을 저장한 기록 매체
US7844916B2 (en) Multimedia reproducing apparatus and menu screen display method
JP4297223B2 (ja) マルチメディア再生装置およびメニュー画面表示方法
JP5406353B2 (ja) ビデオプレーヤの再生及び特徴機能制御システム及び方法
US7681128B2 (en) Multimedia player and method of displaying on-screen menu
KR101396998B1 (ko) 영상기기 및 이 영상기기에서 녹화물을 디스플레이하는방법
JP2011505715A (ja) 映像表示装置およびその制御方法
KR20120095299A (ko) 계층적 메뉴 기반 사용자 인터페이스를 탐색하는 방법 및 장치
KR101122476B1 (ko) 복합 장치 및 복합 장치의 원격 제어 장치부의 조작 버튼기능 할당 변경 방법
JP2008305274A (ja) 項目選択装置及び方法、コンピュータプログラム、並びに記録媒体
JP7134247B2 (ja) 情報処理装置
JP4366349B2 (ja) 動画再生装置及び動画再生方法
JP2005223632A (ja) 記録映像表示装置、記録映像表示方法及び記録映像表示システム
JP7358712B2 (ja) 情報処理装置、情報処理方法およびプログラム
WO2021235356A1 (ja) 動画再生装置および動画再生方法
JP6719276B2 (ja) 情報処理装置、情報処理方法およびプログラム
JP2003084882A (ja) 情報処理装置および方法、並びにプログラム
JP2003084885A (ja) 情報処理装置および方法、並びにプログラム
JP2014027380A (ja) 映像データ再生装置、映像データ再生方法、映像データ再生プログラム
JP2011166480A (ja) コンテンツ再生装置、コンテンツ再生装置の制御方法およびコンテンツ再生プログラム
JP2012109999A (ja) コンテンツ再生装置およびコンテンツ再生方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210105

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220201

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220401

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220816

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220830

R150 Certificate of patent or registration of utility model

Ref document number: 7134247

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150