JP2020144848A - 画面共有システム、情報処理装置、画面共有方法及びプログラム - Google Patents

Abstract

【課題】情報処理装置間の画面共有を効率的に行う。【解決手段】画面共有元の情報処理装置は、自装置の表示画面に表示される画像を画面共有情報として取得し、前記画面共有情報のデータ量が閾値未満の場合には、前記画面共有情報を前記ネットワークに接続された第１サーバを介して画面共有先の情報処理装置に提供し、前記画面共有情報のデータ量が閾値以上の場合には、画面共有情報を前記ネットワークに接続された第２サーバに送信し、当該第２サーバでの画面共有情報の保存先を示す保存先情報を、第１サーバを介して画面共有先の情報処理装置に提供する。画面共有先の情報処理装置は、第１サーバから受信した画面共有情報又は保存先情報に基づき第２サーバから受信した画面共有情報に基づく画像を自装置の表示画面に表示させる。【選択図】図７

Description

本発明は、画面共有システム、情報処理装置、画面共有方法及びプログラムに関する。

近年、インターネット等の通信ネットワークを介して会議等を行うシステムが普及している。このようなシステムでは、マイクなどの集音装置によって取得された音声データやカメラなどの撮像装置によって取得された撮像データの他、画像表示装置の表示画面に表示された画像を情報処理装置間で送受信することで画面の共有が行われている。例えば、手書き入力された画像（手書き画像）を画面共有することで、遠隔地にあるユーザ間の意思疎通を向上させることができる。

上述した画面共有に関しては、各種の技術が提案されている。例えば、特許文献１には、手書き画像とともに背景画像の共有を行う際に、先に入力された画像よりも、後から入力された画像の方が先に表示画面に表示されることがないようキューイング制御することが記載されている。

しかしながら、上記の技術ではキューイング制御に係る構成が煩雑であるという問題がある。また、入力された順に画像が表示される構成であるため、入力された画像の中にデータサイズの大きな画像が含まれると、その後に入力された画像のデータサイズが圧倒的に小さな場合であっても、当該画像が表示されるまで時間を要する。

本発明は、上記に鑑みてなされたものであって、情報処理装置間の画面共有を効率的に行うことができる画面共有システム、情報処理装置、画面共有方法及びプログラムを提供することを目的とする。

上述した課題を解決し、目的を達成するために、本発明の一態様は、ネットワーク接続された第１情報処理装置と第２情報処理装置との間で画面共有を行う画面共有システムであって、前記第１情報処理装置は、自装置の表示画面に表示される画像を画面共有情報として取得する取得部と、前記画面共有情報のデータ量が閾値未満の場合に、前記画面共有情報を前記ネットワークに接続された第１サーバに送信する第１送信部と、前記画面共有情報のデータ量が閾値以上の場合に、前記画面共有情報を前記ネットワークに接続された第２サーバに送信し、当該第２サーバでの前記画面共有情報の保存先を示す保存先情報を前記第１サーバに送信する第２送信部と、を備え、前記第２情報処理装置は、前記第１サーバから前記第１情報処理装置が送信した前記画面共有情報又は前記保存先情報を受信する第１受信部と、前記第１受信部が受信した前記保存先情報に基づき、前記第２サーバから前記画面共有情報を受信する第２受信部と、前記第１受信部又は前記第２受信部が受信した前記画面共有情報に基づく画像を自装置の表示画面に表示させる表示制御部と、を備える。

本発明によれば、情報処理装置間の画面共有を効率的に行うことができる。

図１は、実施形態に係る画面共有システムのシステム構成の一例を示す図である。 図２は、実施形態に係る画像表示装置のハードウェア構成の一例を示す図である。 図３は、実施形態に係る管理サーバのハードウェア構成の一例を示す図である。 図４は、実施形態に係る画像表示装置、管理サーバ及びストレージサーバの機能構成の一例を示す図である。 図５は、実施形態の管理サーバ経由で画面共有情報を提供する場合の情報の流れを模式的に示す図である。 図６は、実施形態の管理サーバ経由で画面共有情報を提供する場合の動作例を示すシーケンス図である。 図７は、実施形態に係るストレージサーバ経由で画面共有情報を提供する場合の情報の流れを模式的に示す図である。 図８は、実施形態に係るストレージサーバ経由で画面共有情報を提供する場合の動作例を示すシーケンス図である。 図９は、実施形態に係る画面共有元の画像表示装置が実行する処理の一例を示すフローチャートである。 図１０は、実施形態に係る画面共有先の画像表示装置が実行する処理の一例を示すフローチャートである。 図１１は、変形例に係るストレージサーバ経由で画面共有情報を提供する場合の情報の流れを模式的に示す図である。 図１２は、変形例に係るストレージサーバ経由で画面共有情報を提供する場合の動作例を示すシーケンス図である。

以下に、図面を参照しながら本発明に係る画面共有システム、情報処理装置、画面共有方法及びプログラムの実施形態を詳細に説明する。

図１は、実施形態に係る画面共有システム１のシステム構成の一例を示す図である。本実施形態に係る画面共有システム１は、画像表示装置１０（１０ａ、１０ｂ）と、管理サーバ２０と、ストレージサーバ３０とを有する。かかる画面共有システム１において、画像表示装置１０、管理サーバ２０及びストレージサーバ３０は、インターネット等の通信ネットワークＮ１を介して通信可能に接続される。なお、通信ネットワークＮ１に接続される画像表示装置１０の個数は図１の例に限定されないものとする。

画像表示装置１０は、情報処理装置の一例である。画像表示装置１０は、通信ネットワークＮ１に接続された他の装置との間で通信（セッション）を確立し、各種データの送受信を行う。具体的には、画像表示装置１０は、通信ネットワークＮ１を介し各種データを送受信することで、画面共有元の画像表示装置１０に表示されている画面を、画面共有先の画像表示装置１０の画面に表示する画面共有を行う。なお、本実施形態では、画像表示装置１０ａが画面共有元であるとし、画像表示装置１０ｂが画面共有先であるとして説明を進める。

管理サーバ２０は、第１サーバの一例であり、画像表示装置１０間で送受されるデータを管理する。また、ストレージサーバ３０は、第２サーバの一例であり、画像表示装置１０間で授受される画面共有情報の保存を行う。

図２は、画像表示装置１０のハードウェア構成の一例を示す図である。図２に示すように、画像表示装置１０は、ＣＰＵ(Central Processing Unit)１０１、ＲＯＭ(Read Only Memory)１０２、ＲＡＭ(Random Access Memory)１０３、ＳＳＤ(Solid State Drive)１０４、ネットワークＩ／Ｆ１０５、及び、外部機器接続Ｉ／Ｆ(Interface)１０６を備えている。

ＣＰＵ１０１は、画像表示装置１０全体の動作を制御する。ＲＯＭ１０２は、ＣＰＵ１０１やＩＰＬ(Initial Program Loader)等のＣＰＵ１０１の駆動に用いられるプログラムを記憶する。ＲＡＭ１０３は、ＣＰＵ１０１のワークエリアとして使用される。ＳＳＤ１０４は、ＣＰＵ１０１が実行するプログラム等の各種データを記憶する。ネットワークＩ／Ｆ１０５は、通信ネットワークＮ１との通信を制御する。外部機器接続Ｉ／Ｆ１０６は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢ(Universal Serial Bus)メモリ１０６ａ、外付け機器（マイク１０６ｂ、スピーカ１０６ｃ、カメラ１０６ｄ）である。

また、画像表示装置１０は、キャプチャデバイス１０７、ＧＰＵ(Graphics Processing Unit)１０８、ディスプレイコントローラ１０９、ディスプレイ１１０、センサコントローラ１１１、接触センサ１１２、電子ペンコントローラ１１３、電源スイッチ１１４及び選択スイッチ類１１５等を備えている。

キャプチャデバイス１０７は、ＰＣ(Personal Computer)１０７ａのディスプレイに表示されている静止画又は動画を背景画像として取得する。ＧＰＵ１０８は、グラフィクスを専門に扱う半導体チップである。ディスプレイコントローラ１０９は、ＧＰＵ１０８からの出力画像をディスプレイ１１０等へ出力するために画面表示の制御及び管理を行う。

接触センサ１１２は、ディスプレイ１１０上に電子ペン１１３ａやユーザの手Ｈ等が接触したことを検知する。センサコントローラ１１１は、接触センサ１１２の処理を制御する。接触センサ１１２は、赤外線遮断方式による座標の入力及び座標の検出を行う。この座標の入力及び座標の検出する方法は、ディスプレイ１１０の上側両端部に設置された２つ受発光装置が、ディスプレイ１１０に平行して複数の赤外線を放射し、ディスプレイ１１０の周囲に設けられた反射部材によって反射されて、受光素子が放射した光の光路と同一の光路上を戻って来る光を受光する方法である。接触センサ１１２は、物体によって遮断された２つの受発光装置が放射した赤外線のＩＤをセンサコントローラ１１１に出力し、センサコントローラ１１１が、物体の接触位置である座標位置を特定する。

電子ペンコントローラ１１３は、電子ペン１１３ａと通信することで、ディスプレイ１１０へのペン先のタッチやペン尻のタッチの有無を判断する。電源スイッチ１１４は、画像表示装置１０の電源のＯＮ／ＯＦＦを切り換えるためのスイッチである。選択スイッチ類１１５は、例えば、ディスプレイ１１０の表示の明暗や色合い等を調整するためのスイッチ群である。

更に、画像表示装置１０は、バスライン１１６を備えている。バスライン１１６は、図２に示されているＣＰＵ１０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

なお、接触センサ１１２は、赤外線遮断方式に限らず、静電容量の変化を検知することにより接触位置を特定する静電容量方式のタッチパネル、対向する２つの抵抗膜の電圧変化によって接触位置を特定する抵抗膜方式のタッチパネル、接触物体が表示部に接触することによって生じる電磁誘導を検知して接触位置を特定する電磁誘導方式のタッチパネルなどの種々の検出手段を用いてもよい。また、電子ペンコントローラ１１３が、電子ペン１１３ａのペン先及びペン尻だけでなく、電子ペン１１３ａのユーザが握る部分や、その他の電子ペンの部分のタッチの有無を判断するようにしてもよい。

画像表示装置１０は、ＰＣ１０７ａから入力される画像（背景画像）を、ディスプレイ１１０の表示画面に表示することができるように構成されている。また、画像表示装置１０は、接触センサ１１２を介して、ユーザの手書き入力を受け付けるように構成されている。例えば、画像表示装置１０では、ユーザが電子ペン１１３ａのペン先をディスプレイ１１０に接触させながら移動させることに応答する。そして、画像表示装置１０は、その移動軌跡に対応する描画線をディスプレイ１１０の表示画面に表示するように構成されている。これにより、画像表示装置１０のユーザは、ディスプレイ１１０の表示画面に表示された背景画像の上に、文字や図形等の手書き画像を自由に書き込むことができる。

図３は、管理サーバ２０のハードウェア構成の一例を示す図である。なお、ストレージサーバ３０のハードウェア構成も、この管理サーバ２０のハードウェア構成と同様である。このため、ストレージサーバ３０のハードウェア構成は、以下の管理サーバ２０のハードウェア構成の説明を参照されたい。

図３に示すように、管理サーバ２０は、ＣＰＵ２０１、ＲＯＭ２０２、ＲＡＭ２０３、ＨＤＤ(Hard Disk Drive)２０４、ＨＤＤコントローラ２０５、ディスプレイ２０６、ネットワークＩ／Ｆ２０７、バスライン２０８、キーボード２０９及びポインティングデバイス２１０を備える。

ＣＰＵ２０１は、管理サーバ２０全体の動作を制御する。ＲＯＭ２０２は、ＩＰＬ等のＣＰＵ２０１の駆動に用いられるプログラムを記憶する。ＲＡＭ２０３は、ＣＰＵ２０１のワークエリアとして使用される。ＨＤＤ２０４は、プログラム等の各種データを記憶する。ＨＤＤコントローラ２０５は、ＣＰＵ２０１の制御にしたがってＨＤＤ２０４に対する各種データの読み出し又は書き込みを制御する。ディスプレイ２０６は、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報やデータを表示する。ネットワークＩ／Ｆ２０７は、通信ネットワークＮ１を利用してデータ通信をするためのインターフェースである。バスライン２０８は、ＣＰＵ２０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

また、キーボード２０９は、文字、数値、各種指示などの入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス２１０は、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行う入力手段の一種である。

上述した画面共有システム１の構成において、画像表示装置１０では、ディスプレイ１１０の表示画面に表示された画像を遠隔地に設置された他の画像表示装置１０に転送して表示させる画面共有機能を備えている。これにより、画面共有システム１では、画像表示装置１０ａのディスプレイ１１０に入力（表示）された手書き画像を、遠隔地にある画像表示装置１０ｂと共有しながら会議やプレゼンテーション等を行うことができる。

ところで、画像表示装置１０間が低帯域幅の通信ネットワークを経由して接続されるような場合、送信元の画像表示装置１０が送信するデータのデータ量によっては、通信ネットワークＮ１を介したデータ転送に遅延が発生する可能性がある。

例えば、手書き線を複数コピーした場合や、複数の手書き線を保存したページを読み込んだような場合、データ量の大きな手書き線が一度に描画されるようなことがある。このように、データ量の大きな手書き画像が入力される場合、当該手書き画像を画像表示装置１０ｂに送信すると、それ以降に入力された手書き画像が画像表示装置１０ｂに到達するのに遅延が発生する可能性がある。このような遅延が発生すると、画面共有先の画像表示装置１０では、データ量の大きな手書き画像が表示されるまでの間、画面共有元の画像表示装置１０で追加の手書き入力が行われたか否かを把握することができず、ユーザ間の意思疎通の妨げとなる可能性がある。

そこで、本実施形態の画面共有システム１では、上記した問題を改善するため、画像表示装置１０、管理サーバ２０及びストレージサーバ３０の各装置は、図４に示す機能構成を備えている。ここで、図４は、画像表示装置１０、管理サーバ２０及びストレージサーバ３０の機能構成の一例を示す図である。

まず、画面共有元の画像表示装置１０ａの機能構成について説明する。図４に示すように、画像表示装置１０ａは、機能構成として、取得部１５１と、判定部１５２と、送信制御部１５３とを備える。

取得部１５１は、自装置のディスプレイ１１０の表示画面に表示される画像を画面共有情報として取得する。具体的には、取得部１５１は、接触センサ１１２や電子ペン１１３ａを介して、ディスプレイ１１０の表示画面に手書き画像が入力（表示）されると、その手書き画像を表す情報を画面共有情報として取得する。ここで、画面共有情報は、ディスプレイ１１０の表示画面内における手書き画像の位置（例えば、座標等）や、その形状や色を表す情報（例えば、ベクトルデータや選択されている色等）等、画面共有元と同様の状態で表示させることが可能な情報を含む。

なお、画面共有情報として切り出す単位は特に問わず、任意に設定することが可能であるとする。例えば、取得部１５１は、一度の操作で入力された手書き画像を一の画面共有情報として取得してもよい。また、例えば、取得部１５１は、手書き画像の入力が開始されたタイミングから所定時間以内に入力された手書き画像を一の画面共有情報として取得してもよい。

また、取得部１５１が取得する画面共有情報として取得する画像は、手書き画像に限らず、ディスプレイ１１０の表示画面に表示される背景画像を画面共有情報として取得してもよい。この場合、取得部１５１は、手書き画像と背景画像とを別々の画面共有情報として取得する。

判定部１５２は、取得部１５１で取得された画面共有情報のデータ量が閾値以上か否かを判定する。ここで、閾値は任意に設定可能であるとするが、画像表示装置１０ａと画像表示装置１０ｂとの間の通信の帯域幅（通信速度）等に応じて自動又は手動で設定できる。

送信制御部１５３は、判定部１５２の判定結果に応じて画面共有情報の送信先を切り替える。具体的には、送信制御部１５３は、第１送信部１５３１と第２送信部１５３２とを有し、これら送信部の機能により、判定部１５２の判定結果に応じた送信先に画面共有情報を送信する。

第１送信部１５３１は、画面共有情報のデータ量が閾値未満の場合に、当該画面共有情報を管理サーバ２０に送信することで、管理サーバ２０経由で画面共有情報を画像表示装置１０ｂに提供する。

第２送信部１５３２は、画面共有情報のデータ量が閾値以上の場合に、当該画面共有情報をストレージサーバ３０に送信する。また、第２送信部１５３２は、第１送信部１５３１と協働することで、ストレージサーバ３０での画面共有情報の保存先を示す保存先情報を、管理サーバ２０経由で画像表示装置１０ｂに提供する。なお、本実施形態では、保存先情報はストレージサーバ３０から通知されるものとするが、第２送信部１５３２が、ストレージサーバ３０での保存先を決定する形態としてもよい。

次に、管理サーバ２０の機能構成について説明する。図４に示すように、管理サーバ２０は、機能構成として第１管理部２５１と、第１提供部２５２とを備える。

第１管理部２５１は、画像表示装置１０ａの送信制御部１５３の第１送信部１５３１から送信される画面共有情報又は保存先情報を受信し、受信した情報を自装置が備えるＲＡＭやＨＤＤ等の第１記憶媒体Ｍ１に保存する。なお、第１管理部２５１は、画像表示装置１０ａから受信した順に情報の保存を行うものとする。

第１提供部２５２は、第１記憶媒体Ｍ１に保存された情報を、画面共有先の画像表示装置１０ｂに提供する。ここで、情報の提供方法は特に問わず、種々の方法を採用することが可能である。例えば、第１提供部２５２は、新たな画面共有情報又は保存先情報が第１記憶媒体Ｍ１に保存される毎に、その新たな情報を画像表示装置１０ｂに提供してもよい。また、例えば、第１提供部２５２は、画像表示装置１０ｂからの要求に応じて、第１記憶媒体Ｍ１に記憶された情報をＦＩＦＯ（First In First Out）形式で順次提供してもよい。なお、本実施形態では、前者の提供方法で画像表示装置１０ｂに情報が提供されるものとするが、この場合、第１記憶媒体Ｍ１を介さずにメディアストリーム等のストリーム形式で順次送信する構成としてもよい。

次に、ストレージサーバ３０の機能構成について説明する。図４に示すように、ストレージサーバ３０は、機能構成として第２管理部３５１と、第２提供部３５２とを備える。

第２管理部３５１は、画像表示装置１０ａの送信制御部１５３の第２送信部１５３２から送信された画面共有情報を受信し、受信した画面共有情報を自装置が備えるＲＡＭやＨＤＤ等の第２記憶媒体Ｍ２に保存する。また、第２管理部３５１は、第２記憶媒体Ｍ２に画面共有情報を保存すると、その保存先を示す保存先情報を画像表示装置１０ａに通知する。ここで、保存先情報は、例えばＵＲＬ（Uniform Resource Locator）等のアドレスであり、対応する画面共有情報をダウンロードすることが可能な情報となっている。

なお、第２管理部３５１が保存先情報を通知するタイミングは特に問わないものとする。例えば、第２管理部３５１は、画面共有情報の保存が完了したタイミングで通知してもよい。また、第２管理部３５１は、画面共有情報の保存を開始したタイミングで通知してもよい。

第２提供部３５２は、第２記憶媒体Ｍ２に保存された画面共有情報を、画面共有先となる画像表示装置１０ｂに提供する。具体的には、第２提供部３５２は、保存先情報に基づいたダウンロード要求を画像表示装置１０ｂから受け付けると、その保存先情報が示す保存先に保存された画面共有情報を画像表示装置１０ｂに提供する。

次に、画面共有先の画像表示装置１０ｂの機能構成について説明する。図４に示すように、画像表示装置１０ｂは、機能構成として、受信制御部１５５と、表示制御部１５６とを備える。

受信制御部１５５は、画像表示装置１０から送信された画面共有情報を、管理サーバ２０又はストレージサーバ３０を経由して受信する。具体的には、受信制御部１５５は、第１受信部１５５１と第２受信部１５５２とを有し、これらの受信部の機能により、画像表示装置１０から送信された画面共有情報を、管理サーバ２０又はストレージサーバ３０を経由して受信する。

第１受信部１５５１は、管理サーバ２０から提供される画面共有情報又は保存先情報を受信する。ここで、第１受信部１５５１が管理サーバ２０から情報を受信する方法は特に問わず、種々の方法を採用することが可能である。例えば、第１受信部１５５１は、管理サーバ２０に対し情報の提供を随時又は定期的に要求することで、管理サーバ２０から送信される情報を受信してもよい。また、例えば、第１受信部１５５１は、管理サーバ２０から一方的に送信される情報を受信してもよい。

第２受信部１５５２は、第１受信部１５５１が受信した保存先情報に基づきストレージサーバ３０にアクセスすることで、当該保存先情報に対応する画面共有情報をストレージサーバ３０から受信（ダウンロード）する。ここで、第２受信部１５５２が、ストレージサーバ３０から画面共有情報を受信する方法は特に問わず、種々の方法を採用することが可能である。例えば、第２受信部１５５２は、第１受信部１５５１が保存先情報を受信した場合、その保存先情報が示すアドレスに自動でアクセスすることで、該当する画面共有情報をストレージサーバ３０から受信してもよい。また、例えば、第２受信部１５５２は、ユーザから保存先情報が示すアドレスへのアクセスが指示された場合に、当該アドレスにアクセスすることで、該当する画面共有情報をストレージサーバ３０から受信してもよい。

表示制御部１５６は、受信制御部１５５（第１受信部、第２受信部）で受信した画面共有情報に基づき、画面共有情報が表す手書き画像をディスプレイ１１０の表示画面に表示させる。具体的には、表示制御部１５６は、画面共有情報に含まれた座標情報やベクトルデータ等に基づき手書き画像をディスプレイ１１０の表示画面に再現する。これにより、表示制御部１５６は、画像表示装置１０ａのディスプレイ１１０に表示された手書き画像と同様の状態で、自装置のディスプレイ１１０に手書き画像を表示させる。

また、表示制御部１５６は、第１受信部１５５１が保存先情報を受信した場合、報知情報をディスプレイ１１０の表示画面に表示させる。ここで、報知情報の表示形態は特に問わず種々の形態を採用することが可能である。例えば、表示制御部１５６は、保存先情報そのもの（ＵＲＬ等）や、保存先情報が示す保存先へのアクセスを指示する操作子を報知情報としてディスプレイ１１０の表示画面に表示させてもよい。この場合、第２受信部１５５２は、ディスプレイ１１０の表示画面に表示された報知情報に対して接触操作等が行われた場合に、保存先情報が示すアドレスへのアクセスが指示されたと判断してもよい。また、例えば、表示制御部１５６は、未表示の画面共有情報（手書き画像）が存在することを報知するメッセージやアイコン等を報知情報としてディスプレイ１１０の表示画面に表示させてもよい。

なお、図４では、画像表示装置１０ａと画像表示装置１０ｂとで機能構成を分けて説明したが、一の画像表示装置１０が画像表示装置１０ａ及び画像表示装置１０ｂの機能構成を具備する構成としてもよい。つまり、画像表示装置１０が、画面共有先と画面共有元との両機能を有する場合、当該画像表示装置１０は、図４で示した画像表示装置１０ａ及び画像表示装置１０ｂの機能構成を具備することになる。

次に、上述した画面共有システム１の動作について説明する。まず、図５及び図６を参照して、管理サーバ２０経由で画面共有情報を提供する場合の動作例について説明する。

図５は、管理サーバ２０経由で画面共有情報を提供する場合の情報の流れを模式的に示す図である。また、図６は、管理サーバ２０経由で画面共有情報を提供する場合の動作例を示すシーケンス図である。

まず、画面共有元の画像表示装置１０ａにおいて、ユーザにより手書き画像の入力が行われると（符号Ｐ１１）、画像表示装置１０ａの取得部１５１は、入力された手書き画像を画面共有情報として取得する。次いで、画像表示装置１０ａの判定部１５２は、取得部１５１が取得した画面共有情報のデータ量を判定する（符号Ｐ１２）。ここで、画面共有情報のデータ量が閾値未満の場合、画像表示装置１０ａの送信制御部１５３（第１送信部１５３１）は、画面共有情報を管理サーバ２０に送信する（符号Ｐ１３）。

管理サーバ２０では、画像表示装置１０ａから送信された画面共有情報を第１管理部２５１が第１記憶媒体Ｍ１に保存すると、第１提供部２５２は、第１記憶媒体Ｍ１に保存された画面共有情報を画像表示装置１０ｂに提供する。

一方、画面共有先の画像表示装置１０ｂでは、管理サーバ２０から提供された画面共有情報を受信制御部１５５（第１受信部１５５１）が受信する（符号Ｐ１４）。そして、画像表示装置１０ｂの表示制御部１５６は、管理サーバ２０から提供された画面共有情報に基づき手書き画像をディスプレイ１１０に表示させることで、画像表示装置１０ａと同様の画面を再現する（符号Ｐ１５）。

次に、図７及び図８を参照して、ストレージサーバ３０経由で画面共有情報を提供する場合の動作例について説明する。ここで、図７は、ストレージサーバ３０経由で画面共有情報を提供する場合の情報の流れを模式的に示す図である。また、図８は、ストレージサーバ３０経由で画面共有情報を提供する場合の動作例を示すシーケンス図である。

まず、画面共有元の画像表示装置１０ａにおいて、ユーザにより手書き画像の入力が行われると（符号Ｐ２１）、画像表示装置１０ａの取得部１５１は、入力された手書き画像を画面共有情報として取得する。次いで、画像表示装置１０ａの判定部１５２は、取得部１５１が取得した画面共有情報のデータ量を判定する（符号Ｐ２２）。ここで、画面共有情報のデータ量が閾値以上の場合、画像表示装置１０ａの送信制御部１５３（第２送信部１５３２）は、画面共有情報をストレージサーバ３０に送信（アップロード）する（符号Ｐ２３）。

ストレージサーバ３０では、第２管理部３５１は、画像表示装置１０ａから送信された画面共有情報を第２記憶媒体Ｍ２に保存すると、その保存先を示す保存先情報を画像表示装置１０ａに通知する（符号Ｐ２４）。画像表示装置１０ａの送信制御部１５３（第２送信部１５３２）は、ストレージサーバ３０から通知された保存先情報を受け付けると、その保存先情報を管理サーバ２０に送信する（符号Ｐ２５）。

管理サーバ２０では、画像表示装置１０ａから送信された保存先情報を第１管理部２５１が第１記憶媒体Ｍ１に保存すると、第１提供部２５２は、第１記憶媒体Ｍ１に保存された保存先情報を画像表示装置１０ｂに提供する。

一方、画面共有先の画像表示装置１０ｂでは、受信制御部１５５（第２受信部１５５２）が管理サーバ２０から提供された保存先情報を受信すると（符号Ｐ２６）、表示制御部１５６は、報知情報をディスプレイ１１０に表示させる（符号Ｐ２７）。ここで、図７では、報知情報として未表示の画面共有情報（手書き画像）がある旨を表示させた例を示している。

続いて、画像表示装置１０ｂの受信制御部１５５（第２受信部１５５２）は、受信した保存先情報に基づきストレージサーバ３０にアクセスすることで（符号Ｐ２８）、ストレージサーバ３０から提供される画面共有情報を受信（ダウンロード）する（符号Ｐ２９）。そして、画像表示装置１０ｂの表示制御部１５６は、管理サーバ２０から提供された画面共有情報に基づき手書き画像をディスプレイ１１０に表示させることで、画像表示装置１０ａと同様の画面を再現する（符号Ｐ３０）。

このように、本実施形態では、画像表示装置１０ａは、管理サーバ２０及びストレージサーバ３０を介して、画面共有情報を画像表示装置１０ｂに提供する。一方、画像表示装置１０ｂでは、管理サーバ２０を介して提供された画面共有情報に基づき、画像表示装置１０ａのディスプレイ１１０に表示された手書き画像を、自装置のディスプレイ１１０に表示する。また、画像表示装置１０ｂは、管理サーバ２０から提供された保存先情報に基づいて、ストレージサーバ３０から画面共有情報を取得し、当該画面共有情報に基づく手書き画像を自装置のディスプレイ１１０に表示させる。

これにより、本実施形態では、データ量が閾値未満の画面共有情報と、データサイズが閾値以上の画面共有情報とを異なる経路で転送することができるため、画面共有に係る効率を向上させることができる。また、本実施形態では、データ量が閾値以上の画面共有情報をそのまま画像表示装置１０ｂに送信せずに、データ量の小さな保存先情報の形態で送信するため、当該画面共有情報の後に入力された手書き画像（画面共有情報）の遅延を防ぐことができる。

また、画像表示装置１０ｂは、保存先情報を受信した場合に報知情報を表示させるため、未表示の画面共有情報（手書き画像）がある旨をユーザに報知するができる。これにより、画像表示装置１０ｂは、未表示の手書き画像が存在することを当該手書き画像が表示される前に知ることができるため、画面共有に係る利便性の向上を図ることができる。また、画像表示装置１０ｂでは、ユーザ操作に応じて保存先情報が示す保存先から画面共有情報を受信することもできるため、データ量が閾値以上の画面共有情報の受信（表示）を任意のタイミングで行うことができる。

次に、図９及び図１０を参照して、上述した画像表示装置１０の動作について説明する。ここで、図９は、画面共有元の画像表示装置１０ａが実行する処理の一例を示すフローチャートである。

まず、画像表示装置１０ａでは、取得部１５１が、電子ペン１１３ａ等を介して手書き画像の入力が行われた否かを判定する（ステップＳ１１）。ここで、手書き入力が行われた場合（ステップＳ１１；Ｙｅｓ）、取得部１５１は、入力された手書き画像を画面共有情報として取得する（ステップＳ１２）。

続いて、判定部１５２は、取得部１５１が取得した画面共有情報のデータ量が閾値以上か否かを判定する（ステップＳ１３）。ここで、画面共有情報のデータ量が閾値未満の場合（ステップＳ１３；Ｎｏ）、送信制御部１５３（第１送信部１５３１）は、画面共有情報を管理サーバ２０に送信し（ステップＳ１４）、ステップＳ１１に戻る。

また、画面共有情報のデータ量が閾値以上の場合（ステップＳ１３；Ｙｅｓ）、送信制御部１５３（第２送信部１５３２）は、画面共有情報をストレージサーバ３０に送信し（ステップＳ１５）、ステップＳ１１に戻る。

ステップＳ１１では手書き画像の入力が行われない場合（ステップＳ１１；Ｎｏ）、送信制御部１５３（第２送信部１５３２）は、ストレージサーバ３０から保存先情報を受信したか否かを判定する（ステップＳ１６）。ここで、ストレージサーバ３０から保存先情報が通知されない場合には（ステップＳ１６；Ｎｏ）、ステップＳ１１に戻る。

また、ステップＳ１６において、ストレージサーバ３０から保存先情報を受信した場合（ステップＳ１６；Ｙｅｓ）、送信制御部１５３（第２送信部１５３２）は、受信した保存先情報を管理サーバ２０に送信し（ステップＳ１７）、ステップＳ１１に戻る。

一方、図１０は、画面共有先の画像表示装置１０ｂが実行する処理の一例を示すフローチャートである。

まず、画像表示装置１０ｂでは、受信制御部１５５（第１受信部１５５１）が管理サーバ２０から情報を受信したか否かを判定する（ステップＳ２１）。受信制御部１５５（第１受信部１５５１）は、管理サーバ２０から情報を受信すると（ステップＳ２１；Ｙｅｓ）、受信した情報が画面共有情報か保存先情報かを判別する（ステップＳ２２）。

ここで、受信した情報が画面共有情報であった場合（ステップＳ２２；Ｙｅｓ）、表示制御部１５６は、その画面共有情報に基づき手書き画像をディスプレイ１１０の表示画面に表示させると（ステップＳ２３）、ステップＳ２１に戻る。

また、受信した情報が画像共有情報でなく保存先情報であった場合（ステップＳ２２；Ｎｏ）、表示制御部１５６は、保存先情報に対応する画面共有情報が存在することを報知する報知情報をディスプレイ１１０の表示画面に表示させる（ステップＳ２４）。次いで、受信制御部１５５（第２受信部１５５２）は、保存先情報に基づきストレージサーバ３０にアクセスすることで、画面共有情報のダウンロードを開始し（ステップＳ２５）、ステップＳ２１に戻る。

ステップＳ２１では管理サーバ２０から情報が提供されない場合（ステップＳ２１；Ｎｏ）、受信制御部１５５（第２受信部１５５２）は、画面共有情報のダウンロードが完了したか否かを判定する（ステップＳ２６）。ここで、ストレージサーバ３０から画面共有情報のダウンロードを行っていない場合や、ダウンロードが完了していない場合には（ステップＳ２６；Ｎｏ）、ステップＳ２１に戻る。

また、ステップＳ２６において、画面共有情報のダウンロードが完了した場合には（ステップＳ２６；Ｙｅｓ）、表示制御部１５６がその画面共有情報に基づいた手書き画像をディスプレイ１１０の表示画面に表示させた後（ステップＳ２３）、ステップＳ２１に戻る。

以上のように、本実施形態によれば、画像表示装置１０ａは、自装置の表示画面に表示される画像を画面共有情報として取得し、画面共有情報のデータ量が閾値未満の場合に、管理サーバ２０を介して画像表示装置１０ｂに提供する。また、画面共有情報のデータ量が閾値以上の場合に、ストレージサーバ３０に保存した画面共有情報の保存先情報を、管理サーバ２０を介して画像表示装置１０ｂに提供する。一方、画像表示装置１０ｂでは、管理サーバ２０から受信した画面共有情報又は保存先情報に基づきストレージサーバ３０から受信した画面共有情報を自装置のディスプレイ１１０に表示させる。

これにより、本実施形態では、データ量の大きな手書き画像が画像表示装置１０ａで入力された場合であっても、当該手書き画像以降に入力される手書き画像を遅延することなく、画像表示装置１０ｂに転送することができる。これにより、画像表示装置１０ｂのユーザは、画像表示装置１０ａでの手書き入力の状況を容易に把握することができるため、ユーザ間の意思疎通の向上を図ることができる。

また、画像表示装置１０ｂでは、保存先情報を受信した場合に報知情報を表示させる。これにより、例えば、先に入力されたデータ量の大きな手書き画像より先に、後に入力された手書き画像が表示された場合であっても、画像表示装置１０ｂのユーザは、データ量の大きな手書き画像が未表示の状態であることを認識できるため、画面共有に係る利便性の向上を図ることができる。

なお、上述した実施形態では、画面共有先の画像表示装置１０ｂでは保存先情報を受信した場合に、保存先情報を受信したことや、未表示の画面共有情報（手書き画像）が存在することを報知したが、報知内容はこれに限らないものとする。例えば、保存先情報に対応する画面共有情報が手書き画像として表示される画面内の位置（以下、描画位置）を報知してもよい。以下、上述した実施形態の変形例として、描画位置を報知可能な構成について説明する。

［変形例］
図１１及び図１２は、本変形例に係る画面共有システム１の動作を説明するための図である。ここで、図１１は、ストレージサーバ３０経由で画面共有情報を提供する場合の情報の流れを模式的に示す図である。また、図１２は、管理サーバ２０経由で画面共有情報を提供する場合の動作例を示すシーケンス図である。なお、符号Ｐ４１〜符号Ｐ４４の動作は、上述した図７及び図８の符号Ｐ２１〜符号Ｐ２４の動作と同様であるため説明を省略する。

本変形例に係る画像表示装置１０ａの送信制御部１５３（第２送信部１５３２）は、ストレージサーバ３０から保存先情報の通知を受け付けると、当該保存先情報を、対応する画面共有情報等から抽出した手書き画像の属性情報とともに管理サーバ２０に送信する（符号Ｐ４５）。

ここで、属性情報は、手書き画像に関する情報を含む。具体的には、属性情報は、画像表示装置１０ａのディスプレイ１１０の表示画面上において手書き画像が表示（描画）された表示領域を指定する情報（バウンディングボックス情報等）を含む。なお、属性情報の内容は、この例に限らず、他の情報を含んでもよい。例えば、属性情報は、手書き画像（画面共有情報）のデータサイズ等を示す情報を含んでもよい。

管理サーバ２０では、画像表示装置１０ａから保存先情報及び属性情報が受信すると、第１管理部２５１は、受信された保存先情報及び属性情報を第１記憶媒体Ｍ１に保存する。次いで、第１提供部２５２は、第１記憶媒体Ｍ１に保存された保存先情報及び属性情報を画像表示装置１０ｂに提供する。

一方、画面共有先の画像表示装置１０ｂでは、管理サーバ２０から提供された保存先情報及び属性情報を受信制御部１５５（第２受信部１５５２）が受信する（符号Ｐ４６）。表示制御部１５６は、受信された属性情報に基づき、保存先情報に対応する画面共有情報（手書き画像）が表示される表示領域を報知する報知情報をディスプレイ１１０の表示画面に表示させる（符号Ｐ４７）。続いて、画像表示装置１０ｂの受信制御部１５５（第２受信部１５５２）は、保存先情報に基づきストレージサーバ３０にアクセスすることで（符号Ｐ４８）、ストレージサーバ３０から提供される画面共有情報を受信する（符号Ｐ４９）。

ここで、図１１では、ディスプレイ１１０の表示画面上で画面共有情報（手書き画像）が表示される表示領域を、ハッチングを用いて識別可能に表示した例を示している。また、図１１では、画面共有情報がダウンロード中であることを、砂時計のアイコンで示している。

そして、画像表示装置１０ｂの表示制御部１５６は、ストレージサーバ３０から提供された画面共有情報に基づき、手書き画像をディスプレイ１１０の表示画面に表示させることで、画像表示装置１０ａと同様の画面を再現する（符号Ｐ５０）。ここで、手書き画像が表示される位置は表示領域に対応する。

このように、本変形例によれば、画像表示装置１０ｂでは、管理サーバ２０から保存先情報を受信すると、同時に受信した属性情報に基づき、対応する画面共有情報によって表示される手書き画像の表示領域を報知情報として表示する。これにより、画像表示装置１０ｂのユーザは、表示が保留されたデータ量が閾値以上の画面共有情報により、手書き画像が表示される位置を事前に把握することができるため、画面共有に係る利便性の向上を図ることができる。

上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたＡＳＩＣ（Application Specific Integrated Circuit）、ＤＳＰ（Digital Signal Processor）、ＦＰＧＡ（Field Programmable Gate Array）や従来の回路モジュール等のデバイスを含むものとする。

上記で説明した実施形態の各機能の少なくとも一部がプログラムの実行によって実現される場合、プログラムは適宜な記憶装置に予め組み込まれて提供される。また、プログラムはインストール可能な形式又は実行可能な形式のファイルでＣＤ−ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ、ＤＶＤ等のコンピュータで読み取り可能な記録媒体に記録して提供されてもよい。また、プログラムはインターネット等のネットワークに接続されたコンピュータ上に格納され、ネットワーク経由でダウンロードさせることにより提供され得るように構成されてもよい。また、プログラムはインターネット等のネットワーク経由で提供又は配布され得るように構成されてもよい。また、プログラムは上述した各機能の少なくとも一部を含むモジュール構成となっていてもよい。

また、上記では画像表示装置１０を情報処理装置としたが、表示機能及び通信機能を備えた装置であれば、画像表示装置１０に限らない。情報処理装置は、例えば、ＰＪ（Projector：プロジェクタ）、ＩＷＢ（Interactive White Board：相互通信が可能な電子式の黒板機能を有する白板）、デジタルサイネージ等の出力装置、ＨＵＤ（Head Up Display）装置、産業機械、撮像装置、集音装置、医療機器、ネットワーク家電、自動車（Connected Car）、ノートＰＣ（Personal Computer）、携帯電話、スマートフォン、タブレット端末、ゲーム機、ＰＤＡ（Personal Digital Assistant）、デジタルカメラ、ウェアラブルＰＣ又はデスクトップＰＣ等であってもよい。

また、上記で説明した実施形態の装置群は、本明細書に開示された実施形態を実施するための複数のコンピュータ環境のうちの１つを示すものにすぎない。例えば、ある実施形態では、管理サーバ２０は、サーバクラスタといった複数のコンピューティングデバイスを含む。複数のコンピューティングデバイスは、ネットワークや共有メモリ等を含む任意のタイプの通信リンクを介して互いに通信するように構成されており、本明細書に開示された処理を実施する。同様にストレージサーバ３０は、互いに通信するように構成された複数のコンピューティングデバイスを含むことができる。また、管理サーバ２０及びストレージサーバ３０の各要素は、１つのサーバ装置にまとめられてもよいし、複数の装置に分けられてもよい。

以上、本発明の実施形態を説明したが、上記実施形態は例として提示したものであり、発明の範囲を限定することを意図するものではない。上記新規な実施形態はその他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で種々の省略、置き換え、変更を行うことができる。上記実施形態及びその変形は発明の範囲及び要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１ 画面共有システム
１０ 画像表示装置
２０ 管理サーバ
３０ ストレージサーバ
１５１ 取得部
１５２ 判定部
１５３ 送信制御部
１５３１ 第１送信部
１５３２ 第２送信部
１５５ 受信制御部
１５５１ 第１受信部
１５５２ 第２受信部
１５６ 表示制御部
Ｍ１ 第１記憶媒体
Ｍ２ 第２記憶媒体

特許第６１１５１９４号公報

Claims (11)

1. ネットワーク接続された第１情報処理装置と第２情報処理装置との間で画面共有を行う画面共有システムであって、
   前記第１情報処理装置は、
   自装置の表示画面に表示される画像を画面共有情報として取得する取得部と、
   前記画面共有情報のデータ量が閾値未満の場合に、前記画面共有情報を前記ネットワークに接続された第１サーバに送信する第１送信部と、
   前記画面共有情報のデータ量が閾値以上の場合に、前記画面共有情報を前記ネットワークに接続された第２サーバに送信し、当該第２サーバでの前記画面共有情報の保存先を示す保存先情報を前記第１サーバに送信する第２送信部と、
   を備え、
   前記第２情報処理装置は、
   前記第１サーバから前記第１情報処理装置が送信した前記画面共有情報又は前記保存先情報を受信する第１受信部と、
   前記第１受信部が受信した前記保存先情報に基づき、前記第２サーバから前記画面共有情報を受信する第２受信部と、
   前記第１受信部又は前記第２受信部が受信した前記画面共有情報に基づく画像を自装置の表示画面に表示させる表示制御部と、
   を備える画面共有システム。
2. 前記表示制御部は、前記第１受信部が前記保存先情報を受信した場合に、未表示の画像が存在することを報知する報知情報を表示させる請求項１に記載の画面共有システム。
3. 前記第２送信部は、前記保存先情報とともに当該保存先情報が示す保存先に保存された前記画面共有情報の画像に関する属性情報を、前記第１サーバを介して前記第２情報処理装置に提供し、
   前記表示制御部は、前記第２受信部が受信した前記属性情報に基づき、前記報知情報を表示する請求項２に記載の画面共有システム。
4. 前記第２送信部は、前記属性情報として、前記第１情報処理装置の表示画面上において前記画像が表示された表示領域を指定する情報を、前記第１サーバを介して前記第２情報処理装置に提供し、
   前記表示制御部は、前記属性情報に基づき、前記第２情報処理装置の表示画面上における前記画像の表示領域を報知する請求項３に記載の画面共有システム。
5. 前記第２受信部は、前記保存先情報が示す保存先へのアクセスが指示されたことを条件に、前記第２サーバから前記画面共有情報の受信を開始する請求項１〜４の何れか一項に記載の画面共有システム。
6. ネットワーク接続された他の情報処理装置との間で画面共有を行う画面共有元の情報処理装置であって、
   自装置の表示画面に表示される画像を画面共有情報として取得する取得部と、
   前記画面共有情報のデータ量が閾値未満の場合に、前記画面共有情報を前記ネットワークに接続された第１サーバに送信し、当該第１サーバを介して前記画面共有情報を前記他の情報処理装置に提供する第１送信部と、
   前記画面共有情報のデータ量が閾値以上の場合に、前記画面共有情報を前記ネットワークに接続された第２サーバに送信し、当該第２サーバでの前記画面共有情報の保存先を示す保存先情報を、前記第１サーバを介して前記他の情報処理装置に提供する第２送信部と、
   を備える情報処理装置。
7. ネットワーク接続された他の情報処理装置との間で画面共有を行う画面共有先の情報処理装置であって、
   前記ネットワークに接続された第１サーバを介して、前記他の情報処理装置の表示画面に表示された画像を表す画面共有情報又は当該画面共有情報の保存先を示す保存先情報を受信する第１受信部と、
   前記第１受信部が受信した前記保存先情報に基づき、前記ネットワークに接続された第２サーバから前記画面共有情報を受信する第２受信部と、
   前記第１受信部又は前記第２受信部が受信した前記画面共有情報に基づく画像を自装置の表示画面に表示させる表示制御部と、
   を備える情報処理装置。
8. ネットワーク接続された他の情報処理装置と画面共有を行う画面共有元の情報処理装置で実行される画面共有方法であって、
   取得部が、自装置の表示画面に表示される画像を画面共有情報として取得する取得ステップと、
   第１送信部が、前記画面共有情報のデータ量が閾値未満の場合に、前記画面共有情報を前記ネットワークに接続された第１サーバに送信し、当該第１サーバを介して前記画面共有情報を前記他の情報処理装置に提供する第１送信ステップと、
   第２送信部が、前記画面共有情報のデータ量が閾値以上の場合に、前記画面共有情報を前記ネットワークに接続された第２サーバに送信し、当該第２サーバでの前記画面共有情報の保存先を示す保存先情報を、前記第１サーバを介して前記他の情報処理装置に提供する第２送信ステップと、
   を含む画面共有方法。
9. ネットワーク接続された他の情報処理装置と画面共有を行う画面共有先の情報処理装置で実行される画面共有方法であって、
   第１受信部が、前記ネットワークに接続された第１サーバを介して、前記他の情報処理装置の表示画面に表示された画像を表す画面共有情報又は当該画面共有情報の保存先を示す保存先情報を受信する第１受信ステップと、
   第２受信部が、前記第１受信部が受信した前記保存先情報に基づき、前記ネットワークに接続された第２サーバから前記画面共有情報を受信する第２受信ステップと、
   表示制御部が、前記第１受信部又は前記第２受信部が受信した前記画面共有情報に基づく画像を自装置の表示画面に表示させる表示制御ステップと、
   を含む画面共有方法。
10. ネットワーク接続された他の情報処理装置と画面共有を行う画面共有元の情報処理装置のコンピュータを、
    自装置の表示画面に表示される画像を画面共有情報として取得する取得部と、
    前記画面共有情報のデータ量が閾値未満の場合に、前記画面共有情報を前記ネットワークに接続された第１サーバに送信し、当該第１サーバを介して前記画面共有情報を前記他の情報処理装置に提供する第１送信部と、
    前記画面共有情報のデータ量が閾値以上の場合に、前記画面共有情報を前記ネットワークに接続された第２サーバに送信し、当該第２サーバでの前記画面共有情報の保存先を示す保存先情報を、前記第１サーバを介して前記他の情報処理装置に提供する第２送信部と、
    して機能させるためのプログラム。
11. ネットワーク接続された他の情報処理装置と画面共有を行う画面共有先の情報処理装置のコンピュータを、
    前記ネットワークに接続された第１サーバを介して、前記他の情報処理装置の表示画面に表示された画像を表す画面共有情報又は当該画面共有情報の保存先を示す保存先情報を受信する第１受信部と、
    前記第１受信部が受信した前記保存先情報に基づき、前記ネットワークに接続された第２サーバから前記画面共有情報を受信する第２受信部と、
    前記第１受信部又は前記第２受信部が受信した前記画面共有情報に基づく画像を自装置の表示画面に表示させる表示制御部と、
    して機能させるためのプログラム。

Images