JP2021022041A - 通信端末、通信システム、表示制御方法およびプログラム - Google Patents

Abstract

【課題】他の通信端末との間で共有して表示される表示画面に対して特定の操作を実行する際の利用者の利便性を向上させることを目的とする。【解決手段】電子黒板１ｂは、電子黒板１ａとの間で共有されるデータを管理する通信管理装置５から、電子黒板１ａに描画された表示画面に係る表示画面データを受信し、受信された表示画面データに係る表示画面をディスプレイ１８０に表示させ、表示部に表示された表示画面に含まれている画像に対して実行された操作に関する操作情報を記憶する。また、電子黒板１ｂは、ストローク画像に対する特定の操作の実行を要求する操作実行要求を受け付け、記憶された操作情報に基づいて操作実行要求に係る特定の操作の実行可否を判定し、特定の操作を実行できないと判定された場合、特定の操作を実行できないことを示す操作実行不可画像２７０を、表示部に表示させる。【選択図】図２３

Description

本発明は、通信端末、通信システム、表示制御方法およびプログラムに関する。

インターネット等の通信ネットワークを介して遠隔地との間で通信する通信システムが普及している。当該通信システムとしては、例えば、遠隔会議を行う会議システムが挙げられる。一般的な会議システムにおいて、遠隔会議を行う当事者の一方が利用する通信端末側で保持または表示中の画像データを、通信ネットワークを介して当事者の他方が利用する通信端末に送信することで、画像データを共有することができる（特許文献１参照）。これにより、実際の会議に近い状態で遠隔地との会議を行うことができる。

また、企業や教育機関、行政機関等における会議等において、ディスプレイに画像を表示させ、この画像の上に、利用者が、文字、数字および図形等のストローク画像を描画する電子黒板等の通信端末が利用されている（特許文献２参照）。このストローク画像は、通信端末が利用者により電子ペンや手でディスプレイ上に接触して移動させることで描いた内容を電子的に変換して、座標データ等のストロークデータを生成することによって描画される。さらに、一方の通信端末でストローク画像が描画された場合、このストローク画像を再生するためのストロークデータが通信ネットワークを介して他方の通信端末に送信されることで、他方の通信端末でも同じストローク画像が表示される。

さらに、エンドユーザからの要求を実現するリクエスタの要求に応じて処理を行う環境で、複数のプロバイダにより提供される処理のＵｎｄｏ処理およびＲｅｄｏ処理を行う方法が開示されている（特許文献３参照）。

しかしながら、従来の方法では、上述したような複数の通信端末の間で表示画面を共有するシステムにおいて、例えば、通信端末の利用者が入力したストロークを他の通信端末の利用者が削除した後に、ストロークを入力した利用者がＵｎｄｏ操作を要求しても表示画面上では何も起こらない。これは、操作対象であるストロークが他の通信端末によって削除されたためであるが、Ｕｎｄｏ操作を要求した利用者は、その原因がわからなかった。このように、他の通信端末との間で共有して表示される表示画面に対して特定の操作を実行する際の利用者の利便性を改善する余地があるという課題があった。

上述した課題を解決すべく、請求項１に係る発明は、他の通信端末との間においてデータを共有する通信端末であって、前記他の通信端末との間で共有されるデータを管理する通信管理装置から、前記他の通信端末に描画された表示画面に係る表示画面データを受信する受信手段と、受信された前記表示画面データに係る表示画面を表示部に表示させる表示制御手段と、前記表示部に表示された表示画面に含まれている画像に対して実行された操作に関する操作情報を記憶する記憶手段と、前記画像に対する特定の操作の実行を要求する操作実行要求を受け付ける受付手段と、記憶された前記操作情報に基づいて、前記操作実行要求に係る特定の操作の実行可否を判定する判定手段と、を備え、前記画像に対する特定の操作を実行できないと判定された場合、前記表示制御手段は、前記特定の操作を実行できないことを示すメッセージを、前記表示部に表示させる通信端末である。

本発明によれば、他の通信端末との間で共有して表示される表示画面に対して特定の操作を実行する際の利用者の利便性を向上させることができるいう効果を奏する。

実施形態に係る通信システムにおける通信ルートの一例を示した概略図である。 実施形態に係る電子黒板の使用イメージについて説明するための図である。 実施形態に係る電子黒板のハードウエア構成の一例を示す図である。 実施形態に係る通信管理装置、中継装置および画像保存装置のハードウエア構成の一例を示す図である。 実施形態に係る通信システムのシステム構成の一例を示す図である。 実施形態に係る通信システムの機能構成の一例を示す図である。 実施形態に係る描画画面情報の一例を概略的に説明するための図である。 実施形態に係る操作情報管理ＤＢの一例を概略的に説明するための図である。 実施形態に係る操作情報の一例を概略的に説明するための図である。 （Ａ）は実施形態に係る認証管理テーブルの一例を示す概念図であり、（Ｂ）は実施形態に係る端末管理テーブルの一例を示す概念図である。 （Ａ）は実施形態に係る宛先リスト管理テーブルの一例を示す概念図であり、（Ｂ）は実施形態に係るセッション管理テーブルの一例を示す概念図であり、（Ｃ）は実施形態に係る中継装置管理テーブルの一例を示す概念図である。 実施形態に係る描画画面情報管理テーブルの一例を示す概念図である。 電子黒板間で遠隔通信を開始する準備段階の処理の一例を示すシーケンス図である。 電子黒板に表示される宛先リスト画面の一例を示す図である。 遠隔通信を開始する処理の一例を示すシーケンス図である。 実施形態に係るストロークデータの共有処理に一例を示すシーケンス図である。 実施形態に係る電子黒板において、描画画面に対する操作の再実行処理の一例を示すフローチャートである。 実施形態に係る電子黒板に表示される描画画面の一例を示す図である。 （Ａ）は実施形態に係る電子黒板においてＵｎｄｏ処理が実行された際に表示される描画画面の一例を示す図であり、（Ｂ）は実施形態に係る電子黒板においてＵｎｄｏ処理が実行された際の操作情報管理ＤＢの状態を概略的に説明するための図である。 （Ａ）は実施形態に係る電子黒板においてＲｅｄｏ処理が実行された際に表示される描画画面の一例を示す図であり、（Ｂ）は実施形態に係る電子黒板においてＲｅｄｏ処理が実行された際の操作情報管理ＤＢの状態を概略的に説明するための図である。 実施形態に係る通信システムにおいて、複数の電子黒板の間で操作が競合した場合における描画画面の表示処理の一例を示すシーケンス図である。 実施形態に係る電子黒板において操作が実行された場合の描画画面の一例を示す図である。 実施形態に係る電子黒板における描画画面に対する操作の実行可否の判定処理の一例を示すフローチャートである。 実施形態に係る電子黒板に表示される操作実行不可画像の一例を示す図である。

以下、図面を参照しながら、発明を実施するための形態を説明する。なお、図面の説明において同一要素には同一符号を付し、重複する説明は省略する。

●通信システムの概略●
●通信ルート
まず、図１を用いて、複数の電子黒板１ａ，１ｂ間で描画しながらビデオ会議を行なうための通信システムについて説明する。図１は、実施形態に係る通信システムにおける通信ルートの一例を示した概略図である。なお、「ビデオ会議」は、「テレビ会議」、「遠隔会議」等と呼ばれる場合もある。また、「ビデオ会議」「テレビ会議」または「遠隔会議」の会議は、複数の端末の間で画像データおよびストロークデータを共有するセッションの一例である。例えば、画像データおよびストロークデータを共有するセッションは、遠隔授業、遠隔診察、打ち合わせ、単なる会話等を行う、会議以外のセッションであってもよい。また、画像データおよびストロークデータを共有するセッションは、一方向での情報の提示に使用されてもよい。

通信システムは、複数の電子黒板１ａ，１ｂ、中継装置３、通信管理装置５および画像保存装置７によって構築されている。電子黒板１ａ，１ｂは、通話用の画像データおよび音データ、並びに、共有用の画像データおよびストロークデータ等のコンテンツデータの相互通信を行う。ストロークデータには、ストローク画像を再生(再現)するために必要なデータであり、座標データ、線の幅データ、線の色データ、ベクトルデータ等が含まれている。また、ストロークデータは、電子黒板１ａ，１ｂによってシリアライズされた文字列として送受信される。電子黒板１ａ，１ｂは、通話用の画像データおよび音データの送受信により、相手側の拠点の拠点画像および音を再生することで、遠隔ビデオ通話が可能となる。

電子黒板１ａ，１ｂは、共有用の資料画像の画像データを送受信することにより、通信システムを利用する参加者が、同じ資料画像を共有することができる。資料画像は、電子黒板１のディスプレイに表示される画像であり、会議の資料、ディスプレイに表示される背景画像等の画像である。資料画像の画像データは、例えば、ＪＰＥＧ（Joint Photographic Experts Group）等のファイル形式で送受信される。また、電子黒板１ａ，１ｂは、共有用のストローク画像のストロークデータを送受信することにより、通信システムを利用する参加者が、同じストローク画像を共有することができる。ストローク画像は、利用者によって電子ペン等で手書きストロークにより描画された線等を示す画像である。ストローク画像は、ディスプレイ上の座標を特定する点を示すストロークデータによって表示される。

なお、通信システムは、２つの電子黒板１ａ，１ｂに限らず、３つ以上の電子黒板によって構築されてもよい。以降、電子黒板１ａ，１ｂの総称を示す場合は、「電子黒板１」と示す。また、電子黒板１は、通信機能、描画機能および表示機能等を備える通信端末の一例である。通信端末は、例えば、通信システムに対応するアプリケーションプログラムがインストールされたＰＣ（Personal Computer）、スマートフォン、タブレット端末、スマートウォッチ、カーナビゲーション端末、ゲーム機またはテレプレゼンスロボット等であってもよい。さらに、通信端末は、医療機器であってもよい。医療機器の場合には、資料画像が患者の画像となる。

図１では、電子黒板１ａ，１ｂの一例としてビデオ会議機能が搭載された電子黒板が示されている。なお、拠点画像データに係る拠点画像は、動画であっても静止画であってもよい。

また、ビデオ会議の開始を要求する要求元としての電子黒板は「開始端末」と表され、要求先である宛先（中継先）としての電子黒板は「宛先端末」と表されている。図１では、電子黒板１ａが開始端末として、電子黒板１ｂが宛先端末として表されている。ただし、電子黒板１ｂからビデオ会議の開始を要求する場合は、電子黒板１ｂが開始端末となり、電子黒板１ａが宛先端末となる。なお、各電子黒板１ａ，１ｂは、複数の事業所間での通信や、同じ事業所内の異なる部屋間での通信だけでなく、同じ部屋内での通信や、屋外と屋内または屋外と屋外での通信で使われてもよい。

中継装置３は、コンピュータによって構成され、複数の電子黒板１ａ，１ｂ間で、通話用のコンテンツデータを中継する処理を行なう。

通信管理装置５は、コンピュータによって構成され、電子黒板１ａ，１ｂからのログイン認証、電子黒板１ａ，１ｂの通信状況の管理、宛先リストの管理、および中継装置３の通信状況等を一元的に管理する。また、通信管理装置５は、複数の電子黒板１ａ，１ｂ間で、共有用のストロークデータを中継する。

画像保存装置７は、コンピュータによって構成され、電子黒板１ａからアップロードされた共有用の資料画像の画像データを保存して、電子黒板１ｂにダウンロードする。また、この逆も実行される。すなわち、画像保存装置７は、電子黒板１ｂからアップロードされた画像データを保存して、電子黒板１ａにダウンロードする。

なお、中継装置３、通信管理装置５および画像保存装置７は、それぞれが単一のコンピュータによって構築されてもよいし、各装置の各部（機能または手段）を分割して任意に割り当てられた複数のコンピュータによって構築されていてもよい。ここで、通信管理装置５と画像保存装置７は、複数の電子黒板１ａ，１ｂ間で共有されるデータを管理するサーバシステム６を構成する。このサーバシステム６は、通信管理装置５および画像保存装置７の各部（機能または手段）を備える単一のコンピュータによって構成されてもよい。また、画像保存装置７は、通信管理装置５に変わり、複数の電子黒板１ａ，１ｂ間で、共有用のストロークデータを中継する構成であってもよい。

また、通信システムにおいて、電子黒板１ａ，１ｂとの間では、通信管理装置５を介して、各種の管理情報を送受信するための管理情報用セッションｓｅｉが確立される。また、電子黒板１ａ，１ｂとの間では、中継装置３を介して、高解像度の拠点画像データ、中解像度の拠点画像データ、低解像度の拠点画像データ、および音データの４つの各データを送受信するための４つのセッションが確立される。図１では、これら４つのセッションをまとめて、画像・音データ用セッションｓｅｄとして示している。なお、画像・音データ用セッションｓｅｄは、必ずしも４つのセッションである必要はなく、４つのセッション数より少ないまたは多いセッション数であってもよい。また、開始端末と宛先端末との間で、中継装置３を介さずに、直接、通信セッションを確立してもよい。さらに、通信システムにおいて、通信管理装置５が中継装置３の機能を有しており、通信管理装置５を介して電子黒板１ａ，１ｂとの間の画像・音データ用セッションｓｅｄが確立されてもよい。

さらに、通信システムにおいて、電子黒板１ａ，１ｂとの間では、管理情報用セッションｓｅｉを利用して、ストロークデータの送受信を行うことができる。

ここで、本実施形態で扱われる拠点画像データの画像の解像度について説明する。低解像度の拠点画像データは、例えば、横が１６０画素、縦が１２０画素から成り、ベース画像となる。中解像度の拠点画像データは、横が３２０画素、縦が２４０画素から成る。高解像度の拠点画像データは、例えば、横が６４０画素、縦が４８０画素から成る。このうち、狭帯域経路を経由する場合には、ベース画像となる低解像度の拠点画像データのみから成る低画質の画像データが中継される。帯域が比較的広い場合には、ベース画像となる低解像度の拠点画像データ、および中解像度の拠点画像データから成る中画質の画像データが中継される。また、帯域が非常に広い場合には、ベース画像となる低解像度の拠点画像データ、中解像度の拠点画像データ、および高解像度の拠点画像データから成る高画質の画像データが中継される。音データは、拠点画像データに比べてデータ量が少ないため、狭帯域経路であっても中継される。

●電子黒板の使用イメージ
図２は、実施形態に係る電子黒板の使用イメージについて説明するための図である。電子黒板１は、図２に示されているように、電子黒板１は、下部側に複数のキャスタが設けられた脚部１５１、脚部１５１の上部側に設けられた支柱１５２、支柱１５２上部側に設けられた電子黒板１の本体１５３、および本体１５３の前面に設けられたディスプレイ１８０によって構成されている。本体１５３には、後述のＣＰＵ１０１等が内蔵されている。そして、利用者は、電子ペン１９０を用いて、ディスプレイ１８０に文字等のストローク画像を入力（描画）することができる。

●ハードウエア構成●
次に、図３および図４を用いて、通信システムを構成する各装置または端末のハードウエア構成について説明する。なお、図３および図４に示されているハードウエア構成は、必要に応じて構成要素が追加または削除されてもよい。

●電子黒板のハードウエア構成
図３は、実施形態に係る電子黒板のハードウエア構成の一例を示す図である。図３に示されているように、電子黒板１は、ＣＰＵ(Central Processing Unit)１０１、ＲＯＭ(Read Only Memory)１０２、ＲＡＭ(Random Access Memory)１０３、ＳＳＤ(Solid State Drive)１０４、ネットワークＩ／Ｆ(Interface)１０５、および外部機器接続Ｉ／Ｆ１０６を備えている。

これらのうち、ＣＰＵ１０１は、電子黒板１全体の動作を制御する。ＲＯＭ１０２は、ＣＰＵ１０１やＩＰＬ(Initial Program Loader)等のＣＰＵ１０１の駆動に用いられるプログラムを記憶する不揮発性のメモリである。ＲＡＭ１０３は、ＣＰＵ１０１のワークエリアとして使用される揮発性のメモリである。ＳＳＤ１０４は、電子黒板用のプログラム等の各種データを記憶する大容量の記憶装置である。ネットワークＩ／Ｆ１０５は、電子黒板１を通信ネットワーク１００に接続し、通信を行うための通信インターフェースである。外部機器接続Ｉ／Ｆ１０６は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢ(Universal Serial Bus)メモリ１３０、外付け機器（マイク１４０、スピーカ１５０、カメラ１６０）である。

また、電子黒板１は、キャプチャデバイス１１１、ＧＰＵ(Graphics Processing Unit)１１２、ディスプレイコントローラ１１３、接触センサ１１４、センサコントローラ１１５、電子ペンコントローラ１１６、近距離通信回路１１９、近距離通信回路１１９のアンテナ１１９ａ、電源スイッチ１２２および選択スイッチ類１２３を備えている。

これらのうち、キャプチャデバイス１１１は、外付けのＰＣ１７０のディスプレイ等に対して画像データ（画像情報）を静止画または動画として表示させる。ＧＰＵ１１２は、グラフィクスを専門に扱う半導体チップ（プロセッサ）である。ディスプレイコントローラ１１３は、ＧＰＵ１１２からの出力画像をディスプレイ１８０等へ出力するために画面表示の制御および管理を行う。接触センサ１１４は、ディスプレイ１８０上に電子ペン１９０や利用者の手Ｈ等が接触したことを検知する。センサコントローラ１１５は、接触センサ１１４の処理を制御する。接触センサ１１４は、赤外線遮断方式による座標の入力および座標の検出を行う。この座標の入力および座標の検出する方法は、ディスプレイ１８０の上側両端部に設置された２つ受発光装置が、ディスプレイ１８０に平行して複数の赤外線を放射し、ディスプレイ１８０の周囲に設けられた反射部材によって反射されて、受光素子が放射した光の光路と同一の光路上を戻って来る光を受光する方法である。接触センサ１１４は、物体によって遮断された２つの受発光装置が放射した赤外線のＩＤをセンサコントローラ１１５に出力し、センサコントローラ１１５が、物体の接触位置である座標位置を特定する。電子ペンコントローラ１１６は、電子ペン１９０と通信することで、ディスプレイ１８０へのペン先のタッチやペン尻のタッチの有無を判断する。近距離通信回路１１９は、ＮＦＣ(Near Field Communication)やＢｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。電源スイッチ１２２は、電子黒板１の電源のＯＮ／ＯＦＦを切り換えるためのスイッチである。選択スイッチ類１２３は、例えば、ディスプレイ１８０の表示の明暗や色合い等を調整するためのスイッチ群である。

さらに、電子黒板１は、バスライン１１０を備えている。バスライン１１０は、図３に示されているＣＰＵ１０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

なお、接触センサ１１４は、赤外線遮断方式に限らず、静電容量の変化を検知することにより接触位置を特定する静電容量方式のタッチパネル、対向する２つの抵抗膜の電圧変化によって接触位置を特定する抵抗膜方式のタッチパネル、接触物体が表示部に接触することによって生じる電磁誘導を検知して接触位置を特定する電磁誘導方式のタッチパネル等の種々の検出手段を用いてもよい。また、電子ペンコントローラ１１６が、電子ペン１９０のペン先およびペン尻だけでなく、電子ペン１９０の利用者が握る部分や、その他の電子ペンの部分のタッチの有無を判断するようにしてもよい。

●通信管理装置、中継装置、および画像保存装置のハードウエア構成
図４は、実施形態に係る通信管理装置、中継装置および画像保存装置のハードウエア構成の一例を示す図である。通信管理装置５の一例としてのコンピュータは、ＣＰＵ５０１、ＲＯＭ５０２、ＲＡＭ５０３、ＨＤ(Hard Disk)５０４、ＨＤＤ(Hard Disk Drive)コントローラ５０５、ディスプレイ５０６、外部機器接続Ｉ／Ｆ(Interface)５０８、ネットワークＩ／Ｆ５０９、キーボード５１１、ポインティングデバイス５１２、ＤＶＤ−ＲＷ(Digital Versatile Disk ReWritable)ドライブ５１４、メディアＩ／Ｆ５１６、およびバスライン５１０を備えている。

これらのうち、ＣＰＵ５０１は、通信管理装置５全体の動作を制御する。ＲＯＭ５０２は、ＩＰＬ等のＣＰＵ５０１の駆動に用いられるプログラムを記憶する不揮発性のメモリである。ＲＡＭ５０３は、ＣＰＵ５０１のワークエリアとして使用される揮発性のメモリである。ＨＤ５０４は、通信管理用プログラム等の各種データを記憶する大容量の記憶装置である。ＨＤＤコントローラ５０５は、ＣＰＵ５０１の制御にしたがってＨＤ５０４に対する各種データの読み出しまたは書き込みを制御する。ディスプレイ５０６は、カーソル、メニュー、ウィンドウ、文字、または画像等の各種情報を表示する。外部機器接続Ｉ／Ｆ５０８は、各種の外部機器を接続するためのインターフェースである。ネットワークＩ／Ｆ５０９は、インターネット等の通信ネットワーク１００を利用してデータ通信をするためのインターフェースである。キーボード５１１は、文字、数値、各種指示等の入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス５１２は、各種指示の選択や実行、処理対象の選択、カーソルの移動等を行う入力手段の一種である。ＤＶＤ−ＲＷドライブ５１４は、ＤＶＤ−ＲＷ５１３に対するデータの読み出しまたは書き込み（記憶）を制御する。なお、ＤＶＤ−ＲＷ５１３は、ＤＶＤ−Ｒ等であってもよい。また、ＤＶＤ−ＲＷドライブ５１４は、ＢＤ−ＲＥ(Blu-ray（登録商標） Disc Rewritable)またはＣＤ−ＲＷ(Compact Disc-ReWritable)等のディスクに対するデータの読み出しまたは書き込み（記憶）を制御するブルーレイドライブまたはＣＤ−ＲＷドライブ等であってもよい。メディアＩ／Ｆ５１６は、フラッシュメモリ等の記録メディア５１５に対するデータの読み出しまたは書き込み（記憶）を制御する。また、バスライン５１０は、図４に示されているＣＰＵ５０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

また、中継装置３は、一般的なコンピュータによって構築されており、図６に示されているように、ＣＰＵ３０１、ＲＯＭ３０２、ＲＡＭ３０３、ＨＤ３０４、ＨＤＤコントローラ３０５、ディスプレイ３０６、外部機器接続Ｉ／Ｆ３０８、ネットワークＩ／Ｆ３０９、キーボード３１１、ポインティングデバイス３１２、ＤＶＤ−ＲＷドライブ３１４、メディアＩ／Ｆ３１６およびバスライン３１０を備えている。これらは、それぞれ通信管理装置５におけるＣＰＵ５０１、ＲＯＭ５０２、ＲＡＭ５０３、ＨＤ５０４、ＨＤＤコントローラ５０５、ディスプレイ５０６、外部機器接続Ｉ／Ｆ５０８、ネットワークＩ／Ｆ５０９、キーボード５１１、ポインティングデバイス５１２、ＤＶＤ−ＲＷドライブ５１４、メディアＩ／Ｆ５１６、およびバスライン５１０と同様の構成であるため、説明を省略する。ただし、中継装置３の場合は、ＨＤ３０４に中継用プログラムが記憶されている。

さらに、画像保存装置７は、一般的なコンピュータによって構築されており、図６に示されているように、ＣＰＵ７０１、ＲＯＭ７０２、ＲＡＭ７０３、ＨＤ７０４、ＨＤＤコントローラ７０５、ディスプレイ７０６、外部機器接続Ｉ／Ｆ７０８、ネットワークＩ／Ｆ７０９、キーボード７１１、ポインティングデバイス７１２、ＤＶＤ−ＲＷドライブ７１４、メディアＩ／Ｆ７１６およびバスライン７１０を備えている。これらは、それぞれ通信管理装置５におけるＣＰＵ５０１、ＲＯＭ５０２、ＲＡＭ５０３、ＨＤ５０４、ＨＤＤコントローラ５０５、ディスプレイ５０６、外部機器接続Ｉ／Ｆ５０８、ネットワークＩ／Ｆ５０９、キーボード５１１、ポインティングデバイス５１２、ＤＶＤ−ＲＷドライブ５１４、メディアＩ／Ｆ５１６、およびバスライン５１０と同様の構成であるため、説明を省略する。また、画像保存装置７の場合は、ＨＤ７０４に画像保存用プログラムが記憶されている。

また、上記各プログラムは、インストール可能な形式または実行可能な形式のファイルで、コンピュータで読み取り可能な記録媒体に記録して流通させるようにしてもよい。記録媒体の例として、ＣＤ−Ｒ(Compact Disc Recordable)、ＤＶＤ、ブルーレイディスク、ＳＤカード等が挙げられる。また、記録媒体は、プログラム製品(Program Product)として、国内または国外へ提供されることができる。例えば、電子黒板１は、本発明に係るプログラムが実行されることで本発明に係る表示制御方法を実現する。

●通信システムの全体構成●
続いて、図５を用いて、通信システムの全体構成について説明する。図５は、実施形態に係る通信システムのシステム構成の一例を示す図である。

図５において、電子黒板１ａは拠点Ａ、電子黒板１ｂは拠点Ｂに設置されている。例えば、拠点Ａは日本の東京事業所で、拠点Ｂは中国の北京事業所等である。拠点Ａでは利用者Ａ１が電子黒板１ａを利用し、拠点Ｂでは利用者Ｂ１，Ｂ２が電子黒板１ｂを利用しているものとする。

さらに、電子黒板１ａ，１ｂ、中継装置３、通信管理装置５、および画像保存装置７は、例えば、インターネットやＬＡＮ（Local Area Network）等の通信ネットワーク１００を介して、相互にデータの送受信を行なうことができる。なお、通信ネットワーク１００には、有線だけでなく、Ｗｉ−Ｆｉ（登録商標）等の無線による通信が行われる箇所があってもよい。

●通信システムの機能構成●
次に、図６乃至図１２を用いて、本実施形態に係る通信システムの機能構成について説明する。図６は、実施形態に係る通信システムの機能構成の一例を示す図である。なお、図６では、図５に示されている各端末、装置およびサーバのうち、後述の処理または動作に関連しているものが示されている。

●電子黒板１の機能構成
まず、図６を用いて、電子黒板１ａ,１ｂの機能構成について説明する。なお、電子黒板１ａと電子黒板１ｂが有している機能は同様であるため、ここでは、電子黒板１が有している機能として説明する。電子黒板１は、送受信部１１、受付部１２、画像・音処理部１３、表示制御部１４、判断部１５、画像処理部１６、操作情報管理部１７、近距離通信部１８、操作実行可否判定部２１および記憶・読出処理部１９を有している。これら各部は、図３に示されている各構成要素のいずれかが、ＳＳＤ１０４からＲＡＭ１０３上に展開されたプログラムに従ったＣＰＵ１０１からの命令によって動作することで実現される機能、または機能する手段である。また、電子黒板１は、図３に示されているＲＡＭ１０３、ＳＳＤ１０４またはＵＳＢメモリ１３０によって構築される記憶部１０００を有している。

送受信部１１は、図３に示されているＣＰＵ１０１からの命令、およびネットワークＩ／Ｆ１０５によって実現され、通信ネットワーク１００を介して、他の端末、装置またはシステムと各種データ（または情報）の送受信を行う機能である。送受信部１１は、例えば、開始部としての役割も果たし、他の電子黒板１と通信を開始する処理を行う。また、送受信部１１は、例えば、他の電子黒板との間で、ディスプレイ１８０に表示させる描画画面データを、通信管理装置５を介して送受信する。送受信部１１は、受信手段の一例である。受付部１２は、図３に示されているＣＰＵ１０１からの命令、並びに接触センサ１１４および電子ペンコントローラ１１６によって実現され、利用者から電子ペン１９０等による各種入力を受け付ける。受付部１２は、受付手段の一例である。

画像・音処理部１３は、図３に示されているＣＰＵ１０１からの命令によって実現され、ビデオ会議機能の主な処理を行う。画像・音処理部１３は、例えば、マイク１４０の出力信号およびカメラ１６０の出力信号に共づき、拠点画像データおよび音データのエンコード等のデジタル処理を行う。また、画像・音処理部１３は、例えば、送受信部１１で受信された拠点画像データおよび音データに基づき、画像信号を生成したり音信号を生成したりする。さらに、画像・音処理部１３は、例えば、解像度の異なる拠点画像データを組み合わせる処理を行う。

表示制御部１４は、図３に示されているＣＰＵ１０１からの命令、および図３に示されているディスプレイコントローラ１１３によって実現され、ディスプレイ１８０に画像信号等を出力するための制御を行う機能である。表示制御部１４は、例えば、画像処理部１６によって生成された描画画面データに係る描画画面を、ディスプレイ１８０に表示させる。表示制御部１４は、表示制御手段の一例である。判断部１５は、図３に示されているＣＰＵ１０１からの命令によって実現され、各種判断を行う機能である。

画像処理部１６は、図３に示されているＣＰＵ１０１からの命令、およびキャプチャデバイス１１１によって実現され、電子黒板機能の主な処理を行う機能である。画像処理部１６は、例えば、受付部１２によって受け付けられた電子ペン１９０等のストロークに基づいてストロークデータおよびストローク画像を生成する。また、画像処理部１６は、例えば、送受信部１１によって受信されたストロークデータに基づいてストローク画像を生成する。さらに、画像処理部１６は、例えば、生成したストローク画像を含む描画画面データを生成する。

操作情報管理部１７は、図３に示されているＣＰＵ１０１からの命令によって実現され、電子黒板１に表示された描画画面に対して実行された操作に関する操作情報を管理する機能である。操作情報管理部１７は、例えば、電子黒板１によって実行された操作毎の操作情報を、操作情報管理ＤＢ１００３に記憶させて管理する。

近距離通信部１８は、図３に示されているＣＰＵ１０１からの命令、並びに近距離通信回路１１９およびアンテナ１１９ａによって実行され、ＩＣカードやスマートフォン等の近距離通信部を有する各端末との間で、近距離無線通信により、データの取得および提供を行なう機能である。

操作実行可否判定部２１は、図３に示されているＣＰＵ１０１からの命令によって実現され、電子黒板１によって受け付けられた操作実行要求に係る特定の操作の実行可否を判定する機能である。操作実行可否判定部２１は、例えば、操作情報管理ＤＢ１００３に記憶された操作情報に基づいて、操作実行要求に係る操作対象に対するＵｎｄｏ処理またはＲｅｄｏ処理が実行可能かどうかを判定する。操作実行可否判定部２１は、判定手段の一例である。

記憶・読出処理部１９は、図３に示されているＣＰＵ１０１からの命令によって実行され、記憶部１０００に各種データを記憶させ、または記憶部１０００から各種データを読み出す機能である。記憶部１０００には、他の端末との通信を行う際に受信される拠点画像データおよび音データが、受信される度に上書き記憶される。このうち、上書きされる前の拠点画像データによってディスプレイ１８０に画像が表示され、上書きされる前の音データによってスピーカ１５０から音声が出力される。さらに、記憶部１０００には、ディスプレイ１８０に描画されたストローク画像に係るストロークデータ、およびディスプレイ１８０に表示された資料画像に係る資料画像データが記憶される。

○描画画面情報
図７は、実施形態に係る描画画面情報の一例を概略的に説明するための図である。図７は、描画画面管理ＤＢ１００１に記憶されている電子黒板１に表示される描画画面の状態の一例のイメージを示している。

図７の例では、描画画面は、「会議」、「ページ（ページ１〜３）」、「ストローク（ストローク１〜５）」の階層構造を有している。「ストローク」は、実施形態に係るストロークデータに対応しており、「ページ」毎に管理されている。また、「ページ」とは、ディスプレイ１８０に表示された１ページの画像（表示画像）を示す。「ページ」を表すページデータには、対応するページに表示されているストロークデータおよび資料画像の画像データ等が含まれている。例えば、ストローク１には、ストローク１を識別するストロークＩＤ（ｉｄ＝ｓｒ００１）、親となるページ１を特定する情報（ｐａｒｅｎｔ＝ｐａｇ０１）、描画データ１を識別するｇｉｄ「ｇ００１」、および描画データ１等が含まれている。例えば、ストローク１が表すストローク画像に対して、移動等の操作が行われると、ストロークＩＤ（ｉｄ＝ｓｒ００１）は、そのまま引き継がれるが、描画データ１と描画データ１を識別するｇｉｄ「ｇ００１」は、更新される。描画データ１は、ストローク１を再現するための描画データである。描画データ１には、例えば、座標データ、線の幅データ、線の色データ、およびベクトルデータ等が含まれている。

電子黒板１は、ページの切り替えが可能であり、「ページ」は、電子黒板１の各ページに対応している。例えば、ページ１には、ページ１を識別するページＩＤ（ｉｄ＝ｐａｇ０１）、および親となる「会議」を特定するための情報（ｐａｒｅｎｔ＝ｍｔ０１）等の情報が含まれている。

「会議」は、通信システムが管理するセッションに対応しており、例えば、セッションを識別するセッションＩＤ（ｉｄ＝ｓｅ０１）等によって管理されている。例えば、電子黒板１の画像処理部１６は、ストローク１〜５に含まれている描画データ１〜５を用いて、ページ１に描画されたストローク画像を生成することができる。

○操作情報
ここで、図８および図９を用いて、電子黒板１で実行された描画画面に対する操作を示す操作情報について説明する。図８は、実施形態に係る操作情報管理ＤＢの一例を概略的に説明するための図である。操作情報管理ＤＢ１００３には、電子黒板１に表示される描画画面に対して実行された操作を示す操作情報が、実行された操作の種別毎のスタックに記憶されている。操作情報管理ＤＢ１００３には、描画画面に対するＵｎｄｏ処理が実行可能な操作を記憶するＵｎｄｏスタック、および描画画面に対するＲｅｄｏ処理が実行可能な操作を記憶するＲｅｄｏスタックが構築されている。ここで、Ｕｎｄｏとは、描画画面に対して直前に実行された操作を取り消すことで、それ以前の描画画面の状態に戻す操作である。また、Ｒｅｄｏとは、Ｕｎｄｏ操作によって取り消された操作をやり直して、描画画面を取り消し前の状態に戻す操作である。図８に示されている操作情報管理ＤＢ１００３は、例えば、描画画面に３つのストロークが描画されることによって、操作１〜操作３の操作が実行された場合のＵｎｄｏスタックおよびＲｅｄｏスタックの状態を示す。ＵｎｄｏスタックおよびＲｅｄｏスタックには、自らの端末（電子黒板）によって実行された操作に係る操作情報のみが記憶されている。また、操作情報は、電子黒板１によって該当する操作が実行された順で、各スタックに上から一列に蓄積される。操作情報管理ＤＢ１００３は、記憶手段の一例である。

図９は、実施形態に係る操作情報の一例を概略的に説明するための図である。図９に示されている操作情報は、図８に示されている操作３に対応する操作情報である。操作情報には、ストロークデータを識別するためのストロークＩＤ(Id)、ストロークデータが描画されたページを識別するためのページＩＤ（DistId）、描画画面に対して実行された操作の種類を示す操作種別情報(Operation Type)、操作対象となるデータの種別を示すデータ種別情報(Data Type)、操作対象となるデータの内容を示すデータ詳細情報(Date)が含まれている。このうち、操作種別情報には、描画画面に含まれているストロークやページに対して、利用者によって実行された操作の種類が示されている。例えば、操作対象がストロークである場合において、操作種別情報は、ストロークが描画されたときには「Ａｄｄ（追加）」、ストロークが削除されたときには「Ｒｅｍｏｖｅ（削除）」、ストロークが移動されたときには「Ｕｐｄａｔｅ」が示される。また、データ種別情報には、操作対象がストロークである場合には「Ｓｔｒｏｋｅ」、ページである場合には「Ｐａｇｅ」が示される。さらに、操作対象がストロークである場合において、データ詳細情報は、ストロークデータに対応し、座標データ、線の幅データ、線の色データ等の情報が含まれる。データ詳細情報は、後述する描画画面情報管理テーブル（図１２参照）に示されているｂｏｄｙの情報に対応している。なお、操作対象となるデータは、ストロークまたはページ単位に限られず、複数のストロークの集合であるオブジェクト単位であってもよい。このオブジェクトには、ストロークが文字もしくは数値等の記号としてＯＣＲ（Optical Character Reader）処理されたテキスト、日付もしくは時刻等のシステム生成文字、三角形、星もしくは円形等の予め定められた図形、または矢印、線分もしくはベジェ曲線等の線等が含まれる。

●中継装置の機能構成
続いて、図６を用いて、中継装置３の機能構成について説明する。中継装置３は、転送部を兼ねた送受信部３１、判断部３５および記憶・読出処理部３９を有している。これら各部は、図４に示されている各構成要素のいずれかが、ＨＤ３０４からＲＡＭ３０３上に展開された中継用プログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能、または機能する手段である。また、中継装置３は、図４に示されているＲＡＭ３０３、ＨＤ３０４または記録メディア３１５によって構築される記憶部３０００を有している。

送受信部３１は、図４に示されているＣＰＵ３０１からの命令、およびネットワークＩ／Ｆ３０９によって実現され、通信ネットワーク１００を介して、他の端末、装置またはシステムと各種データ（または情報）の送受信を行う機能である。また、送受信部３１は、転送部としての役割も果たし、所定の端末ら送信されて来た拠点画像データおよび音データを、他の端末に転送する。判断部３５は、図４に示されているＣＰＵ３０１からの命令によって実現され、データの遅延状態等の判断等の各種判断を行なう機能である。

記憶・読出処理部３９は、図４に示されているＣＰＵ３０１からの命令によって実行され、記憶部３０００に各種データを記憶させ、または記憶部３０００に記憶された各種データを読み出す機能である。

●通信管理装置の機能構成
続いて、図６を用いて、通信管理装置５の機能構成について説明する。通信管理装置５は、送受信部５１、認証部５２、判断部５３、端末管理部５４、セッション管理部５５、中継装置管理部５６、描画画面情報管理部５７および記憶・読出処理部５９を有している。これら各部は、図４に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３上に展開された通信管理用プログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能または機能する手段である。また、通信管理装置５は、図４に示されているＲＡＭ５０３、ＨＤ５０４または記録メディア５１５によって構築される記憶部５０００を有している。

送受信部５１は、図４に示されているＣＰＵ５０１からの命令、およびネットワークＩ／Ｆ５０９によって実現され、通信ネットワーク１００を介して、他の端末または装置と各種データ（または情報）の送受信を行う機能である。送受信部５１は、例えば、電子黒板１に対して、他の電子黒板１から送信されたストロークデータの送受信を行う。

認証部５２は、図４に示されているＣＰＵ５０１からの命令によって実現され、ログイン要求元の認証を行う機能である。認証部５２は、送受信部５１によってログイン要求情報を受信した場合、認証管理ＤＢ５００１を用いて、ログイン要求元の認証処理を実行する。判断部５３は、図４に示されているＣＰＵ５０１からの命令によって実現され、各種判断を行う機能である。

端末管理部５４は、図４に示されているＣＰＵ５０１からの命令によって実現され、電子黒板１の状態に応じて、端末管理ＤＢ５００２で管理されている電子黒板１に関する各種情報を管理する機能である。端末管理部５４は、例えば、端末管理ＤＢ５００２における稼動状態、受信日時、端末のＩＰアドレス等の情報を更新する。また、端末管理部５４は、宛先リスト管理ＤＢ５００３を管理し、電子黒板１からの要求に応じて、宛先リスト管理ＤＢ５００３で管理されている宛先端末の端末ＩＤを含む宛先リスト情報を提供する。

セッション管理部５５は、図４に示されているＣＰＵ５０１からの命令によって実現され、通信システムで開催されるセッションを管理する機能である。セッション管理部５５は、例えば、電子黒板１から通信の開始を要求する開始要求情報に応じて、セッションを識別するためのセッションＩＤを生成する。また、セッション管理部５５は、例えば、セッションＩＤに対応づけて、セッションに関する各種情報をセッション管理ＤＢ５００４に記憶させて管理する。

中継装置管理部５６は、図４に示されているＣＰＵ５０１からの命令によって実現され、複数の中継装置３からセッションの中継に用いる中継装置３を選択する機能である。中継装置管理部５６は、例えば、中継装置管理ＤＢ５００５を管理し、中継装置管理ＤＢ５００５に記憶されている各中継装置３に関する各種情報を用いて、中継装置３を選択する。中継装置管理部５６は、例えば、中継装置管理ＤＢ５００５に記憶されている各中継装置３のＩＰアドレスと、開始端末のＩＰアドレスとから、開始端末の近くにある中継装置３を選択する。また、中継装置管理部５６は、例えば、中継装置管理ＤＢ５００５に記憶されている各中継装置３の最大データ伝送速度等に基づいて、中継装置３を選択する。なお、本実施形態では、セッションの中継に用いる中継装置３の選択方法は任意の方法であって良い。また、通信システムが有する中継装置３の数は、一つであってもよい。

描画画面情報管理部５７は、図４に示されているＣＰＵ５０１からの命令によって実現され、各電子黒板１（通信端末）の間で送受信される描画画面に関する各種データを管理する機能である。描画画面情報管理部５７は、例えば、セッションに参加している電子黒板１から、セッションｓｅｉで送信されるストロークデータを、セッションＩＤと関連づけて、描画画面情報管理ＤＢ５００６に記憶して管理する。

記憶・読出処理部５９は、図４に示されているＣＰＵ５０１からの命令によって実行され、記憶部５０００に各種データを記憶させ、または記憶部５０００に記憶された各種データを読み出す機能である。

○認証管理テーブル
図１０（Ａ）は、実施形態に係る認証管理テーブルの一例を示す概念図である。記憶部５０００には、図１０（Ａ）に示されているような認証管理テーブルによって構成されている認証管理ＤＢ５００１が構築されている。この認証管理テーブルでは、通信管理装置５によって管理される全ての電子黒板１の各端末ＩＤに対して、各パスワードが関連づけられて管理される。例えば、図１０（Ａ）に示されている認証管理テーブルにおいて、電子黒板１ａ（通信端末）の端末ＩＤは「０１ａａ」で、パスワードは「ａａａａ」であることが示されている。なお、パスワードは認証情報の一例であり、認証情報にはアクセストークンも含まれる。

○端末管理テーブル
図１０（Ｂ）は、実施形態に係る端末管理テーブルの一例を示す概念図である。記憶部５０００には、図１０（Ｂ）に示されているような端末管理テーブルによって構成されている端末管理ＤＢ５００２が構築されている。この端末管理テーブルでは、各電子黒板１（通信端末）を識別するための端末ＩＤ毎に、各電子黒板１を宛先とした場合の宛先名、各電子黒板１の稼動状態、後述のログイン要求情報が通信管理装置５で受信された受信日時、および各電子黒板１（通信端末）のＩＰアドレスが関連づけられて管理される。例えば、図１０（Ｂ）に示されている端末管理テーブルにおいて、端末ＩＤが「０１ａａ」の電子黒板１ａは、端末名が「日本 東京事業所 ＡＡ端末」で、稼動状態が「ＯＮライン（通信可能）」で、通信管理装置５でログイン要求情報が受信された日時が「２０１９年２月１０日の１３時４０分」で、この端末１ａａのＩＰアドレスが「１．２．１．３」であることが示されている。なお、端末ＩＤ、宛先名、および端末のＩＰアドレスは、各電子黒板１が、通信管理装置５によるサービスの提供を受けるために事前登録する際に記憶される。

○宛先リスト管理テーブル
図１１（Ａ）は、実施形態に係る宛先リスト管理テーブルの一例を示す概念図である。記憶部５０００には、図１１（Ａ）に示されているような宛先リスト管理テーブルによって構成されている宛先リスト管理ＤＢ５００３が構築されている。この宛先リスト管理テーブルでは、通信の開始を要求する電子黒板１（開始端末）の端末ＩＤに対して、電子黒板１（宛先端末）の候補として登録されている宛先端末の端末ＩＤが全て関連づけられて管理される。例えば、図１１（Ａ）に示されている宛先リスト管理テーブルにおいて、端末ＩＤが「０１ａａ」である開始端末（電子黒板１ａ）から通信の開始を要求することができる宛先端末の候補は、端末ＩＤが「０１ｂａ」の電子黒板１ｂ等であることが示されている。この宛先端末の候補は、任意の開始端末から通信管理装置５に対する追加または削除の要請により、追加または削除されることで更新される。

なお、宛先リストは、宛先情報の一例であり、宛先情報には、リスト形式になっておらず、端末ＩＤ等の宛先に関する情報が羅列されていてもよい。

○セッション管理テーブル
図１１（Ｂ）は、実施形態に係るセッション管理テーブルの一例を示す概念図である。記憶部５０００には、図１１（Ｂ）に示されているようなセッション管理テーブルによって構成されているセッション管理ＤＢ５００４が構築されている。このセッション管理テーブルでは、各電子黒板１（通信端末）と中継装置３との間で相互通信を行なうためのセッションを識別するためのセッションＩＤ毎に、使用される中継装置３の中継装置ＩＤ、電子黒板１（開始端末）の端末ＩＤ、電子黒板１（宛先端末）の端末ＩＤ、宛先端末において拠点画像データが受信される際の受信の遅延時間（ｍｓ）、およびこの遅延時間が示されている遅延情報を宛先端末から送られて来て通信管理装置５で受信された受信日時が関連づけられて管理される。例えば、図１１（Ｂ）に示されているセッション管理テーブルにおいて、セッションＩＤ「ｓｅ０１」を用いて実行された通信セッションで、中継装置（中継装置ＩＤ「１１１ａ」）は、端末ＩＤが「０１ａａ」の電子黒板と、端末ＩＤが「０１ｄｂ」の電子黒板との間で、拠点画像データおよび音データを中継しており、電子黒板（宛先端末）において「２０１９年２月１０日の１３時４１分」時点における拠点画像データの遅延時間が２００（ｍｓ）であることが示されている。

○中継装置管理テーブル
図１１（Ｃ）は、実施形態に係る中継装置管理テーブルの一例を示す概念図である。記憶部５０００には、図１１（Ｃ）に示されているような中継装置管理テーブルによって構成されている中継装置管理ＤＢ５００５が構築されている。この中継装置管理テーブルでは、中継装置３の中継装置ＩＤ毎に、各中継装置３の稼動状態、稼動状態が示される状態情報が通信管理装置５で受信された受信日時、中継装置３のＩＰアドレス、および、中継装置３における最大データ伝送速度（Ｍｂｐｓ）が関連づけられて管理される。例えば、図１１（Ｃ）に示されている中継装置管理テーブルにおいて、中継装置ＩＤが「１１１ａ」の中継装置３は、稼動状態が「ＯＮライン」で、通信管理装置５で状態情報が受信された日時が「２０１９年２月１０日の１３時３０分」で、この中継装置３のＩＰアドレスが「１．２．１．２」で、この中継装置３における最大データ伝送速度が１００Ｍｂｐｓであることが示されている。

○描画画面情報管理テーブル
図１２は、実施形態に係る描画画面情報管理テーブルの一例を示す概念図である。記憶部５０００には、図１２に示されているような描画画面情報管理テーブルによって構成されている描画画面情報管理ＤＢ５００６が構築されている。この描画画面情報管理テーブルには、各電子黒板１（通信端末）と中継装置３との間で相互通信を行なうためのセッションを識別するためのセッションＩＤ毎に、電子黒板１の間で共有される描画画面に関する各種データが記憶されて管理されている。描画画面情報管理テーブルに示されているデータは、各電子黒板１の描画画面管理ＤＢ１００１に記憶されている描画画面の状態（図７参照）に対応している。

描画画面情報管理テーブルに示されているデータには、各データを識別するためのＩＤ、データに対応する処理の開始時刻および終了時刻、データの内容を示す情報（ｂｏｄｙ）、並びに親となるデータを特定するための情報（ｐａｒｅｎｔ）が含まれている。例えば、ストロークデータの場合、描画画面情報管理テーブルには、「ストローク描画」イベントによって生成されたストロークデータを識別するためのストロークＩＤ、ストロークの書き始めの時刻を示す開始時刻、ストロークの書き終わりの時刻を示す終了時刻、ストロークデータの内容を示す情報、および親となるページデータを特定するための情報が含まれている。この場合、ストロークデータの内容を示す情報（ｂｏｄｙ）には、描画されたストロークの色、描画されたストロークの線の太さを示す幅、および描画されたストロークの頂点（ｘ,ｙ）の情報が含まれている。

ここで、「ストローク描画」は、利用者による描画情報の入力処理であり、例えば、利用者が電子ペン１９０をディスプレイ１８０に押し付け、この状態で電子ペン１９０を移動させ、ディスプレイ１８０から電子ペン１９０を離すまでのイベントである。また、ストロークの色は、ＲＧＢＡ（Red Green Blue Alpha）のデータ形式で、各要素が０−２５５の数値で表される。さらに、描画されたストロークの線の太さの幅は、ピクセル数で表される。また、描画されたストロークの頂点は、ＸＹ座標で表され、それぞれの頂点をベジェ曲線で結ぶとストロークを示す線分となる。この描画画面情報管理テーブルにより、通信管理装置５は、特定の通信セッションを用いたビデオ会議等によって発生したストロークデータを含む描画画面に関する各種データを管理することができる。

●画像保存装置の機能構成
次に、図６を用いて、画像保存装置７の機能構成について説明する。画像保存装置７は、送受信部７１、および記憶・読出処理部７９を有している。これら各部は、図４に示されている各構成要素のいずれかが、ＨＤ７０４からＲＡＭ７０３上に展開された画像保存用プログラムに従ったＣＰＵ７０１からの命令によって動作することで実現される機能、または機能する手段である。また、画像保存装置７は、図４に示されているＲＡＭ７０３、ＨＤ７０４または記録メディア７１５によって構築される記憶部７０００を有している。

送受信部７１は、図４に示されているＣＰＵ７０１からの命令、およびネットワークＩ／Ｆ７０９によって実現され、通信ネットワーク１００を介して、他の端末または装置と各種データ（または情報）の送受信を行う機能である。記憶・読出処理部７９は、図４に示されているＣＰＵ７０１からの命令によって実行され、記憶部７０００に各種データを記憶させ、または記憶部７０００に記憶された各種データを読み出す機能である。

●実施形態の処理または動作●
続いて、図１３乃至図２４を用いて、本実施形態に係る通信システムにおける処理または動作を説明する。

●遠隔通信の準備段階の処理
まず、図１３および図１４を用いて、ログイン要求端末としての電子黒板１ａが行なう通信の準備処理を説明する。図１３は、電子黒板間で遠隔通信を開始する準備段階の処理の一例を示すシーケンス図である。図１４は、電子黒板に表示される宛先リスト画面の一例を示す図である。なお、電子黒板１ｂがログイン共有を行う処理も電子黒板１ａの処理と同様であるため、説明を省略する。

まず、電子黒板１ａで電源スイッチ１２２がＯＮされると、受付部１２ａが、電源ＯＮを受け付ける（ステップＳ１１）。

次に、送受信部１１ａは、通信ネットワーク１００を介して、通信管理装置５へログイン認証の要求を示すログイン要求情報を送信する（ステップＳ１２）。このログイン要求情報には、電子黒板１ａの端末ＩＤおよびパスワードが含まれている。これら端末ＩＤおよびパスワードは、記憶・読出処理部１９ａによって記憶部１０００ａから読み出されて、送受信部１１ａに送られたデータである。なお、これら端末ＩＤおよびパスワードは、これに限るものではなく、利用者がキーボード等の入力手段によって入力した端末ＩＤやパスワードが送信されてもよい。また、電子黒板１ａに接続されたＳＩＭ（Subscriber Identity Module Card）カードやＳＤカード等の記録媒体から読み出された端末ＩＤやパスワードが送信されてもよい。これにより、通信管理装置５の送受信部５１は、電子黒板１ａから送信されたログイン要求情報を受信する。

次に、通信管理装置５の認証部５２は、送受信部５１を介して受信したログイン要求情報に含まれている端末ＩＤおよびパスワードを検索キーとして、認証管理テーブル（図１０（Ａ）参照）を検索する。また、認証部５２は、ログイン要求情報に含まれている端末ＩＤおよびパスワードの組み合わせが、認証管理テーブルで管理されている場合、電子黒板１ａのログインを許可する（ステップＳ１３）。ここで、ログイン要求情報に含まれている端末ＩＤおよびパスワードの組合せが、認証管理テーブルで管理されている場合、ステップＳ１４以降の処理が実行される。

電子黒板１ａのログインが許可された場合、端末管理部５４は、端末管理テーブル（図１０（Ｂ）参照）において、電子黒板１ａの端末ＩＤ「０１ａａ」に対応する情報を更新する。例えば、端末管理部５４は、端末ＩＤ「０１ａａ」に対応する「稼動状態」の情報を「ＯＮライン（通信可能）」」に変更するとともに、「受信日時」の情報を、ログイン要求情報を受信した日時に更新する（ステップＳ１４）。なお、端末のＩＰアドレスの情報は、事前に登録されているのではなく、上記ステップＳ１２で電子黒板１ａから送信されたＩＰアドレスを用いるようにしても良い。これにより、端末管理テーブルには、例えば、図１０（Ｂ）に示されているように端末ＩＤ「０１ａａ」に、稼動状態「ＯＮライン（通信可能）」、受信日時「２０１９．２．１０．１３：４０」およびＩＰアドレス「１．２．１．３」が関連づけて管理されることになる。

次に、セッション管理部５５は、ステップＳ１２によって受信された電子黒板１ａの端末ＩＤ「０１ａａ」を、「開始端末の端末ＩＤ」とする新しいレコードを、セッション管理テーブル（図１１（Ｂ）参照）に追加して管理する（ステップＳ１５）。そして、送受信部５１は、ステップ１３の処理によって得られた認証結果が示された認証結果情報を、通信ネットワーク１００を介して、上記ログイン要求してきた電子黒板１ａへ送信する（ステップＳ１６）。

電子黒板１ａ（ログイン要求端末）の送受信部１１ａは、ログインが許可されたことを示す認証結果情報を受信すると、通信ネットワーク１００を介して通信管理装置５へ、宛先リストを要求する旨が示された宛先リスト要求情報を送信する（ステップＳ１７）。これにより、通信管理装置５の送受信部５１は、宛先リスト要求情報を受信する。

次に、端末管理部５４は、電子黒板１ａ（ログイン要求端末）の端末ＩＤ「０１ａａ」を検索キーとして、宛先リスト管理テーブル（図１１（Ａ）参照）を検索し、電子黒板１ａと通信することができる宛先候補の端末ＩＤを読み出す。また、端末管理部５４は、端末管理テーブル（図１０（Ｂ））から、宛先候補の端末ＩＤに対応する宛先名を読み出す（ステップＳ１８）。ここでは、電子黒板１ａの端末ＩＤ「０１ａａ」に対応する宛先候補のそれぞれの端末ＩＤと、これらに対応する宛先名が抽出される。

次に、送受信部５１は、記憶・読出処理部５９を介して、例えば、記憶部５０００から宛先リスト枠のデータおよび稼動状態を示すアイコンのデータ等を読み出す（ステップＳ１９）。また、送受信部５１は、読み出した宛先リスト枠およびアイコン、並びにステップＳ１８で抽出した端末ＩＤおよび宛先名を含めた「宛先リスト情報（宛先リスト枠、アイコン、端末ＩＤ、宛先名）」を、電子黒板１ａへ送信する（ステップＳ２０）。これにより、電子黒板１ａは、送受信部１１ａが宛先リスト情報を受信し、記憶・読出処理部１９ａが記憶部１０００ａに、受信した宛先リスト情報を記憶する（ステップＳ２１）。

このように、本実施形態では、各端末で宛先リスト情報を管理するのではなく、通信管理装置５が全ての端末の宛先リスト情報を一元管理している。よって、通信システムに新たな電子黒板１が含まれるようになったり、既に含まれている端末に替えて新機種の端末を含めるようになったり、宛先リスト枠の見栄え等を変更することになった場合でも、本実施形態に係る通信システムは、通信管理装置５側で一括して対応するため、各端末側で宛先リスト情報の変更を行う手間を省くことができる。

また、端末管理部５４は、ステップ１８で抽出した宛先候補の端末ＩＤを検索キーとして、端末管理テーブル（図１０（Ｂ）参照）を検索し、宛先候補の端末ＩＤ毎に、対応する稼動状態を読み出す。これにより、端末管理部５４は、宛先候補の端末ＩＤに対応する各電子黒板１の各稼動状態を取得する（ステップＳ２２）。

次に、送受信部５１は、ステップＳ２２で検索キーとして使用された端末ＩＤと、対応する各宛先端末の稼動状態とが含まれた「端末の状態情報」を、通信ネットワーク１００を介して、電子黒板１ａに送信する（ステップＳ２３）。

次に、電子黒板１ａの記憶・読出処理部１９ａは、順次、通信管理装置５から受信した端末の状態情報を記憶部１０００ａに記憶する（ステップＳ２４）。よって、電子黒板１ａは、上記各電子黒板の状態情報を受信することで、電子黒板１ａと通信することができる宛先候補である電子黒板１ｂ等の現時点のそれぞれの稼動状態を取得することができる。

次に、表示制御部１４ａは、記憶部１０００ａに記憶されている宛先リスト情報、および端末の状態情報に基づいて、宛先候補としての端末の状態を反映させた宛先リストを作成する。また、表示制御部１４ａは、作成した宛先リストを用いて、電子黒板１ａのディスプレイ１８０に対して、図１４に示されているような宛先リスト画面８００を表示させる（ステップＳ２５）。この宛先リスト画面８００には、宛先候補毎に、稼動状態を示すアイコン、端末ＩＤ、および宛先名が表示されている。図１４では、各端末の稼動状態を示したアイコンが、上から「ＯＦＦライン」、「ＯＮライン（通信可能）」として表示されている。

一方、通信管理装置５の端末管理部５４は、電子黒板１ａの端末ＩＤ「０１ａａ」に基づいて宛先リスト管理テーブル（図１１（Ａ）参照）を検索することにより、電子黒板１ａを宛先候補として登録している他の端末の端末ＩＤを抽出する（ステップＳ２６）。図１１（Ａ）に示されている宛先リスト管理テーブルでは、読み出される他の端末の端末ＩＤは、「０１ｂａ」、「０１ｃａ」、「０１ｄａ」等である。

次に、端末管理部５４は、電子黒板１ａの端末ＩＤ「０１ａａ」に基づいて端末管理テーブル（図１０（Ｂ）参照）を検索し、電子黒板１ａの稼動状態を取得する（ステップＳ２７）。

そして、送受信部５１は、ステップＳ２６で抽出された端末ＩＤに係る端末のうち、端末管理テーブル（図１０（Ｂ）参照）で稼動状態が「ＯＮライン」となっている端末に、ステップＳ２７で取得された電子黒板１ａの端末ＩＤ「０１ａａ」と稼動状態「ＯＮライン」が含まれる「端末の状態情報」を送信する（ステップＳ２８）。なお、送受信部５１が電子黒板１ｂに端末の状態情報を送信する際に、各端末ＩＤに基づいて、端末管理テーブル（図１０（Ｂ）参照）で管理されている電子黒板のＩＰアドレスを参照する。これにより、電子黒板１ａを宛先候補として通信することができる他の宛先端末のそれぞれに、電子黒板１ａの端末ＩＤ「０１ａａ」、および稼動状態「ＯＮライン」を伝えることができる。よって、宛先候補（電子黒板１ｂ等）においても、宛先候補の状態を表示させることができる（ステップＳ２９）。

●遠隔通信の開始処理
続いて、図１５を用いて、電子黒板１ａが電子黒板１ｂに対して遠隔通信を開始する処理を説明する。図１５は、遠隔通信を開始する処理の一例を示すシーケンス図である。

まず、開始端末（電子黒板１ａ）の利用者Ａ１が図１４に示されている宛先候補（端末ＩＤ「０１ｂａ」）を押下して電子黒板１ｂを選択すると、受付部１２ａは、宛先端末（電子黒板１ｂ）との通話を開始する要求を受け付ける（ステップＳ３１）。そして、開始端末（電子黒板１ａ）の送受信部１１ａは、通信管理装置５に対して、通話を開始したい旨を示す開始要求情報を送信する（ステップＳ３２）。この開始要求情報には、開始端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」、および宛先端末（電子黒板１ｂ）の端末ＩＤ「０１ｂａ」が含まれている。これにより、通信管理装置５の送受信部５１は、上記開始要求情報を受信すると共に、送信元である開始端末（電子黒板１ａ）のＩＰアドレスを受信する。

そして、端末管理部５４は、開始要求情報に含まれる開始端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」および宛先端末（電子黒板１ｂ）の端末ＩＤ「０１ｂａ」に基づき、端末管理テーブル（図１０（Ｂ）参照）を更新する。例えば、端末管理部５４は、開始要求情報に含まれる開始端末の端末ＩＤ「０１ａａ」、宛先端末の端末ＩＤ「０１ｂａ」に基づき、端末管理テーブルにおいて、端末ＩＤ「０１ａａ」、「０１ｂａ」に対応する「稼動状態」を「オンライン（通信中）」に更新する。なお、この状態では、開始端末である電子黒板１ａ、および宛先端末である電子黒板１ｂは、セッションに参加していないが、通信中状態として管理する（ステップＳ３３）。なお、この状態では、開始端末（電子黒板１ａ）、および宛先端末（電子黒板１ｂ）は、ビデオ会議を開始していないが、通話中状態となり、第３の電子黒板（例えば、途中参加端末）が開始端末（電子黒板１ａ）または宛先端末（電子黒板１ｂ）と通話しようとする（途中参加しようとする）と、いわゆる通話中状態を示す旨の通知音または表示が出力される。

次に、実際に利用される中継装置３を選択するためのセッションを実行する処理を説明する。まず、通信管理装置５のセッション管理部５５は、電子黒板１ａと電子黒板１ｂとの間で開催されるセッションを識別するためのセッションＩＤを生成する（ステップＳ３４）。ここでは、セッションＩＤ「ｓｅ０１」が生成された場合について説明する。

そして、セッション管理部５５は、セッション管理テーブル（図１１（Ｂ）参照）に、ステップＳ３４で生成されたセッションＩＤ「ｓｅ０１」、開始端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」、および宛先端末（電子黒板１ｂ）の端末ＩＤ「０１ｂａ」を関連づけて記憶して管理する（ステップＳ３５）。

次に、中継装置管理部５６は、開始端末（電子黒板１ａ）と宛先端末（電子黒板１ｂ）との間のセッションを中継する中継装置３を選択する（ステップ３６）。例えば、中継装置管理部５６は、中継装置管理テーブル（図１１（Ｃ）参照）において稼動状態が「ＯＮライン」の中継装置３に係る中継装置ＩＤのうち、端末管理テーブル（図１０（Ｂ）参照）において開始端末（電子黒板１ａ）のＩＰアドレスに近いＩＰアドレスの中継装置３を選択する。ここでは、中継装置ＩＤ「１１１ａ」の中継装置３が選択された場合について、以降、続けて説明する。

以上のステップＳ３６における中継装置の選択の処理が終了すると、通信管理装置５の送受信部５１は、開始端末（電子黒板１ａ）に対して、中継装置選択情報を送信する（ステップＳ３７−１）。この中継装置選択情報には、ステップＳ３６によって選択された中継装置３のＩＰアドレス、およびステップＳ３４によって生成されたセッションＩＤ「ｓｅ０１」が含まれている。これにより、開始端末（電子黒板１ａ）は、中継装置選択情報の送信元である通信管理装置５のＩＰアドレスを取得することができる。

さらに、通信管理装置５の送受信部５１は、宛先端末（電子黒板１ｂ）に対して、中継装置選択情報を送信する（ステップＳ３７−２）。この中継装置選択情報には、ステップＳ３６によって選択された中継装置３のＩＰアドレス、開始端末（電子黒板１ａ）の端末ＩＤ「０１ａａ」、およびステップＳ３４によって生成されたセッションＩＤ「ｓｅ０１」が含まれている。これにより、宛先端末（電子黒板１ｂ）は、セッションＩＤ「ｓｅ０１」におけるセッションの実行において、中継装置選択情報の送信元である通信管理装置５のＩＰアドレスを取得することができる。

次に、開始端末（電子黒板１ａ）の送受信部１１は、通信管理装置５に対して、ステップＳ３７−１の処理により中継装置選択情報の受信が完了した旨を示す受信完了情報を送信する（ステップＳ３８−１）。この受信完了情報には、ステップＳ３７−１の処理で送受信されたセッションＩＤが含まれている。これにより、通信管理装置５は、特定のセッションＩＤ「ｓｅ０１」で実行されている中継装置選択情報の伝達が完了した旨を取得する。

さらに、宛先端末（電子黒板１ｂ）は、同様に通信管理装置５へ、ステップＳ３７−２の処理により中継装置選択情報の受信が完了した旨を示す受信完了情報を送信する（ステップＳ３８−２）。この場合も、通信管理装置５は、特定のセッションＩＤ「ｓｅ０１」で実行されている中継装置選択情報の伝達が完了した旨を取得する。

以上により、電子黒板１ａ，１ｂは、上記ステップＳ３６で選択された中継装置３を介して、拠点画像データおよび音データを送受信することで、ビデオ会議を行うことができる。

●ストローク画像の共有処理
続いて、図１６を用いて、複数の電子黒板１の間において、ストローク画像を共有する処理について説明する。実施形態に係る通信システムにおいて、ビデオ会議に参加している電子黒板１ａの利用者Ａ１、および電子黒板１ｂの利用者Ｂ１，Ｂ２は、各電子黒板１に電子ペン１９０等で描画したストローク画像を共有画像として、他の電子黒板１に表示させることができる。ここでは、同じセッションに参加している電子黒板１ａと電子黒板１ｂとの間で、ストローク画像を共有する処理の例について説明する。

図１６は、実施形態に係るストロークデータの共有処理に一例を示すシーケンス図である。なお、図１６に示されている処理の開始時点において、電子黒板１ａと電子黒板１ｂは、例えば、図１５に示されているセッションの開始処理により、同じセッションに参加しているものとする。また、電子黒板１ａと電子黒板１ｂは、必要に応じて、画像保存装置７を介して、資料画像を共有し、ディスプレイ１８０に資料画像を表示しているものとする。

まず、利用者Ａ１が、電子ペン１９０や手Ｈを、電子黒板１ａのディスプレイ１８０上に接触させて描画（移動）することにより、受付部１２ａは、描画されたストローク（軌跡）の入力を受け付ける（ステップＳ５１）。電子黒板１ａの画像処理部１６ａは、受付部１２ａが受け付けたストロークに応じたストローク画像を表示するためのストロークデータを作成する（ステップＳ５２）。

電子黒板１ａの表示制御部１４ａは、画像処理部１６ａが作成したストロークデータに基づいて、ディスプレイ１８０にストローク画像を表示させる（ステップＳ５３）。これにより、利用者Ａ１が、ディスプレイ１８０に電子ペン１９０等で描画したストローク画像が、ディスプレイ１８０に表示される。

次に、電子黒板１ａの送受信部１１ａは、利用者Ａ１によって描画されたストローク画像を再生するためのストロークデータを、例えば、セッションｓｅｉで通信管理装置５へ送信する（ステップＳ５４）。これにより、通信管理装置５の送受信部５１は、電子黒板１ａから送信されたストロークデータを受信する。

通信管理装置５の描画画面情報管理部５７は、電子黒板１ａから受信したストロークデータを、例えば、図１２に示されているような描画画面情報管理テーブルに記憶する(ステップＳ５５)。描画画面情報管理部５７は、電子黒板１ａと同じセッションに参加している電子黒板１ｂに、ストロークデータを転送する（ステップＳ５６）。これにより、電子黒板１ｂの送受信部１１ｂは、ストロークデータを受信する。

電子黒板１ｂの画像処理部１６ｂは、送受信部１１ｂによって受信されたストロークデータに基づいて、ストローク画像を作成する（ステップＳ５７）。そして、表示制御部１４ｂは、画像処理部１６ｂによって生成されたストローク画像、すなわち、ステップＳ５１で利用者Ａ１が描画したストローク画像を、ディスプレイ１８０に表示させる(ステップＳ５８）。

このように、同じセッションに参加している電子黒板１ａと電子黒板１ｂの間では、ストローク画像を共有することができる。なお、電子黒板１ｂに対して、利用者Ｂ１または利用者Ｂ２が電子ペン１９０等で描画を行った場合も、同様にして、ストローク画像を電子黒板１ａに表示させることができる。

●描画画面に対する操作の再実行処理
続いて、図１７乃至図２０を用いて、電子黒板１によって実行される基本的なＵｎｄｏおよびＲｅｄｏ処理について説明する。図１７は、実施形態に係る電子黒板において、描画画面に対する操作の再実行処理の一例を示すフローチャートである。

まず、電子黒板１の表示制御部１４は、図１８に示されているような描画画面２００を、ディスプレイ１８０に表示させる（ステップＳ１０１）。図１８に示されている描画画面２００には、図１６に示されているような処理によって描画されたストロークデータを含まれている。描画画面２００は、利用者が電子ペン１９０等を用いて、３つのストロークを描画した場合の表示状態である。３つのストロークは、操作１、操作２、操作３の順番で描画されている。また、描画画面２００には、描画内容に対するＵｎｄｏ処理を実行する際に押下される「Ｕｎｄｏ」ボタン２０１、および描画内容に対するＲｅｄｏ処理を実行する際に押下される「Ｒｅｄｏ」ボタン２０３が含まれている。

次に、電子黒板１の利用者が描画画面２００に示されている「Ｕｎｄｏ」ボタン２０１を押下することで、受付部１２は、Ｕｎｄｏ操作の実行を要求するＵｎｄｏ操作実行要求を受け付ける（ステップＳ１０２）。ここで、電子黒板１は、受付部１２によってＵｎｄｏ操作実行要求が受け付けられた場合（ステップＳ１０２のＹＥＳ）、処理をステップＳ１０３へ移行させる。一方で、電子黒板１は、受付部１２によってＵｎｄｏ操作実行要求が受け付けられていない場合（ステップＳ１０２のＮＯ）、処理をステップＳ１０５へ移行させる。

次に、表示制御部１４は、受付部１２によって受け付けられたＵｎｄｏ操作実行要求に応じてＵｎｄｏ処理を実行し、図１９（Ａ）に示されている描画画面２１０を、ディスプレイ１８０に表示させる（ステップＳ１０３）。図１９（Ａ）に示されている描画画面２１０は、描画画面２００に対してＵｎｄｏ処理が１回実行された際に表示される表示画面である。描画画面２１０は、Ｕｎｄｏ処理によって、描画画面２００に示されているストローク（操作１〜操作３）のうちの直前の操作である操作３が取り消され、操作３に対応するストローク画像が削除された状態である。

そして、操作情報管理部１７は、実行されたＵｎｄｏ処理に基づいて、操作情報管理ＤＢ１００３に記憶されている操作情報を更新する（ステップＳ１０４）。図１９（Ｂ）は、実施形態に係る電子黒板においてＵｎｄｏ処理が実行された際の操作情報管理ＤＢの状態を概略的に説明するための図である。操作情報管理部１７は、Ｕｎｄｏ処理が実行されると、Ｕｎｄｏスタックに記録されている操作３を取り出す（ＰＯＰする）。この操作３は、図９に示されているように、ストロークの追加処理であるため、その逆の操作を行うために、描画画面管理ＤＢ１００１に記憶されている描画画面情報の中から対応するストロークデータを検索し、そのストロークデータに対応するストローク画像を削除する。これにより、操作情報管理部１７は、操作３に対するＵｎｄｏ処理を実現させることができる。そして、操作情報管理部１７は、ＵＮＤＯ処理が実行されたことによって、操作３に係る操作情報をＲｅｄｏスタックに記録させる（Ｐｕｓｈする）。

続いて、電子黒板１によって実行されるＲｅｄｏ処理について説明する。電子黒板１の利用者が描画画面２１０に示されている「Ｒｅｄｏ」ボタン２０３を押下することで、受付部１２は、Ｒｅｄｏ操作の実行を要求するＲｅｄｏ操作実行要求を受け付ける（ステップＳ１０５）。ここで、電子黒板１は、受付部１２によってＲｅｄｏ操作実行要求が受け付けられた場合（ステップＳ１０５のＹＥＳ）、処理をステップＳ１０６へ移行させる。一方で、電子黒板１は、受付部１２によってＲｅｄｏ操作実行要求が受け付けられていない場合（ステップＳ１０５のＮＯ）、処理を終了する。

次に、表示制御部１４は、受付部１２によって受け付けられたＲｅｄｏ操作実行要求に応じてＲｅｄｏ処理を実行し、図２０（Ａ）に示されている描画画面２３０を、ディスプレイ１８０に表示させる（ステップＳ１０６）。図２０（Ａ）に示されている描画画面２３０は、図１９（Ａ）に示されている描画画面２１０に対してＲｅｄｏ処理が１回実行された際に表示される表示画面である。図１９（Ａ）に示されている描画画面２１０は、操作３に対応するストローク画像がＵｎｄｏ処理によって削除された状態であるため、描画画面２３０は、Ｒｅｄｏ処理によって操作３に対応するストローク画像が再び描画された状態である。すなわち、描画画面２３０は、Ｒｅｄｏ処理によって、ステップＳ１０３によって取り消された操作３に対応するストローク画像が元に戻された状態であり、図１８に示されている描画画面２００と同様の描画内容となる。

そして、操作情報管理部１７は、実行されたＲｅｄｏ処理に基づいて、操作情報管理ＤＢ１００３に記憶されている操作情報を更新する（ステップＳ１０７）。図２０（Ｂ）は、実施形態に係る電子黒板においてＲｅｄｏ処理が実行された際の操作情報管理ＤＢの状態を概略的に説明するための図である。操作情報管理部１７は、Ｒｅｄｏ処理が実行されると、Ｒｅｄｏスタックに記録されている操作３を取り出す（ＰＯＰする）。この操作３は、図９に示されているように、ストロークの追加処理であるため、同様の操作を行うために、操作３の操作情報に基づいて、画像処理部１６にストローク画像を生成させ、描画画面管理ＤＢ１００１に生成されたストローク画像（描画データ）を記憶させる。これにより、操作情報管理部１７は、操作３に対するＲｅｄｏ処理を実現させることができる。そして、操作情報管理部１７は、Ｒｅｄｏ処理が実行されたことによって、操作３に係る操作情報をＵｎｄｏスタックに記録させる（Ｐｕｓｈする）。

このように、電子黒板１は、操作情報管理ＤＢ１００３に構築されているＵｎｄｏスタックおよびＲｅｄｏスタックに、描画画面に対して実行された操作に係る操作情報を記憶しておくことで、描画画面に対するＵｎｄｏ処理およびＲｅｄｏ処理を実行することができる。

●操作実行可否の判定処理
続いて、図２１乃至図２４を用いて、複数の電子黒板１の間で描画画面に対する操作が競合した場合における操作実行可否の判定処理について説明する。図２１は、実施形態に係る通信システムにおいて、複数の電子黒板の間で操作が競合した場合における描画画面の表示処理の一例を示すシーケンス図である。図２１は、先に電子黒板１ａが描画画面に対する操作を行った場合の構成を示す。電子黒板１ａおよび電子黒板１ｂのディスプレイ１８０には、図１８に示されているような描画画面２００が表示されているものとする。また、電子黒板１ｂは、図２１に示されている処理の前に、描画画面２００に示されている操作３に係るストローク画像を描画したものとして説明する。

まず、電子黒板１ａの利用者Ａ１が電子ペン１９０等を用いて描画画面２００に示されてストローク画像を移動させることにより、受付部１２ａは、描画画面２００に対する操作を受け付ける（ステップＳ７１）。例えば、利用者Ａ１は、描画画面２００に示されている操作３に係るストローク画像を、図２２に示されている描画画面２５０のように右下に移動させる。

画像処理部１６ａは、受付部１２ａによって受け付けられた操作に応じた描画画面データを生成する（ステップＳ７２）。そして、表示制御部１４ａは、画像処理部１６ａによって生成された描画画面データに係る描画画面２５０（図２２参照）を、ディスプレイ１８０に表示させる（ステップＳ７３）。

次に、送受信部１１ａは、通信管理装置５に対して、受付部１２ａによって受け付けられた操作に対応するストロークデータを送信する（ステップＳ７４）。これにより、通信管理装置５の送受信部５１は、電子黒板１ａから送信されたストロークデータを受信する。次に、通信管理装置５の描画画面情報管理部５７は、送受信部１１ａによって受信されたストロークデータを、例えば、図１１（Ａ）に示されているような描画画面情報管理テーブルに記憶する（ステップ７５）。そして、送受信部５１は、電子黒板１ｂに対して、電子黒板１ａから送信されたストロークデータを転送する（ステップＳ７６）。これにより、電子黒板１ｂの送受信部１１ｂは、通信管理装置５から送信されたストロークデータを受信する。

次に、電子黒板１ｂの画像処理部１６ｂは、送受信部１１ｂによって受信されたストロークデータに基づいて、電子黒板１ｂに表示させる描画画面データを生成する（ステップＳ７７）。そして、表示制御部１４ｂは、画像処理部１６ｂによって生成された描画画面データに係る描画画面２５０（図２２参照）を、ディスプレイ１８０に表示させる（ステップＳ７８）。図２２に示されている描画画面２５０は、描画画面２００に示されている操作３に係るストローク画像が右下に移動した状態である。すなわち、電子黒板１ｂには、ステップＳ７３によってディスプレイ１８０に表示されたものと同様の描画画面２５０が表示される。この場合、操作情報管理部１７ｂは、操作３に係るストローク画像の移動が他の電子黒板１ａによって実行された操作であるため、操作情報管理ＤＢ１００３に記憶されている操作３に係る操作情報を更新しない。すなわち、電子黒板１ｂの操作情報管理ＤＢ１００３ｂに構築されているＵｎｄｏスタックおよびＲｅｄｏスタックの状態は、図８に示されている状態と同様である。

次に、電子黒板１ｂの利用者Ｂ１が描画画面２５０に示されている「Ｕｎｄｏ」ボタン２０１または「Ｒｅｄｏ」ボタン２０３を押下することで、受付部１２ｂは、描画画面２５０に対する操作の再実行を要求する操作実行要求を受け付ける（ステップＳ７９）。以下の説明では、受付部１２ｂによってＵｎｄｏ操作を要求するＵｎｄｏ操作実行要求が受け付けられた場合について説明する。そして、電子黒板１ｂの操作実行可否判定部２１ｂは、受付部１２ｂによって受け付けられた操作実行要求に基づいて、操作実行可否の判定処理を実行する（ステップＳ８０）。ここで、図２３を用いて、操作実行可否判定部２１ｂによる処理の詳細を説明する。図２３は、実施形態に係る電子黒板における描画画面に対する操作の実行可否の判定処理の一例を示すフローチャートである。

まず、操作実行可否判定部２１ｂは、操作情報管理ＤＢ１００３を参照し、操作実行要求に示されている操作対象が存在するかどうかを判断する（ステップＳ８０−１）。具体的には、操作実行可否判定部２１ｂは、操作情報管理ＤＢ１００３ｂに構築されているＵｎｄｏスタックまたはＲｅｄｏスタックから操作対象である操作３に係る操作情報を読み出す。そして、操作実行可否判定部２１ｂは、読み出した操作情報に示されているストロークＩＤまたはページＩＤによって識別される操作対象が、描画画面２５０上に存在するかを判断する。この場合、操作実行可否判定部２１ｂは、描画画面２５０の状態を、描画画面管理ＤＢ１００１ｂを用いて参照する。操作実行可否判定部２１ｂは、操作対象が存在すると判断した場合（ステップＳ８０−１のＹＥＳ）、処理をステップＳ８０−２へ移行させる。一方で、操作実行可否判定部２１ｂは、操作対象が存在しないと判断した場合（ステップＳ８０−１のＮＯ）、処理をステップＳ８０−５へ移行させる。例えば、操作対象が存在しない場合とは、操作対象となる操作３に係るストローク画像またはストローク画像が描画されたページが、他の電子黒板１ａによって削除された場合である。図２１に示されている処理の場合、操作３に係るストローク画像が他の電子黒板１ａによって移動されたのみで、描画画面２５０に操作３に係るストローク画像が残っているため、操作実行可否判定部２１ｂは、操作対象が存在すると判断する。

次に、操作実行可否判定部２１ｂは、操作情報管理ＤＢ１００３を参照し、操作実行要求に示されている操作対象が編集されているかどうかを判断する（ステップＳ８０−２）。具体的には、操作実行可否判定部２１ｂは、読み出した操作情報に示されているデータの内容と、描画画面管理ＤＢ１００１ｂに記憶されている描画画面２５０の状態とに基づいて、操作対象である操作３のストローク画像が編集されているかを判断する。操作実行可否判定部２１ｂは、操作対象が編集されていないと判断した場合（ステップＳ８０−２のＮＯ）、処理をステップＳ８０−３へ移行させる。一方で、操作実行可否判定部２１ｂは、操作対象が編集されていると判断した場合（ステップＳ８０−２のＹＥＳ）、処理をステップＳ８０−５へ移行させる。例えば、操作対象が編集されている場合とは、操作対象となる操作３に係るストローク画像またはストローク画像が描画されたページに対して、他の電子黒板１ａによって移動等の操作が実行された場合である。図２１に示されている処理の場合、操作３に係るストローク画像が他の電子黒板１ａによって移動されているため、操作実行可否判定部２１ｂは、操作対象が編集されていると判断する。

次に、操作実行可否判定部２１ｂは、操作情報管理ＤＢ１００３を参照し、操作実行要求に示されている操作対象であるストロークを追加する先のページが存在するかどうかを判断する（ステップＳ８０−３）。具体的には、操作実行可否判定部２１ｂは、描画画面管理ＤＢ１００１ｂを参照し、読み出した操作情報に示されているページＩＤに対応するページが、描画画面２５０上に存在するかを判断する。操作実行可否判定部２１ｂは、操作対象であるストロークを追加する先のページが存在すると判断した場合（ステップＳ８０−３のＹＥＳ）、処理をステップＳ８０−４へ移行させる。一方で、操作実行可否判定部２１ｂは、操作対象であるストロークを追加する先のページが存在しないと判断した場合（ステップＳ８０−３のＮＯ）、処理をステップＳ８０−５へ移行させる。例えば、ストロークを追加する先のページが存在しない場合とは、操作対象となる操作３に係るストローク画像が描画されたページが、他の電子黒板１ａによって削除された場合である。なお、ステップＳ８０−３の処理は、ストロークの削除等の操作に対するＵｎｄｏ処理によって、描画画面にストロークを追加するための処理であり、Ｕｎｄｏ処理によってストロークの追加が発生しないような場合には、ステップＳ８０−３の処理は行われなくてもよい。

そして、操作実行可否判定部２１ｂは、操作実行要求に示されている操作を実行できる（実行可）と判定する（ステップＳ８０−４）。一方で、ステップＳ８０−１の処理で操作対象が存在しないと判断された場合、ステップＳ８０−２の処理で操作対象が編集されていると判断された場合、またはステップＳ８０−３の処理で操作対象であるストロークを追加する先のページが存在しないと判定された場合、操作実行可否判定部２１ｂは、操作実行要求に示されている操作を実行できない（実行不可）と判定する（ステップＳ８０−５）。そして、画像処理部１６ｂは、操作実行可否判定部２１ｂによって実行不可となった理由を示すメッセージを生成する（ステップＳ８０−６）。具体的には、画像処理部１６ｂは、実行不可と判定された理由となるいずれかの処理（ステップＳ８０−１の処理、ステップＳ８０−２の処理またはステップＳ８０−３の処理）の内容を示すメッセージを生成する。

このように、電子黒板１ｂは、ＵｎｄｏスタックまたはＲｅｄｏスタックに記憶された操作情報と、ディスプレイ１８０に表示されている描画画面２５０の状態に基づいて、操作実行要求に示されている操作（Ｕｎｄｏ操作またはＲｅｄｏ操作）を実行できるかどうかを判定することができる。

図２１に戻り、電子黒板１ｂの画像処理部１６ｂは、操作実行可否判定部２１ｂによる判定結果に基づいて、ディスプレイ１８０に表示させる描画画面データを生成する（ステップＳ８１）。例えば、操作実行可否判定部２１ｂによって操作要実行要求に示されている操作を実行できると判定された場合、画像処理部１６ｂは、操作実行要求に示されている操作が実行された描画画面データを生成する。一方で、操作実行可否判定部２１ｂによって操作実行要求に示されている操作を実行できないと判定された場合、画像処理部１６ｂは、ステップＳ８０−６で生成したメッセージを含む描画画面データを生成する。

そして、表示制御部１４ｂは、画像処理部１６ｂによって生成された描画画面データに係る描画画面を、ディスプレイ１８０に表示させる（ステップＳ８２）。例えば、操作実行可否判定部２１ｂによって操作実行要求に示されている操作を実行できると判定された場合、表示制御部１４ｂは、画像処理部１６ｂによって生成された、操作実行要求に示されている操作が実行された描画画面データに係る描画画面を、ディスプレイ１８０に表示させる。一方で、操作実行可否判定部２１ｂによって操作実行要求に示されている操作を実行できないと判定された場合、表示制御部１４ｂは、画像処理部１６ｂによって生成された、ステップＳ８０−６で生成したメッセージを含む描画画面データに係る描画画面を、ディスプレイ１８０に表示させる。

ここで、図２１に示されている処理の場合においてディスプレイ１８０に表示される描画画面について説明する。図２４は、実施形態に係る電子黒板に表示される操作実行不可画像の一例を示す図である。図２４に示されている操作実行不可画像２７０は、ステップＳ７８によってディスプレイ１８０に表示された描画画面２５０に重畳されて表示されている。操作実行不可画像２７０は、ステップＳ８０−６によって生成されたメッセージに対応する。操作実行不可画像２７０には、操作実行可否判定部２１ｂによって実行不可と判定された理由となるメッセージと、操作実行不可画像２７０を消去する（閉じる）場合に押下される「閉じる」ボタン２７５が含まれている。

図２４の例では、操作実行可否判定部２１ｂによって操作対象が編集されていることに起因して、実行不可と判定されたため、操作実行不可画像２７０には、「操作対象が編集されているため、Ｕｎｄｏ操作ができません。」というメッセージが示されている。また、例えば、操作実行可否判定部２１ｂによって操作対象が存在しないことに起因して実行不可と判定された場合、操作実行不可画像２７０には、「操作対象が存在しないため、Ｕｎｄｏ操作ができません。」というメッセージが示されている。さらに、例えば、操作実行可否判定部２１ｂによって操作対象であるストロークの追加する先のページが存在しないことに起因して実行不可と判定された場合、操作実行不可画像２７０には、「ストロークの追加先のページが存在しないため、Ｕｎｄｏ操作ができません。」というメッセージが示されている。このように、操作実行不可画像２７０には、実行不可と判定された理由となるいずれかの処理（ステップＳ８０−１の処理、ステップＳ８０−２の処理またはステップＳ８０−３の処理）の内容を示すメッセージが示されている。これにより、電子黒板１ｂは、Ｕｎｄｏ操作またはＲｅｄｏ操作を実行できないと判定された場合、実行できない理由を利用者に通知することで、利用者の利便性を向上させることができる。

なお、操作実行不可画像２７０に示されているメッセージの表現および表示方法は、これに限られない。また、図２１は、ステップＳ７９によってＵｎｄｏ操作実行要求が受け付けられた場合の例を説明したが、電子黒板１ｂは、ステップＳ７９によってＲｅｄｏ処理を要求する操作実行要求が受け付けられた場合においても、図２３に示されているような操作実行可否の判定処理を実行し、判定結果に応じた描画画面をディスプレイ１８０に表示させる。さらに、上記で説明した各描画画面２００,２１０,２３０,２５０は、ディスプレイ１８０に表示される表示画面の一例である。

従来、複数の電子黒板の間で表示させる描画画面を共有する場合において、一方の電子黒板の利用者が入力したストロークを他方の電子黒板の利用者が削除した後に、ストロークを入力した利用者がＵｎｄｏ操作を要求しても描画画面上では何も起こらない。これは、操作対象であるストロークが他方の電子黒板によって削除されたためであるが、Ｕｎｄｏ操作を要求した利用者は、その原因がわからなかった。

そこで、実施形態に係る通信システムは、電子黒板１ｂの利用者Ｂ１からＵｎｄｏ操作またはＲｅｄｏ操作の操作実行要求が受け付けられた場合、Ｕｎｄｏ操作またはＲｅｄｏ操作の実行可否を判定し、Ｕｎｄｏ操作またはＲｅｄｏ操作を実行できないと判定された場合、その旨と理由を利用者Ｂ１に提示する。これにより、実施形態に係る通信システムは、複数の電子黒板１ａ,１ｂとの間で共有してディスプレイ１８０に表示される描画画面に対してＵｎｄｏ操作またはＲｅｄｏ操作を実行する際の利便性を向上させることができる。

●まとめ●
以上説明したように、本発明の一実施形態に係る電子黒板１ｂは、他の通信端末（例えば、電子黒板１ａ）との間においてデータを共有する通信端末である。電子黒板１ｂは、他の通信端末との間で共有されるデータを管理する通信管理装置５から、他の通信端末に描画された描画画面（表示画面の一例）に係る描画画面データ（表示画面データの一例）を受信し、受信された描画画面データに係る描画画面をディスプレイ１８０（表示部の一例）に表示させる。また、電子黒板１ｂは、ディスプレイ１８０に表示された描画画面に含まれている画像（例えば、ストローク画像）に対して実行された操作に関する操作情報を記憶する。さらに、電子黒板１ｂは、描画画面に含まれている画像に対する特定の操作の実行を要求する操作実行要求を受け付け、記憶された操作情報に基づいて受け付けられた操作実行要求に係る特定の操作の実行可否を判定し、特定の操作を実行できないと判定された場合、特定の操作を実行できないことを示す操作実行不可画像２７０（メッセージの一例）を、ディスプレイ１８０に表示させる。これにより、電子黒板１ｂは、電子黒板１ａとの間で共有して表示される描画画面に対して特定の操作を実行する際の利用者の利便性を向上させることができる。

また、本発明の一実施形態に係る電子黒板１ｂ（通信端末の一例）は、描画画面に含まれている画像（例えば、ストローク画像）に対して直前に実行された操作を取り消すＵｎｄｏ操作の実行を要求する操作実行要求（例えば、Ｕｎｄｏ操作実行要求）を受け付け、受け付けられた操作実行要求に係るＵｎｄｏ操作の実行可否を判定し、Ｕｎｄｏ操作を実行できないと判定された場合、Ｕｎｄｏ操作を実行できないことを示す操作実行不可画像２７０（メッセージの一例）を、ディスプレイ１８０に表示させる。これにより、電子黒板１ｂは、Ｕｎｄｏ操作を実行できないと判定された場合、Ｕｎｄｏ操作を実行できない理由を利用者に通知することで、電子黒板１ａとの間で共有する描画画面に対してＵｎｄｏ操作を実行する際の利便性を向上させることができる。

さらに、本発明の一実施形態に係る電子黒板１ｂ（通信端末の一例）は、描画画面に含まれている画像（例えば、ストローク画像）に対して直前に実行された操作を取り消す操作によって取り消された操作を元に戻すＲｅｄｏ操作の実行を要求する操作実行要求（例えば、Ｒｅｄｏ操作実行要求）を受け付け、受け付けられた操作実行要求に係るＲｅｄｏ操作の実行可否を判定し、Ｒｅｄｏ操作を実行できないと判定された場合、Ｕｎｄｏ操作を実行できないことを示す操作実行不可画像２７０（メッセージの一例）を、ディスプレイ１８０に表示させる。これにより、電子黒板１ｂは、Ｒｅｄｏ操作を実行できないと判定された場合、Ｒｅｄｏ操作を実行できない理由を利用者に通知することで、電子黒板１ａとの間で共有する描画画面に対してＲｅｄｏ操作を実行する際の利便性を向上させることができる。

また、本発明の一実施形態に係る電子黒板１ｂ（通信端末の一例）は、Ｕｎｄｏ処理が実行可能な操作を記録するＵｎｄｏスタックまたはＲｅｄｏ処理が実行可能な操作を記録するＲｅｄｏスタックに、描画画面に含まれている画像（例えば、ストローク画像）に対して実行された操作に関する操作情報を記憶する。これにより、電子黒板１ｂは、ＵｎｄｏスタックおよびＲｅｄｏスタックに、表示画面に対して実行された操作に係る操作情報を記憶しておくことで、描画画面に対するＵｎｄｏ処理およびＲｅｄｏ処理を実行することができる。

●補足●
上記で説明した実施形態の各機能は、一または複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC（Application Specific Integrated Circuit）、DSP（digital signal processor）、FPGA（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。

また、上記で説明した実施形態の各種テーブルは、機械学習の学習効果によって生成されたものでもよく、関連づけられている各項目のデータを機械学習にて分類付けすることで、テーブルを使用しなくてもよい。ここで、機械学習とは、コンピュータに人のような学習能力を獲得させるための技術であり，コンピュータが，データ識別等の判断に必要なアルゴリズムを，事前に取り込まれる学習データから自律的に生成し，新たなデータについてこれを適用して予測を行う技術のことをいう。機械学習のための学習方法は、教師あり学習、教師なし学習、半教師学習、強化学習、深層学習のいずれかの方法でもよく、さらに、これらの学習方法を組み合わせた学習方法でもよく、機械学習のための学習方法は問わない。

これまで本発明の一実施形態に係る通信端末、通信システム、表示制御方法およびプログラムについて説明してきたが、本発明は、上述した実施形態に限定されるものではなく、他の実施形態の追加、変更または削除等、当業者が想到することができる範囲内で変更することができ、いずれの態様においても本発明の作用・効果を奏する限り、本発明の範囲に含まれるものである。

１ａ 電子黒板（他の通信端末の一例）
１ｂ 電子黒板（通信端末の一例）
３ 中継装置
５ 通信管理装置
６ サーバシステム
７ 画像保存装置
１１ 送受信部（受信手段の一例）
１２ 受付部（受付手段の一例）
１４ 表示制御部（表示制御手段の一例）
２１ 操作実行可否判定部（判定手段の一例）
１８０ ディスプレイ（表示部の一例）
１００３ 操作情報管理ＤＢ（記憶手段の一例）
２００,２１０,２３０,２５０ 描画画面（表示画面の一例）
２７０ 操作実行可否不可画像（メッセージの一例）

特開２０１１−２５４４５３号公報 特開２０１５−７０５４３号公報 特開２００９−２５９００９号公報

Claims (13)

1. 他の通信端末との間においてデータを共有する通信端末であって、
   前記他の通信端末との間で共有されるデータを管理する通信管理装置から、前記他の通信端末に描画された表示画面に係る表示画面データを受信する受信手段と、
   受信された前記表示画面データに係る表示画面を表示部に表示させる表示制御手段と、
   前記表示部に表示された表示画面に含まれている画像に対して実行された操作に関する操作情報を記憶する記憶手段と、
   前記画像に対する特定の操作の実行を要求する操作実行要求を受け付ける受付手段と、
   記憶された前記操作情報に基づいて、前記操作実行要求に係る特定の操作の実行可否を判定する判定手段と、を備え、
   前記画像に対する特定の操作を実行できないと判定された場合、前記表示制御手段は、前記特定の操作を実行できないことを示すメッセージを、前記表示部に表示させる通信端末。
2. 前記特定の操作は、前記画像に対して直前に実行された操作を取り消す操作である請求項１に記載の通信端末。
3. 前記特定の操作は、前記画像に対して直前に実行された操作を取り消す操作によって取り消された操作を元に戻す操作である請求項１に記載の通信端末。
4. 前記特定の操作は、前記表示画面に対するＵｎｄｏ処理またはＲｅｄｏ処理を実行する操作である請求項２または３に記載の通信端末。
5. 前記記憶手段は、前記Ｕｎｄｏ処理が実行可能な操作を記録するＵｎｄｏスタックまたは前記Ｒｅｄｏ処理が実行可能な操作を記録するＲｅｄｏスタックに、前記操作情報を記憶する請求項４に記載の通信端末。
6. 前記判定手段は、前記特定の操作に係る操作対象となる画像が存在しない場合、前記特定の操作を実行できないと判定する請求項１乃至５のいずれか一項に記載の通信端末。
7. 前記判定手段は、前記特定の操作に係る操作対象が編集されている場合、前記特定の操作を実行できないと判定する請求項１乃至６のいずれか一項に記載の通信端末。
8. 前記画像に対する特定の操作を実行できると判定された場合、前記表示制御手段は、前記特定の操作が実行された表示画面を、前記表示部に表示させる請求項１乃至７のいずれか一項に記載の通信端末。
9. 前記受信手段は、前記通信管理装置から、前記他の通信端末に描画されたストローク画像に係るストロークデータを含む前記表示画面データを受信し、
   前記受付手段は、前記ストローク画像に対する前記操作実行要求を受け付ける請求項１乃至８のいずれか一項に記載の通信端末。
10. 前記表示画面は、前記ストローク画像を含む複数のページを含み、
    前記判定手段は、前記特定の操作に係る操作対象となる前記ストローク画像の追加先のページが存在しない場合、前記特定の操作を実行できないと判定する請求項９に記載の通信端末。
11. 請求項１乃至１０のいずれか一項に記載の通信端末と、
    前記通信管理装置と、
    を備える通信システム。
12. 他の通信端末との間においてデータを共有する通信端末が実行する表示制御方法であって、
    前記他の通信端末との間で共有されるデータを管理する通信管理装置から、前記他の通信端末に表示された表示画面に係る表示画面データを受信する受信ステップと、
    受信された前記表示画面データに係る表示画面を表示部に表示させる第１の表示制御ステップと、
    前記表示部に表示された表示画面に含まれている画像に対する特定の操作の実行を要求する操作実行要求を受け付ける受付ステップと、
    記憶手段に記憶された前記画像に対して実行された操作に関する操作情報に基づいて、前記操作実行要求に係る特定の操作の実行可否を判定する判定ステップと、
    前記画像に対する特定の操作を実行できないと判定された場合、前記特定の操作を実行できないことを示すメッセージを、前記表示部に表示させる第２の表示制御ステップと、
    を実行する表示制御方法。
13. コンピュータに、請求項１２に記載の方法を実行させるプログラム。