JP2016110470A - 電子機器の連携システム - Google Patents

Abstract

【課題】連携する２台の電子機器のそれぞれが備える位置入力手段のいずれからの指示入力にも応じて、一方の電子機器でアプリケーション処理を実行して、同じ表示画像を２台の電子機器の表示画面に表示する。【解決手段】連携する第１及び第２の電子機器の間の情報の通信路中に、変換装置部を設ける。第１の電子機器は、第１の位置入力手段からの位置情報及び第１の通信手段を通じて受け付けた外部の位置入力手段からの位置情報を、第１の表示画面の表示画像上の使用者による指示位置に対応する位置情報として受け付けるＨＩＤドライバを備える。第２の電子機器は、第２の位置入力手段が発生する位置情報を変換装置部に出力する。変換装置部は、第２の電子機器からの位置情報を受けて、第１の電子機器のＨＩＤドライバで受け付け可能な情報に変換して、第１の電子機器に供給する。【選択図】図１

Description

この発明は、それぞれ表示画面及びタッチパネル等の位置入力手段を有する２台の電子機器において、いずれの電子機器の位置入力手段で指示入力しても、２台の電子機器の表示画面において、その指示入力に応じた処理結果の同じ表示画像を、表示することができるようにする電子機器の連携システムに関する。

この種の電子機器の連携システムとしては、例えば図６に示すように、位置入力手段の例としてのタッチパネル１００２（図６で点線で示す）と表示画面１００１Ｄを備えるスマートフォンと呼ばれる高機能携帯電話端末１０００と、同様に位置入力手段の例としてのタッチパネル２００２（図６で点線で示す）及び表示画面２００１Ｄを備えるカーオーディオ装置やカーナビゲーション装置などの車載情報機器２０００とからなるシステムが知られている。

従来のこの種の連携システムにおいては、ミラーリンク（Mirror Link）規格（非特許文献１参照）が用いられて、高機能携帯電話端末１０００と車載情報機器２０００とが双方向で接続される。そして、高機能携帯電話端末１０００のタッチパネル１００２と車載情報機器２０００のタッチパネル２００２とのいずれから指示入力操作をしても、その指示入力操作に応じたアプリケーションプログラムが実行されて、高機能携帯電話端末１０００の表示画面１００１Ｄと車載情報機器２０００の表示画面２００１Ｄとに同じ実行結果が表示されるように構成されている。

このミラーリンク規格には、パソコンのリモートデスクトップとして知られているＶＮＣ（Virtual Network Computing）（非特許文献２参照）の技術も取り入れられており、当該ミラーリンクの機能を実現する場合、高機能携帯電話端末１０００と、車載情報機器２０００との両方に、専用のプログラム（ミラーリンク対応アプリケーションプログラム）をインストールするようにする。

この場合に、高機能携帯電話端末１０００及び車載情報機器２０００にインストールされるプログラムは、サーバ用ソフトウエアと、クライアント用ソフトウエアとの両方の機能を備える。そして、高機能携帯電話端末１０００と車載情報機器２０００とにおいて、操作される側で、サーバ用ソフトウエアを起動しておき、遠隔操作する側はクライアント用ソフトウエアを起動させ、接続、遠隔操作を行う。

従来は、以上のように、高機能携帯電話端末１０００と車載情報機器２０００とに、専用プログラムをインストールしてミラーリンク規格で接続することで、高機能携帯電話端末によりカーオーディオなどの車載情報機器２０００を操作したり、逆に、車載情報機器２０００から、高機能携帯電話端末１０００のアプリケーション機能やコンテンツが使用したりすることができる。そして、高機能携帯電話端末１０００と車載情報機器２０００とで、同じ表示画像を表示させることができる。

これにより、ユーザは、車の運転時に、高機能携帯電話端末１０００の表示画面１００１Ｄを見る必要がなくなり、車載情報機器２０００の表示画面２００１Ｄの表示画像を観ながら、車載情報機器２０００のタッチパネル２００２を通じた指示入力により高機能携帯電話端末１０００をコントロールしながら、様々な機能、例えばナビゲーション機能や周辺検索機能を実現できると共に、音楽などの再生を行えるようになり、非常に便利である。

「ケータイ用語の基礎知識」（k-tai.impress.co.jp/docs/column/keyword/20120904_557270.html） 「Virtual Network Computing」−ウィキペディア（ja.wikipedia.org/wiki/Virtual_Network_Computing）

ミラーリンク規格は、連携する２つの電子機器のそれぞれが、タッチパネルなどの位置入力手段を通じて入力されるアプリケーションを備えており、いずれの電子機器においても、他方の電子機器からの位置入力手段を通じた指示入力に応じた処理ができるようにする場合に、非常に便利である。

しかしながら、ミラーリンク規格の場合には、高機能携帯電話端末と車載情報機器の両方に専用のプログラムをインストールする必要があり、しかも、その両方の専用プログラムを互いに連携させるようにする必要がある。このため、従来、一般的には連携することができる電子機器は、特定のものに限定されている。

例えば、車載情報機器にミラーリンク規格対応機能を予め搭載しておくと共に、その搭載機能とミラーリンク規格で接続できるようにする高機能携帯電話端末用のプログラムを用意しておく。そして、高機能携帯電話端末を、ミラーリンクにより車載情報機器と接続する際に、インターネットを通じて、当該高機能携帯電話端末用のプログラムをダウンロードしてインストールするようにする。

この場合に、車載情報機器のミラーリンク規格対応機能と接続可能とされる高機能携帯電話端末は、特定のものに限定されており、種々の規格が存在する高機能携帯電話端末の全てが、接続可能とされる訳ではない。このため、ミラーリンク対応とするためには、ミラーリンク規格対応機能搭載の電子機器に接続可能な高機能携帯電話端末等の電子機器を一緒に購入する必要があり、非常に不便であった。

ところで、２台の電子機器の連携システムとしては、必ずしも両方の電子機器が、共にアプリケーションを実行する制御機能を有するものとする場合に限らない。例えば高機能携帯電話端末と、この高機能携帯電話端末の表示画面よりも大きい表示画面を有する表示装置とを接続して、高機能携帯電話端末の表示画面の表示画像と同じ表示画像を、表示装置の大きい表示画面に表示するようにすることが行える。この場合に、表示装置にも、タッチパネル等の位置入力手段を設けておき、この表示装置の位置入力手段での指示入力が、高機能携帯電話端末に伝達されて、あたかも、高機能携帯電話端末の位置入力手段で指示入力がなされたときと同様にすることができれば便利である。

このような連携システムの場合には、表示装置には、アプリケーションを実行する制御機能を有する必要はなく、上述したミラーリンク規格を用いることは、上述のような問題点を考慮すると、得策ではない。

この発明は、上記の点に鑑み、上述のミラーリンク規格を用いることなく、簡単な構成で、いずれの電子機器からの指示入力にも応じたアプリケーションの処理が可能であって、そのアプリケーション処理結果の表示画像を、両方の電子機器の表示画面に同様に表示することができる電子機器の連携システムを提供することを目的とする。

上記の課題を解決するために、この発明は、
第１の電子機器と、前記第１の電子機器と接続されて前記第１の電子機器との間で情報の授受を行う第２の電子機器と、前記第１の電子機器と前記第２の電子機器との間の情報の通信路中に設けられる変換装置部とからなるシステムであって、
前記第１の電子機器は、
表示画像を表示する第１の表示画面を備える第１の表示部と、
前記第１の表示画面の前記表示画像上の、使用者により指示された位置に対応する位置情報を発生する第１の位置入力手段と、
外部の電子機器との間で通信を行うための第１の通信手段と、
前記第１の通信手段に接続され、前記第１の通信手段を通じて受け付けた外部の位置入力手段からの位置情報を、前記第１の表示画面の前記表示画像上の使用者による指示位置に対応する位置情報として受け付けるＨＩＤ（Human Interface Devices）用のドライバと、
前記第１の位置入力手段からの位置情報及び前記ＨＩＤ用のドライバで受け付けた位置情報に応じた処理を実行し、その処理結果の表示画像の画像情報を前記第１の表示画面に表示させるようにする制御手段と、
前記第１の表示画面に表示している表示画像の画像情報を外部の電子機器に伝送するための画像情報出力端子と、
を備え、
前記第２の電子機器は、
表示画像を表示する第２の表示画面を備える第２の表示部と、
前記第１の電子機器からの画像情報の入力を受け付けるために、前記画像情報出力端子に接続される画像情報入力端子と、
前記画像情報入力端子に入力された前記表示画像を前記第２の表示画面に表示する表示制御手段と、
使用者による前記第２の表示画面上の指示位置に対応する位置情報を発生する第２の位置入力手段と、
前記第２の位置入力手段が発生する前記位置情報を出力するＵＳＢ（Universal Serial Bus）端子からなる位置情報出力端子と、
を備え、
前記変換装置部は、
前記第２の電子機器の前記位置情報出力端子からの前記位置情報を受けて、前記ＨＩＤ用のドライバで受け付け可能な情報に変換する変換手段と、
前記変換手段により変換された前記位置情報を、前記第１の通信手段で受信されるように送信する第２の通信手段と、
を備えることを特徴とする電子機器の連携システムを提供する。

上述の構成の電子機器の連携システムにおいては、第１の電子機器において、第１の表示画面の表示画像上で使用者による位置指示がなされたときには、第１の位置入力手段から発生する位置情報に基づいて制御手段で処理された結果の表示画像が、第１の表示画面に表示されると共に、その表示画像の画像情報が、画像情報出力端子を通じて、第２の電子機器の画像情報入力端子に供給される。これにより第２の電子機器の第２の表示画面に、第１の表示画面と同じ表示画像が表示される。

また、第２の電子機器において、第２の表示画面の表示画像上で使用者による位置指示がなされたときには、第２の位置入力手段から発生する位置情報が、位置情報出力端子を通じて変換装置部に供給される。変換装置部は、位置情報出力端子からの位置情報を、第１の電子機器のＨＩＤ用のドライバで受け付け可能な情報に変換手段により変換して、第２の通信手段を通じて、第１の電子機器の第１の通信手段に送る。

第１の電子機器では、第１の通信手段で受信した第２の通信手段からの位置情報を、ＨＩＤ用のドライバで受け付ける。そして、第１の電子機器の制御手段は、このＨＩＤ用のドライバで受け付けられた位置情報に基づいた処理を実行し、その処理結果の表示画像を第１の表示画面に表示すると共に、その表示画像の画像情報を、画像情報出力端子を通じて、第２の電子機器の画像情報入力端子に供給する。これにより第２の電子機器の第２の表示画面に、第１の表示画面と同じ表示画像が表示される。

この発明による電子機器の連携システムにおいては、以上のようにして、第１の電子機器の位置入力手段で指示入力されたときだけでなく、第２の電子機器の位置入力手段で指示入力されたときにも、第１の電子機器の制御手段で同様に処理がなされる。そして、その処理結果の表示画像が、第１の電子機器の第１の表示画面に表示されると共に、第２の電子機器に伝送されて、第２の表示画面に表示される。

この場合に、第２の電子機器の位置入力手段で受け付けられた位置情報が、変換装置部で第１の電子機器に設けられている汎用のＨＩＤ用のドライバで処理可能な位置情報に変換されて、第１の電子機器に送信される。したがって、第１の電子機器では、ＨＩＤ用のドライバを備えるだけで、特別のソフトウエアプログラムを必要としない。そして、この発明では、第１の電子機器が汎用性の高いＨＩＤ用のドライバを備えていることを満足していれば、第１の電子機器と第２の電子機器とは特定の連携するための特別の関係性を有する必要がない。したがって、第２の電子機器と連携する第１の電子機器としては、ＨＩＤ用のドライバを備えていて、制御手段が、そのＨＩＤドライバで受け付けた指示位置の情報に基づいて、アプリケーション機能を実行するように構成されていれば、どのような電子機器であってよい。

この発明による電子機器の連携システムによれば、ミラーリンク規格を用いることなく、簡単な構成で、いずれの電子機器からの指示入力にも応じたアプリケーションの処理が可能であって、そのアプリケーション処理結果の表示画像を、両方の電子機器の表示画面に同様に表示することができる電子機器の連携システムを提供することができる。

この発明による電子機器の連携システムの実施形態の全体の構成例を示す図である。 第１の電子機器の例としての高機能携帯電話端末の構成例を示すブロック図である。 第２の電子機器の例としての表示装置の構成例を示すブロック図である。 変換装置部の構成例を示す図である。 変換装置部における座標情報補正処理を説明するために用いる図である。 従来の電子機器の連携システムの一例を説明するための図である。

この発明による電子機器の連携システムの実施形態を、図１を参照しながら説明する。図１は、この実施形態の電子機器の連携システムの全体の構成例を示す図である。

この図１に示す電子機器の連携システムの実施形態においては、第１の電子機器が、スマートフォンと呼ばれる高機能携帯電話端末１で構成され、第２の電子機器が、表示装置２の構成とされる。

この例においては、高機能携帯電話端末１は、表示画面１１Ｄを備える表示部１１と、表示画面１１Ｄに重畳して設けられている位置入力手段の例としてのタッチパネル１２（図１では点線で図示）とを備えると共に、種々のアプリケーションを実行する処理制御機能部（図１では図示は省略）を備える。表示部１１は、例えばＬＣＤ（Liquid Crystal Display；液晶ディスプレイ）で構成される。

そして、この実施形態の高機能携帯電話端末１は、タッチパネル１２で検知される使用者の指ＦＧによりタッチ指示（指示入力）された表示画面１１Ｄ上の位置情報を受け付けるＨＩＤ（Human Interface Device）ドライバを備えている。処理制御機能部は、このＨＩＤドライバで受け付けた位置情報に基づいて、使用者により指示入力されたものが何であるかを判別し、その判別結果に応じて基づいて、指示されたアプリケーションを起動したり、実行中のアプリケーションについての制御処理を実行したりする。なお、一般に、高機能携帯電話端末は、上述のＨＩＤドライバを標準で装備している。

さらに、この実施形態の高機能携帯電話端末１は、Ｗｉ−Ｆｉ（登録商標）（Wireless−Fidelity）通信機能を備える。

また、表示装置２は、高機能携帯電話端末１の表示画面１１Ｄに比較して大画面の表示画面２１Ｄを備える表示部２１と、表示画面２１Ｄに重畳して設けられている位置入力手段の例としてのタッチパネル２２（図１では点線で図示）とを備える表示装置２を備える。表示部２１は、例えば、４６インチサイズあるいは５５インチサイズの高精細度のＬＣＤで構成される。表示装置２は、表示画面２１Ｄに表示画像を表示する機能と、位置入力手段を構成するタッチパネル２２に対する使用者の指示入力を検出する機能を備えるだけで、その他のアプリケーションの処理機能は備えない。

なお、この例では、高機能携帯電話端末１のタッチパネル１２及び表示装置２のタッチパネル２２は、共に静電容量方式の位置検出装置で構成されており、利用者が手の指で表示画面上においてタッチ指示した位置を検出することができるものである。

そして、この実施形態では、高機能携帯電話端末１の表示画面１１Ｄに表示される画像情報が、ＭＨＬ（Mobile High-definition Link）によるインターフェース手段を介して表示装置２に伝送されるように、高機能携帯電話端末１と表示装置２とが接続される。

すなわち、図１の例では、ＭＨＬ変換アダプタ３１のＵＳＢ（Universal Serial Bus）端子３１ａが、高機能携帯電話端末１が備えるＵＳＢ端子１３に接続される。そして、ＨＤＭＩ（登録商標）（High-definition Multimedia Interface）ケーブル３２の一方のＨＤＭＩ端子３２ａがＭＨＬ変換アダプタ３１のＨＤＭＩ端子３１ｂに接続され、他方のＨＤＭＩ端子３２ｂが、表示装置２のＨＤＭＩ端子２３に接続される。なお、ＭＨＬ変換アダプタ３１とＨＤＭＩケーブル３２とを用いるのではなく、１個のＭＨＬケーブルを用いて、高機能携帯電話端末１と表示装置２とを接続するようにすることも勿論できる。高機能携帯電話端末１と表示装置２とが、以上のように接続されることにより、表示装置２の表示画面２１Ｄには、高機能携帯電話端末１の表示画面１１Ｄの表示画像と同じ表示画像が表示される。

そして、この実施形態では、表示装置２のタッチパネル２２で検知される使用者の指ＦＧによりタッチ指示された表示画面２１Ｄへの位置情報が、変換装置部４により、高機能携帯電話端末１のＨＩＤドライバで受け付け可能な情報に変換されて、高機能携帯電話端末１に送信される。

この例では、変換装置部４と表示装置２とはＵＳＢケーブル５により接続される。すなわち、変換装置部４にはＵＳＢケーブル５が接続されて構成されており、このＵＳＢケーブル５のＵＳＢ端子５ａが、表示装置２のＵＳＢ端子２４に接続される。ＵＳＢ端子２４には、表示装置２のタッチパネル２２で検出された指ＦＧにより指示された位置の位置情報が出力される。

そして、この実施形態においては、変換装置部４は、表示装置２から受信した位置情報をＨＩＤドライバで受け付け可能な情報に変換したものを、高機能携帯電話端末１が備えるＷｉ−Ｆｉ（登録商標）通信機能により受信できるように、無線送信する。

次に、以上説明したこの実施形態の電子機器の連携システムを構成する高機能携帯電話端末１、表示装置２、変換装置部４のそれぞれの内部的な電子回路の構成例について、以下に説明する。

［高機能携帯電話端末１の構成例］
図２は、この実施形態の高機能携帯電話端末１の内部回路構成例を示すブロックである。この例の高機能携帯電話端末１は、コンピュータからなる制御部１０１に対してシステムバス１００を介して、メモリ１０２と、携帯電話通信回路１０３と、表示部１１と、表示画像生成部１０４と、ＵＳＢインターフェース１０５と、タッチパネル１２が接続されるＨＩＤドライバ１０６と、無線通信部１０７と、ＨＩＤ伝達モジュール１０８とが、それぞれ接続されて構成されている。

制御部１０１は、処理制御機能部を構成するもので、メモリ１０２に記憶されるアプリケーションプログラムを実行することで、種々のアプリケーション機能を実行するように制御する。

メモリ１０２は、上記のアプリケーションプログラムを記憶するほか、それぞれのアプリケーション機能の処理において必要となるデータを格納する。また、制御部１０１が処理を実行する際のワークエリアとしても働く。

携帯電話通信回路１０３は、携帯電話網を通じて携帯電話通信を行うために用いられるだけでなく、携帯電話網を介してインターネットに接続して、インターネット上の種々のＷｅｂサイト（サーバ装置）にアクセスするためにも用いられる。すなわち、制御部１０１は、使用者による指示入力に応じてタッチパネル１２で検出された当該指示入力位置の位置情報に基づいて判別される処理（アプリケーション）として、上記のメモリ１０２に格納されているアプリケーションプログラムや、アクセス時点においてサーバ装置から提供されるアプリケーションプログラムを実行することで、インターネットを通じて接続されるＷｅｂサイトのサーバ装置と協働する処理を行うようにする。なお、この携帯電話通信回路１０３には、送話器としてのマイクロフォン１０９と、受話器としてのスピーカ１１０が接続されている。

表示画像生成部１０４は、制御部１０１の制御の下に、携帯電話通信時の表示画像を生成して表示画面１１Ｄに表示する。また、制御部１０１は、使用者によるタッチパネル１２を通じた指示入力に基づいて、Ｗｅｂブラウザを起動する。表示画像生成部１０４は、制御部１０１の制御の下に、ブラウザ画面を生成し、使用者によるタッチパネル１２を通じた指示入力により選択指定されたアプリケーション機能の処理結果の表示画像情報を生成し、表示画面１１Ｄに表示する。そして、この実施形態では、表示画像生成部１０４で生成された表示画像情報は、制御部１０１の制御に従って、ＵＳＢインターフェース１０５に転送される。

ＵＳＢインターフェース１０５は、ＵＳＢ端子１３に接続されており、表示画像生成部１０４から転送されている表示画像情報を、このＵＳＢ端子１３を通じて出力する。すなわち、この例では、ＵＳＢ端子１３は、画像情報出力端子となる。

ＨＩＤドライバ１０６は、これに接続されているタッチパネル１２用のＨＩＤプロファイルモジュールを備えており、タッチパネル１２で検出された使用者によりタッチ指示された表示画面１１Ｄ上の位置情報を、指示入力情報として受け付ける機能を備えている。

無線通信部１０７は、この例では、Ｗｉ−Ｆｉ（登録商標）規格の無線通信を行う。高機能携帯電話端末１は、通常、この無線通信部１０７の機能を標準装備している。この実施形態では、この無線通信部１０７は、受信した情報をＨＩＤ伝達モジュール１０８を通じてＨＩＤドライバ１０６に供給するように構成されている。このＨＩＤ伝達モジュール１０８により、無線通信部１０７で受信した情報が、変換装置部４からの表示装置２のタッチパネル２２で検出された使用者によりタッチ指示された位置の位置情報であって、ＨＩＤドライバ１０６で受け付け可能な情報であるときには、ＨＩＤドライバ１０６は、当該変換装置部４からの位置情報を、タッチパネル１２で検出された使用者により指示された位置の位置情報と同様に取り扱う。

なお、ＨＩＤ伝達モジュール１０８は、高機能携帯電話端末１に標準装備するようにしてもよいが、一般的には、必要に応じて、インターネットを通じて所定のＷｅｂサイトからソフトウエアプログラムとして取得して、高機能携帯電話端末１に装備させるようにするものである。

なお、図２において、携帯電話通信回路１０３の一部の処理機能、また、表示画像生成部１０４、ＵＳＢインターフェース１０５、ＨＩＤドライバ、ＨＩＤ伝達モジュール１０８の処理機能は、制御部１０１がメモリ１０２に記憶されるプログラムを実行することにより、ソフトウエア機能処理として構成することもできるものである。

［表示装置２の構成例］
図３は、この実施形態の表示装置２の内部回路構成例を示すブロックである。この例の表示装置２は、コンピュータからなる制御部２０１に対してシステムバス２００を介して、メモリ２０２と、ＨＤＭＩインターフェース２０３と、表示部２１と、タッチパネル２２が接続されるタッチパネルインターフェース２０４と、ＵＳＢインターフェース２０５とが、それぞれ接続されて構成されている。

制御部２０１は、この表示装置２の表示部２１の表示画面の表示制御機能及びタッチパネル２２を通じて入力される使用者の指示入力情報の処理制御機能を有する。メモリ２０２には、表示制御機能及び指示入力情報の処理制御機能を実行するためのアプリケーションプログラムが記憶されている。前述したように、この表示装置２は、その他のアプリケーション機能は備えていない。

ＨＤＭＩインターフェース２０３は、ＨＤＭＩ端子２３に接続されている。この実施形態では、ＨＤＭＩ端子２３は、画像情報入力端子となる。

タッチパネルインターフェース２０４は、使用者による指示入力に応じてタッチパネル２２で検出された表示画面２１Ｄ上の指示入力位置の位置情報を受けて、システムバス２００に出力する。制御部２０１は、タッチパネルインターフェース２０４から受け取ったタッチ指示位置の位置情報をＵＳＢインターフェース２０５に転送する。

ＵＳＢインターフェース２０５は、ＵＳＢ端子２４に接続されており、受け取った位置情報を、ＵＳＢ端子２４を通じて送出するようにする。この実施形態では、ＵＳＢ端子２４は、位置情報出力端子を構成する。

なお、図３において、ＨＤＭＩインターフェース２０３、タッチパネルインターフェース２０４、ＵＳＢインターフェース２０５の処理機能は、制御部２０１がメモリ２０２に記憶されるプログラムを実行することにより、ソフトウエア機能処理として構成することもできるものである。

［変換装置部４の構成例］
図４は、この実施形態の変換装置部４の内部回路構成例を示すブロックである。この例の変換装置部４は、コンピュータからなる制御部４０１に対してシステムバス４００を介して、メモリ４０２と、ＵＳＢインターフェース４０３と、位置情報補正部４０４と、ＨＩＤ変換部４０５と、無線通信部４０６とが、それぞれ接続されて構成されている。

制御部４０１は、メモリ２０２に記憶されているプログラムに従って、この変換装置部４の変換処理の制御を行う機能を有する。メモリ２０２は、変換処理のためのワークエリアとしても使用される。

ＵＳＢインターフェース４０３は、ＵＳＢケーブル５を通じてＵＳＢ端子５ａに接続されており、表示装置２から受け取った位置情報を、位置情報補正部４０４に転送する。

位置情報補正部４０４は、高機能携帯電話端末１の表示部１１の表示画面１１Ｄのサイズと、表示装置２の表示部２１の表示画面２１Ｄのサイズとに応じた位置情報の座標値の補正処理を行う。すなわち、タッチパネル１２及びタッチパネル２２において、指示入力を受けることができる領域範囲は、表示画面１１Ｄ及び表示画面２１Ｄのサイズとほぼ等しいので、タッチパネル１２とタッチパネル２２とにおける指示入力範囲のサイズの違いに応じた補正を、表示画面１１Ｄのサイズと表示画面２１Ｄのサイズとに応じて行う。この位置情報補正部４０４における補正処理を、図５を参照して説明する。

図５（Ａ）に示すように、高機能携帯電話端末１の表示画面１１Ｄの左端のＸ座標をＸｐ１とし、右端のＸ座標をＸｐ２とする。また、高機能携帯電話端末１の表示画面１１Ｄの下端のＹ座標をＹｐ１とし、上端のＹ座標をＹｐ２とする。

一方、表示装置２の表示画面２１Ｄの左端のＸ座標をＸｔ１とし、右端のＸ座標をＸｔ２とする。また、表示装置２の表示画面２１Ｄの下端のＹ座標をＹｔ１とし、上端のＹ座標をＹｔ２とする。

これらのＸ座標Ｘｐ１，Ｘｐ２及びＸｔ１，Ｘｔ２、また、Ｙ座標Ｙｐ１，Ｙｐ２及びＹｔ１，Ｙｔ２の値は、連携する２つの電子機器としての高機能携帯電話端末１の表示画面１１Ｄのサイズ及び表示装置２の表示画面２１Ｄのサイズに応じて、変換装置部４には、予め設定されている。なお、変換装置部４に、これらのＸ座標Ｘｐ１，Ｘｐ２及びＸｔ１，Ｘｔ２、また、Ｙ座標Ｙｐ１，Ｙｐ２及びＹｔ１，Ｙｔ２の値を入力する手段を設けておき、後から、連携する２台の電子機器の表示画像のそれぞれのサイズに応じて入力するようにしてもよい。

そして、高機能携帯電話端末１のタッチパネル１２の座標を（Ｘ，Ｙ）とし、表示装置２のタッチパネル２２の座標を（Ｘｉｎ，Ｙｉｎ）とすると、
Ｘ＝Ｘｐ１＋（Ｘｐ２−Ｘｐ１）×Ｘｉｎ／（Ｘｔ２−Ｘｔ１） ・・・（式１）
Ｙ＝Ｙｐ１＋（Ｙｐ２−Ｙｐ１）×Ｙｉｎ／（Ｙｔ２−Ｙｔ１） ・・・（式２）
となる。すなわち、位置情報補正部４０４は、上記の（式１）及び（式２）により、表示装置２から受け取った位置情報の座標値（Ｘｉｎ，Ｙｉｎ）を補正して、補正後の位置情報の座標値（Ｘ，Ｙ）を生成する。そして、位置情報補正部４０４は、補正して生成した位置情報をＨＩＤ変換部４０５に転送する。

ＨＩＤ変換部４０５は、表示装置２から受け取った位置情報を、高機能携帯電話端末１のＨＩＤドライバ１０６で受け付け可能な位置情報に変換する。そして、ＨＩＤ変換部４０５は、変換後の位置情報を、無線通信部４０６を通じて、高機能携帯電話端末１に送信する。

無線通信部４０６は、この実施形態では、高機能携帯電話端末１の無線通信部１０７に対応して、Ｗｉ−Ｆｉ規格（登録商標）の無線通信を行う構成とされる。

なお、図４において、ＵＳＢインターフェース４０３、位置情報補正部４０４、ＨＩＤ変換部４０５の処理機能は、制御部４０１がメモリ４０２に記憶されるプログラムを実行することにより、ソフトウエア機能処理として構成することもできるものである。

［この実施形態の電子機器の連携システムにおける連携動作の説明］
先ず、例えば、高機能携帯電話端末１の表示画面１１Ｄにアプリケーションメニューが表示されている状態において、使用者がそのアプリケーションメニューのうちの現在地周辺の地図表示の項目を選択したとする。すると、高機能携帯電話端末１の制御部１０１は、タッチパネル１２を通じた当該使用者の選択指示入力操作により指示された位置情報を取得し、その位置情報から、現在地周辺の地図表示の項目が選択されたと判別する。そして、制御部１０１は、その判別結果に基づいて、現在地周辺の地図表示のアプリケーションプログラムを起動し、携帯電話通信回路１０３を通じ、携帯電話網を通じてインターネットに接続されている地図サイトのサーバ装置にアクセスし、当該サーバ装置と協働することにより、当該地図サイトから現在地周辺の地図情報を取得して、表示画面１１Ｄに表示するように制御する。

また、制御部１０１は、表示画面１１Ｄに表示されている表示画像の画像情報を、ＵＳＢインターフェース１０５を通じて出力する。このＵＳＢインターフェース１０５が接続されている高機能携帯電話端末１のＵＳＢ端子１３には、ＭＨＬアダプタ３１のＵＳＢ端子３１ａが接続されている。そして、ＭＨＬアダプタ３１は、ＨＤＭＩケーブル３２を通じて表示装置２に接続されている。したがって、このＵＳＢインターフェース１０５を通じて出力された画像情報は、ＭＨＬアダプタ３１及びＨＤＭＩケーブル３２を通じて、表示装置２に供給される。

表示装置２では、制御部２０１が、ＨＤＭＩインターフェース２０３を通じて、画像情報を取り込み、表示部２１の表示画面２１Ｄに表示する。これにより、表示装置２の表示画面２１Ｄには、高機能携帯電話端末１の表示画面１１Ｄに表示されている表示画像と同じ表示画像が、画面サイズに違いに応じて拡大されて表示される。

図示は省略するが、表示画面１１Ｄ及び２１Ｄには、このとき、例えば地図の拡大／縮小指示バー表示や、周辺検索などのアプリケーションの起動用のアイコンボタンなどが、地図画像に重畳して表示されている。これらの拡大／縮小指示バー表示やアイコンボタンを使用者が選択指定すると、高機能携帯電話端末１の制御部１０１と、地図サイトのサーバ装置とが協働することで、対応するアプリケーション機能処理が行なわれる。

そこで、使用者が、表示装置２の表示画面２１Ｄにおいて、例えば周辺検索のアイコンボタンを操作指示したとする。すると、表示装置２の制御部２０１は、タッチパネル２２を通じて当該使用者の指示入力位置の情報を取得し、その指示入力位置の位置情報を、ＵＳＢインターフェース２０５を通じて、ＵＳＢ端子２４に出力する。このＵＳＢ端子２４には、ＵＳＢケーブル５を介して変換装置部４が接続されているので、表示装置２からの位置情報は変換装置部４に送られる。

変換装置部４では、制御部４０１が、ＵＳＢインターフェース４０３を通じて表示装置２からの位置情報を取り込み、その取り込んだ位置情報の座標値を、前述したようにして、位置情報補正部４０４で表示装置２の表示画面２１Ｄのサイズと高機能携帯電話端末１の表示画面１１Ｄのサイズの違いに応じて補正する。そして、変換装置部４では、その補正後の位置情報をＨＩＤ変換部４０５で、高機能携帯電話端末１のＨＩＤドライバ１０６で受け付け可能な位置情報に変換する。そして、変換装置部４の制御部４０１は、ＨＩＤ変換部４０５からの位置情報を、無線通信部４０６を通じて、高機能携帯電話端末１の無線通信部１０７に送信する。

高機能携帯電話端末１の制御部１０１は、無線通信部１０７を通じて、この変換装置部４からの位置情報を取り込み、ＨＩＤ伝達モジュール１０８を通じてＨＩＤドライバ１０６に供給するように制御する。

このとき、前述したように、表示装置２の表示画面２１Ｄに表示されている表示画像と、高機能携帯電話端末１の表示画面１１Ｄに表示されている表示画像とは同一である。したがって、ＨＩＤドライバ１０６にＨＩＤ伝達モジュール１０８を通じて入力される位置情報は、高機能携帯電話端末１の表示画面１１Ｄに表示されている表示画像中の周辺検索のアイコンボタンが使用者により指示操作されたときにタッチパネル１２を通じてＨＩＤドライバ１０６に入力される位置情報と同一となる。

よって、制御部１０１は、ＨＩＤドライバ１０６を通じて、表示画像中の周辺検索のアイコンボタンが使用者により指示操作されたと判別し、起動中のアプリケーションプログラムに基づいて、携帯電話通信回路１０３を通じ、インターネットを通じて地図サイトに周辺検索要求を送る。そして、その周辺検索要求に応じて地図サイトから送られてくる情報を、携帯電話通信回路１０３を通じて受信し、表示画像生成部１０４において、周辺検索結果の表示画像を生成させるようにする。

そして、制御部１０１は、この表示画像生成部１０４で生成された周辺検索結果の表示画像の画像情報を、表示部１１に送り、表示画面１１Ｄに表示させると共に、ＵＳＢインターフェース１０５を通じて出力する。したがって、表示画像生成部１０４で生成された周辺検索結果の表示画像の画像情報は、ＵＳＢ端子１３に接続されているＭＨＬアダプタ３１及びＭＨＬアダプタ３１に接続されているＨＤＭＩケーブル３２を通じて表示装置２に供給される。

表示装置２では、制御部２０１が、ＨＤＭＩインターフェース２０３を通じて、画像情報を取り込み、表示部２１の表示画面２１Ｄに表示する。これにより、表示装置２の表示画面２１Ｄには、高機能携帯電話端末１の表示画面１１Ｄに表示されている周辺検索結果の表示画像と同じ表示画像が、画面サイズに違いに応じて拡大されて表示される。

以上のようにして、上述の実施形態によれば、高機能携帯電話端末１が備えるアプリケーション機能は、当該高機能携帯電話端末１の表示画面１１Ｄに重畳配置されているタッチパネル１２を通じた使用者の指示操作入力によってのみならず、表示装置２の表示画面２１Ｄに重畳配置されているタッチパネル２２を通じた使用者の指示操作入力によっても、実行される。

したがって、使用者は、高機能携帯電話端末１の表示画面１１Ｄの表示画像と同じ表示画像を、表示装置２の大型の表示画面２１Ｄにおいて観視できると共に、当該表示装置２の表示画面２１Ｄに重畳配置されているタッチパネル２２を通じて操作指示をすることにより、高機能携帯電話端末１が備えるアプリケーション機能の表示画像を、表示画面２１Ｄに表示させることができる。これにより、あたかも、高機能携帯電話端末１が備えるアプリケーション機能を表示装置２自身が備えているような操作感を使用者に与えることができる。

そして、上述の実施形態においては、表示装置２側には、高機能携帯電話端末１との連携のための特別のアプリケーションプログラムは不要である。また、高機能携帯電話端末１においても、ＨＩＤドライバ１０６を備えると共に、ＨＩＤ伝達モジュール１０８を備えるだけの簡単な構成でよいという効果がある。すなわち、上述の実施形態のシステムにおいては、従来のミラーリンク規格のアプリケーションプログラムのような連携のための特別のプログラムを、高機能携帯電話端末１及び表示装置２にインストールする必要はなく、システム全体の構成が簡単となる。

このため、上述の実施形態によれば、連携する高機能携帯電話端末１（第１の電子機器）と、表示装置２（第２の電子機器）とには、互いに連携するようにするためのミラーリンク規格のようなアプリケーションプログラムが不要であることから、連携する第１の電子機器と第２の電子機器とに制限はなく、どのような電子機器であっても、連携が可能であるという効果がある。

［他の実施形態又は変形例］
以上説明した実施形態においては、変換装置部４と高機能携帯電話端末１との間の無線通信手段としては、Ｗｉ−Ｆｉ（登録商標）規格の無線通信を利用するようにした。このため、高機能携帯電話端末１には、ＨＩＤ伝達モジュール１０８を搭載する必要があった。しかし、変換装置部４と高機能携帯電話端末１との間の無線通信手段としては、Bluetooth（登録商標）規格の近距離無線通信を利用するにしてもよい。

最近の高機能携帯電話端末は、当該Bluetooth（登録商標）規格の近距離無線通信機能を搭載しているものも多い。そして、Bluetooth（登録商標）規格の近距離無線通信機能を搭載している高機能携帯電話端末が備えるＨＩＤドライバは、Bluetooth（登録商標）用のＨＩＤプロファイルモジュールも標準装備していることが多く、上述の実施形態のようなＨＩＤ伝達モジュール１０８を不要とすることができる。

なお、第１の電子機器と第２の電子機器との間における位置入力手段を通じて入力された位置情報の伝送方法としては、無線に限らず、有線であってもよい。

また、上述の実施形態においては、位置入力手段の例としては、静電結合方式のタッチパネル１２及び２２を用いるようにしたが、位置入力手段としては、静電結合方式のタッチパネルに限られるものではなく、例えば電磁誘導方式や抵抗検出方式の位置入力手段を用いてもよい。また、位置入力手段としては、マウスやタッチパッド、トラックボール、ジョイスティックなどのポインティングデバイスを用いてもよい。また、第２の電子機器の位置入力手段からの位置情報は、変換装置部で、第１の電子機器が備えるＨＩＤドライバで受け付け可能な情報に変換されるので、第１の電子機器と第２の電子機器とで、位置入力手段は同種のものとする必要はなく、異なる種類の位置入力手段であってもよい。

また、上述の実施形態では、連携する第１の電子機器が高機能携帯電話端末で、第２の電子機器が表示装置の場合としたが、これに限られるものではないことは勿論である。そして、第２の電子機器は、上述の実施形態では、アプリケーション機能の処理制御を行わず、表示画面において表示画像を表示すると共に、位置入力手段の例としてのタッチパネルを通じた使用者による指示入力を受け付ける機能のみを有する表示装置としたが、アプリケーション機能の処理制御を行う機能を備えるものであってもよい。ただし、その場合には、第２の電子機器で、そのアプリケーション機能の処理制御を行う場合には、第２の電子機器は、第１の電子機器との連携動作は行わない。

また、第１の電子機器と第２の電子機器との間における表示画像の画像情報の伝送方法も、上述の実施形態では、第１の電子機器が高機能携帯電話端末の構成であったので、ＭＨＬを用いる方法としてが、これに限られるものではなく、第１の電子機器と第２の電子機器の画像情報の入出力の端子の構成に応じて、種々の方法を用いることができる。

また、上述の実施形態では、変換装置部４は、第１の電子機器と第２の電子機器とは別体のものとしたが、第２の電子機器に組み込まれていてもよい。

１…高機能携帯電話端末、２…表示装置、４…変換装置部、１１…表示部、１１Ｄ…表示画面、１２…タッチパネル、１３…ＵＳＢ端子（画像情報出力端子の例）、２１…表示部、２１Ｄ…表示画面、２２…タッチパネル、２３…ＨＤＭＩ端子（画像情報入力端子の例）、２４…ＵＳＢ端子（位置情報出力端子の例）、１０６…ＨＩＤドライバ、１０７…無線通信部、４０４…座標情報補正部、４０５…ＨＩＤ変換部、４０６…無線通信部

Claims (8)

1. 第１の電子機器と、前記第１の電子機器と接続されて前記第１の電子機器との間で情報の授受を行う第２の電子機器と、前記第１の電子機器と前記第２の電子機器との間の情報の通信路中に設けられる変換装置部とからなるシステムであって、
   前記第１の電子機器は、
   表示画像を表示する第１の表示画面を備える第１の表示部と、
   前記第１の表示画面の前記表示画像上の、使用者により指示された位置に対応する位置情報を発生する第１の位置入力手段と、
   外部の電子機器との間で通信を行うための第１の通信手段と、
   前記第１の位置入力手段からの位置情報及び前記第１の通信手段を通じて受け付けた外部の位置入力手段からの位置情報を、前記第１の表示画面の前記表示画像上の使用者による指示位置に対応する位置情報として受け付けるＨＩＤ（Human Interface Devices）ドライバと、
   前記第１の位置入力手段からの位置情報及び前記ＨＩＤドライバで受け付けた位置情報に応じた処理を実行し、その処理結果の表示画像の画像情報を前記第１の表示画面に表示させるようにする制御手段と、
   前記第１の表示画面に表示している表示画像の画像情報を外部の電子機器に伝送するための画像情報出力端子と、
   を備え、
   前記第２の電子機器は、
   表示画像を表示する第２の表示画面を備える第２の表示部と、
   前記第１の電子機器からの画像情報の入力を受け付けるために、前記画像情報出力端子に接続される画像情報入力端子と、
   前記画像情報入力端子に入力された前記表示画像を前記第２の表示画面に表示する表示制御手段と、
   使用者による前記第２の表示画面上の指示位置に対応する位置情報を発生する第２の位置入力手段と、
   前記第２の位置入力手段が発生する前記位置情報を出力する位置情報出力端子と、
   を備え、
   前記変換装置部は、
   前記第２の電子機器の前記位置情報出力端子からの前記位置情報を受けて、前記ＨＩＤドライバで受け付け可能な情報に変換する変換手段と、
   前記変換手段により変換された前記位置情報を、前記第１の通信手段で受信されるように送信する第２の通信手段と、
   を備えることを特徴とする電子機器の連携システム。
2. 前記第１の表示画面と前記第２の表示画面とは、画面サイズが異なるものであり、前記変換装置部は、前記位置情報を前記画面サイズの異なりに応じて補正する手段を備える
   ことを特徴とする請求項１に記載の電子機器の連携システム。
3. 前記第１の電子機器の前記制御手段は、前記位置情報に応じた処理として、インターネットを通じて接続されるサーバ装置と協働する処理を行うことが可能とされている
   ことを特徴とする請求項１または請求項２に記載の電子機器の連携システム。
4. 前記第１の電子機器は、前記第１の表示画面に重ねるように前記第１の位置入力手段が設けられている携帯電話端末であり、前記第２の電子機器は、前記第２の表示画面に重ねるように前記第２の位置入力手段が設けられている表示装置である
   ことを特徴とする請求項１〜請求項３に記載の電子機器の連携システム。
5. 前記第１の位置入力手段及び前記第２の位置入力手段は、タッチパネルで構成されている
   ことを特徴とする請求項４に記載の電子機器の連携システム。
6. 前記変換装置部は、前記第２の電子機器に対して外付けされている
   ことを特徴とする請求項１〜請求項５に記載の電子機器の連携システム。
7. 前記第１の通信手段及び前記第２の通信手段は、ブルートゥース（登録商標）規格の無線通信手段である
   ことを特徴とする請求項１〜７のいずれかに記載の電子機器の連携システム。
8. 前記第１の通信手段及び前記第２の通信手段は、Ｗｉ−Ｆｉ（登録商標）規格の無線通信手段であり、
   前記第１の電子機器は、前記第１の通信手段の受信出力を前記ＨＩＤドライバに伝達するための手段を、更に備える
   ことを特徴とする請求項１〜７のいずれかに記載の電子機器の連携システム。
   

Images