JP2012172910A - 室内環境調整用機器の操作システム - Google Patents

Abstract

【課題】 室内環境調整用機器が複数あっても各機器を的確に制御する。
【解決手段】 室内環境調整用の機器１１〜１５に対する操作手段であって、上記機器との間で通信を行う通信手段と室内撮影のためのカメラとカメラで映した画像を表示するディスプレー１０とを備えている携帯機器１と、上記ディスプレーに表示された画像中に映っている機器の像を上記機器に対応付ける特定手段とを有する。上記携帯機器は、上記ディスプレーに表示された画像中に映っている機器の像に、上記特定手段で特定された機器に関する操作画面をアノテーションとして重ね合わせて表示し、且つ、上記アノテーションに対して加えられた操作の情報を上記特定された機器に対して送信する。
【選択図】 図１

Description

本発明は、空調機器、暖房機器、加湿器、照明器具といった室内環境調整用機器の操作システムに関するものである。

室内環境は、空調機器、暖房機器、加湿器、照明器具といった複数の機器で調整されるが、これらの各機器のリモート制御を個別に行う場合、各機器毎にリモートコントローラが必要となり、その操作もきわめて煩わしいことになる。

このために特開２００７−１９２４７２号公報（特許文献１）において、複数の機器を単一の制御手段の制御下におき、単一の制御手段に対する操作だけで複数の機器を制御できるようにしたものが提案されている。しかし、制御する機器が増えたり、同種の機器が複数存在する場合、操作対象となる機器を特定することが困難となる。

特開２０００−２５３１２３号公報には、多機能携帯電話を複数の機器のリモートコントローラとして利用する案が示されているが、このものにおいても、制御する機器が増えたり、同種の機器が複数存在すると、操作対象となる機器を特定することが困難となる。

特開２００７−１９２４７２号公報

本発明はこのような点に鑑みなされたものであって、室内環境調整用機器が複数あっても各機器を的確に制御することができる室内環境調整用機器の操作システムを提供することを課題とするものである。

本発明は、室内環境調整用の機器に対する操作手段であって、上記機器との間で通信を行う通信手段と室内撮影のためのカメラとカメラで映した画像を表示するディスプレーとを備えている携帯機器と、上記ディスプレーに表示された画像中に映っている機器の像を上記機器に対応付ける特定手段とを有しており、上記携帯機器は、上記ディスプレーに表示された画像中に映っている機器の像に、上記特定手段で特定された機器に関する操作画面をアノテーションとして重ね合わせて表示するものであり、且つ、上記アノテーションに対して加えられた操作の情報を上記特定された機器に対して送信するものであることに特徴を有している。

室内環境情報を検知する室内環境センサを備えており、上記携帯機器は室内環境センサから得られる室内環境情報をアノテーションとしてディスプレーに上記操作画面アノテーションと共に表示するものとしてもよく、更には複数の室内環境調整用の機器を集中制御する制御ユニットを備えており、携帯機器は該制御ユニットを通じて各室内環境調整用の機器に対する操作を行うものであってもよい。

本発明においては、室内に同一手段の機器が複数ある場合でも、機器とその操作の対応関係がディスプレーの画面上で明確になるために、その直感性によってユーザーの操作性を向上させることができる。

本発明の実施の形態の一例における動作説明図である。 同上の動作説明図である。 同上のブロック図である。 同上の携帯機器の画面表示の一例を示す説明図である。 同上の携帯機器の画面表示の他例を示す説明図である。 同上の携帯機器の画面表示のさらに他例を示す説明図である。 同上の携帯機器の画面表示の別の例を示す説明図である。 同上の携帯機器の画面表示のさらに別の例を示す説明図である。

以下、本発明を実施の形態の一例について説明すると、図３は本発明に係る操作システムの全体を示しており、図中の１１〜１５はいずれも室内環境調整用機器であって、ここではサーキュレーションファン１１、床暖房機器１２、エアコン（空調機器）１３、照明器具１４，１５を例として示している。また、ここにおけるサーキュレーションファン１１には室外（屋外）温度センサ２１、天井近傍温度センサ２２、床面近傍温度センサ２３、壁面温度センサ２４、湿度センサ２５が室内環境用センサとして接続されており、床暖房機器１２には床温度センサ２６が室内環境用センサとして接続されている。

そして本例においては、上記の室内環境調整用機器１１〜１５は、連繋制御ユニット３に接続されて、連繋制御ユニット３側からの制御で各室内環境調整用機器１１〜１５の動作を制御することができるものとなっている。また連繋制御ユニット３は、後述する携帯機器１にＡＲ（Augmented Reality，拡張現実感）を提供するために、接続されている各室内環境調整用機器１１〜１５の動作状態や操作に関するアノテーション（エアタグとも称される）４の生成用データを有するとともに、携帯機器１との間の通信のための通信手段３３を備えている。

図中３１は連繋制御ユニット３が備える操作コントローラであり、該操作コントローラ３１を操作することで、各室内環境調整用機器１１〜１５を個別に操作することができる。なお、ここにおける連繋制御ユニット３は、例えば室内暖房に際して、エアコン１３と床暖房機器１２とを室内環境に応じて連繋させた状態で制御する機能や、人体センサ３５による人の有無の検知出力に応じて機器１１〜１５の動作を制御する機能なども備えているが、この点についての説明は省略する。操作コントローラ３１に室温・湿度センサ等の室内環境用センサ３２を設けておくようにしてもよい。

そして、本操作システムにおいては、上記連繋制御ユニット３と通信手段を介して接続される携帯機器１を備えている。この携帯機器１は、少なくともカメラとタッチパネル型のディスプレー１０とを備えるとともに、上記連繋制御ユニット３との間で通信を行うための通信手段を備えたもので、これらカメラやディスプレーや通信手段を制御する携帯機器１中の演算手段は、カメラで撮影している画像を上記ディスプレー１０に表示するとともに上記連繋制御ユニット３から送られてくるアノテーション生成用データを基に作成したアノテーション４を上記画像に重ね合わせて表示することができるものとなっている。

上記通信手段としては、Bluetooth（登録商標）等の公知の双方向無線通信手段を好適に用いることができるが、有線通信手段を用いてもよい。また、携帯機器１としては、多機能携帯電話を好適に用いることができる。

次に動作に基づいて本発明の操作システムにおける操作について説明する。図１及び図２は携帯機器１と連繋制御ユニット３との間の通信についてのフローであって、図１は初期設定時のフローを、図２は通常使用時のフローを示している。

まず初期設定について説明すると、携帯機器１と連繋制御ユニット３との間での通信を確保した状態において、携帯機器１のカメラで室内の様子をカメラで映して、ディスプレー１０に表示された画像中で制御したい機器１１〜１５、例えばエアコン１３が映っている箇所をポイントする。

このポイント操作により、携帯機器１における演算手段は、連繋制御ユニット３に対して連繋制御ユニット３が認識している室内環境調整用機器１１〜１５の機器リストを要求する。この要求を受けて連繋制御ユニット３は携帯機器１に対して機器リストを送信する。機器リストを受信した携帯機器１において、操作者が機器リストが表示される機器選択画面を選択し、さらにさきほどポイントしたものがエアコン１３であることを指定すれば、さきほどポイントした位置にある機器がエアコン１３であることを認識するとともに、該エアコン１３を選択したこと及びエアコン１３についての操作用画面生成用データの送信要求を連繋制御ユニット３側に送る。これを受けて連繋制御ユニット３はエアコン１３についての操作用画面生成用データを携帯機器１に送るものであり、このデータを受けた携帯型ユニット１における演算手段は、選択した機器であるエアコン１３の操作画面（アノテーション４）を生成して、ディスプレー１０上のさきほどポイントした位置と関連付けて表示する。この状態を図４に示す。

なお、操作用画面生成用データとは、図４に示しているようなアノテーション４を生成するのに必要なデータであり、たとえば動作モードの種類（冷房、暖房）、各モードで操作するレベル範囲（暖房は１８℃〜３０℃等）、必要な場合はグラフィックデータである。

上記操作を室内にある機器分だけ繰り返すことで、ディスプレー１０に映っている各機器の特定を行う。なお、この一連の操作を一度行えば、画像認識処理と組み合わせることで、画面上に映っているものと機器１１〜１５との関連付けがなされて次回以降の初期設定を省略することができるようにしておくことが望ましい。

機器１１〜１５が映っている画像を携帯機器１内に保存するとともに、この保存画像に対する機器１１〜１５との関連付け情報も携帯機器１内に保存し、機器操作に際して上記保存画像を呼び出せば、機器１１〜１５との関連付け情報も読み込まれ、連繋制御ユニット３との通信で機器情報を受けてディスプレー１０に表示している画像中の対応する箇所に対応する機器のアノテーション４を表示できるようにしてもよい。上記初期設定操作そのものも保存画像に対する操作で行うようにしてもよい。

次に図２に基づいて通常時の操作フローについて説明すると、前述の各機器の特定がなされているとともに、機器１１〜１５が運転されている時、連繋制御ユニット３は運転されている機器の運転状況概要表示画面の生成用データを携帯機器１に送信する。これを受けて携帯機器１ではディスプレー１０上の画像に上記生成用データを基に作成したアノテーション４，４を図５に示すように各機器毎に対応付けて表示する。この時、室内環境センサから得られたデータを基に平均室温等の環境情報についてのアノテーション４４も画面に表示することが好ましい。操作や運転状態のアノテーション４と環境情報についてのアノテーション４４とを実際の視覚画面上で同時に表示することで、状況に応じた操作がより容易に且つ直感的に行うことができるものとなる。また、この点からも、室内に複数の機器がある場合、これら機器が全て映っている画像を用いることが好ましい。

上記のアノテーション４，４４が表示されている状態で例えば床暖房機器１２の運転設定を変更したい場合には、画面上の床暖房機器１２についてのアノテーション４をポイントすることで床暖房機器１２を選択すれば、携帯機器１の演算手段は画面上に床暖房機器１２の操作画面であるアノテーション４を図６に示すように表示する。そしてアノテーション４として表示された操作画面上で温度設定の変更指示をポイント等のタッチ操作によって行えば、携帯機器１の演算手段は対応する床暖房操作コマンドを連繋制御ユニット３に送信し、連繋制御ユニット３は受けたコマンドに応じた制御信号を床暖房機器１２に送る。

画面上において画像中に映っている機器と対応付けられているアノテーション４に対して操作を加えることで該当する機器の操作を行うことができるものであり、このために図７に示すように、同種の機器が複数（図示例では照明器具が２つ）ある場合でも、画像中で指定した照明器具に対する操作が該当照明器具に対してなされることになるために、取り違えたりすることなく操作を行うことができる。

さらには、図５に示す画面がディスプレー１０に表示されている状態において、環境情報についてのアノテーション４４は、一定間隔（たとえば５分）で携帯機器１から送信される室内環境送信リクエストに応じて連繋制御ユニット３から携帯機器１に送られる室内環境状態送信により、漸次更新されるようにしておく。アノテーション４４は、単に温度や湿度を表示するだけでなく、温湿度や風速などの諸要因から求められる室内トータルの快適度指標、例えばＰＭＶ、ＥＴ、ＳＥＴ等の指標も表示するものであることが好ましい。照明についても感性的な温熱感に寄与するために、照明情報についても触れるものであってもよい。

また、ディスプレー１０に表示されている環境情報についてのアノテーション４４をポイントすれば、図８に示すように、環境情報の詳細が画面上にアノテーション４５として、或いは別画面として表示されるようにしておくことが好ましく、この環境情報詳細については、過去の状況も判る形態の表示がなされるものが好ましい。

画像上のどこにどの機器があるのかの機器特定を上記実施例では初期設定時に操作者が手動選択で行うものを示したが、携帯機器１内に各機器１１〜１５についての形状データを登録しておき、該形状データを利用した画像認識処理によって各機器１１〜１５を画像中から特定するようにしてもよい。また、対象となる室内環境調整用機器１１〜１５の特定のための画像認識処理を連繋制御ユニット３側で行うようにしてもよい。この場合、カメラで撮影した画像は通信手段を介して連繋制御ユニット３側にも送って処理を行わせることになる。

機器形状による画像認識で機器を特定するのではなく、各機器毎に異なる光学的マーカーを付しておき、該マーカーを画像認識することで機器が特定されるものとしてもよく、さらには携帯機器１に備えたコンパスや傾斜センサ等と、連繋制御ユニット３側に予め記憶させた各機器の位置情報とを用いて機器を特定するものであってもよい。そしてこれらを組み合わせて機器の特定を行うようにしてもよく、このために機器の特定をどのように行うかに関して何ら限定するものではない。

このほか、携帯機器１は連繋制御ユニット３を通じて各機器１１〜１５の制御を行うことになるものを示したが、携帯機器１が各機器１１〜１５と直接通信を行うことで、各機器１１〜１５の状態を認識したり各機器１１〜１５の動作を制御したりするものであってもよい。もっとも、各機器の状態や室内温度環境等を携帯機器１で取得する場合、各機器１１〜１５やセンサから個別に取得すると、通信対象となる機器１１〜１５やセンサが増えて通信トラフィックの増大が発生するために、センシング情報を一元管理する機器（本例における連繋制御ユニット３）と通信を行うことで各センシングデータを一度に取得した方がより効率的である。

また、携帯機器１として指先でポイント操作等を行うことができるタッチパネル型のディスプレー１０を備えたものを示したが、画面上に表示されるマウスカーソルを利用してポイント操作等を行うものであってもよい。

１ 携帯機器
３ 連繋制御ユニット
４ アノテーション
１０ ディスプレー
１１〜１５ 室内環境調整用機器
２１〜２６ 室内環境用センサ

Claims (3)

1. 室内環境調整用の機器に対する操作手段であって、上記機器との間で通信を行う通信手段と室内撮影のためのカメラとカメラで映した画像を表示するディスプレーとを備えている携帯機器と、上記ディスプレーに表示された画像中に映っている機器の像を上記機器に対応付ける特定手段とを有しており、
   上記携帯機器は、上記ディスプレーに表示された画像中に映っている機器の像に、上記特定手段で特定された機器に関する操作画面をアノテーションとして重ね合わせて表示するものであり、且つ、上記アノテーションに対して加えられた操作の情報を上記特定された機器に対して送信するものであることを特徴とする室内環境調整用機器の操作システム。
2. 室内環境情報を検知する室内環境センサを備えており、上記携帯機器は室内環境センサから得られる室内環境情報をアノテーションとしてディスプレーに上記操作画面アノテーションと共に表示するものであることを特徴とする請求項１記載の室内環境調整用機器の操作システム。
3. 複数の室内環境調整用の機器を集中制御する制御ユニットを備えており、携帯機器は該制御ユニットを通じて各室内環境調整用の機器に対する操作を行うものであることを特徴とする請求項１または２記載の室内環境調整用機器の操作システム。

Images