JP6997554B2 - 家電装置システム - Google Patents

Description

本発明は、複数の家電装置を含む家電装置システムに関する。

近年、ユーザと対話によるコミュニケーションを行うことができる家電装置が登場している。この手の家電装置を使用する場合、ユーザは音声による制御が可能であり、ユーザの利便性を向上させることが可能である（例えば、特許文献１）。

特開２０１６－７６７９９号公報

しかしながら、複数の家電装置が配置された居室の場合、ユーザが制御したい家電装置に対して音声指示が行われない場合がある。すなわち、ユーザの音声による指示で、意図しない家電装置の動作が制御されてしまう虞がある。

そこで、本発明は、音声指示によって対象となる家電装置を正確に制御することができる家電装置システムを提供することを目的とする。

上記目的を達成するために本発明の家電装置システムは、通信ネットワークに接続可能な複数個の家電装置と、各家電装置に備えられて各家電装置の周囲の音声を取得する音声取得部と、音声取得部で取得された音声を認識する音声認識部と、音声認識部で認識した音声に従って複数個の家電装置から対象となる家電装置を決定するとともに対象となる家電装置に対して指示を送信する判定部と、を備える。

このように構成することで、対象となる家電装置で音声を取得できない場合であっても、他の家電装置で音声を取得することで、対象となる家電装置を動作させることが可能である。これにより、ユーザの利便性を高めることが可能である。

上述した家電装置システムにおいて、判定部が通信ネットワーク上に配置されていてもよい。判定部は、例えば、通信ネットワーク上に配置されたサーバ上に配置されていてもよい。このように、通信ネットワーク上に配置することで、家電装置が行う情報の処理量を減らすことが可能である。これにより、家電装置の構成を簡略化でき、コストを低減することができる。また、家電装置よりも処理能力が優れるサーバで処理されることで、前記判定部による処理の速度を上げることが可能である。

上述した家電装置システムにおいて、判定部が前記複数個の家電装置の少なくとも１つに配置されていてもよい。このようにすることで、家電装置を外部のネットワーク（インターネット）に接続しなくてもよく、ネットワークの構築が容易である。また、外部のネットワークに接続しないので、ネットセキュリティ上有利である。

上述した家電装置システムにおいて、音声認識部が複数個の家電装置の各々に備えられていてもよい。

上述した家電装置システムにおいて、音声認識部が通信ネットワーク上に配置されていてもよい。

上述した家電装置システムにおいて、判定部は、音声認識部が認識した音声に予め決められた文言が含まれているか否か確認し、予め決められた文言が含まれていると判別した場合に判別した文言と関連付けられた家電装置を対象となる家電装置に決定してもよい。このように構成することで、ユーザが所望する家電装置にユーザが所望する動作させることが可能である。

上述した家電装置システムにおいて、音声認識部は、音声取得部で取得された音声の物理的な情報を取得し、判定部は、音声の物理的な情報から対象となる家電装置を決定してもよい。なお、音声の物理的な情報は、取得した音声の優先順位を決定するために用いられてもよい。

上述した家電装置システムにおいて、複数の家電装置は、各々音声出力部を備え、判定部は、音声出力部から出力させる音声情報を含む音声出力指示を送出し、判定部は、複数の家電装置から出力される音声が重ならないタイミングで各家電装置に音声出力指示を送ってもよい。

本発明によると、音声指示によって対象となる家電装置を正確に制御することができる家電装置システムを提供することができる。

本発明にかかる家電装置システムの一例の構成を示す図である。 音声管理サーバと家電装置とを示す機能ブロック図である。 家電装置システムにおける音声入力による指示を送る手順を示すフローチャートである。 文言データベースの概略図である。 本発明にかかる家電装置システムの一例を示す図である。 本発明にかかる家電装置システムのさらに他の例の構成を示す図である。 本発明にかかる家電装置システムのさらに他の例の構成を示す図である。

以下に本発明の実施形態について図面を参照して説明する。

（第１実施形態）
＜全体構成＞
図１は、本発明にかかる家電装置システムの一例の構成を示す図である。図１に示すとおり、家電装置システムＡは、通信ネットワークＮｗ上の領域であるクラウドＣｄにある音声管理サーバ１０と、通信ネットワークＮｗに接続された複数の家電装置２０、ここでは、空気調和機２０ａ、空気清浄機２０ｂ、ロボット掃除機２０ｃとを備える。通信ネットワークとしては、例えば、インターネットを挙げることができる。なお、ここでは、クラウドＣｄを、一般に公開された通信ネットワーク、すなわち、インターネット上の領域としているが、これに限らない。例えば、クラウドとして、閉じられた通信ネットワーク上の領域であるイントラネット上の領域としてもよい。

本発明にかかる家電装置システムＡでは、ユーザが発した音声（命令）を、空気調和機２０ａ、空気清浄機２０ｂ及びロボット掃除機２０ｃの少なくとも一つが取得するとともに、その情報を音声管理サーバ１０に送る。音声管理サーバ１０は、家電装置から送られた情報に基づいて、ユーザが発した音声（命令）の対象となる家電装置を決定する。そして、音声管理サーバ１０は、対象として決定された家電装置に対して、指示を送る。指示を送る動作の詳細については、後述する。

次に音声管理サーバ１０と複数の家電装置２０の詳細について図面を参照して説明する。図２は、音声管理サーバと家電装置とを示す機能ブロック図である。なお、家電装置システムＡでは、空気調和機２０ａ、空気清浄機２０ｂ及びロボット掃除機２０ｃが接続されているが、図２では、これらの家電装置を代表して家電装置２０としている。また、図２に示す家電装置２０では、本実施形態において必要な構成のみを示し、その他、家電装置毎の機能については省略している。

＜音声管理サーバ＞
音声管理サーバ１０は、制御部１１と、記憶部１２と、通信部１３とを備える。制御部１１は、音声管理サーバ１０の各部の動作を制御する。制御部１１は、例えばＣＰＵや専用プロセッサ等の演算処理部を備えたコンピュータ装置を含む。制御部１１は、記憶部１２に記憶されている制御プログラムを読み出して実行することで、音声管理サーバ１０の動作を統括的に制御する。記憶部１２及び通信部１３は、制御部１１と接続されており、記憶部１２及び通信部１３とは、制御部１１によって制御される。また、記憶部１２及び通信部１３は、制御部１１の動作を補助するともいえる。

記憶部１２は、制御部１１による制御に必要となる情報やプログラムを記憶する。記憶部１２には、情報の読み出しのみが可能なＲＯＭ（Read Only Memory）、情報に随時アクセス可能（読書き可能）なＲＡＭ（Random Access Memory）、大容量の記憶容量を有するハードディスク等が含まれる。記憶部１２には、文言データベース１６が格納されている。文言データベース１６の詳細については、後述する。

通信部１３は、音声管理サーバ１０を通信ネットワークＮｗに接続するための接続インターフェースを含む。通信部１３は、制御部１１と接続されている。そして、通信部１３は、外部の機器、ここでは、通信ネットワークＮｗに接続された家電装置２０との間で情報の送受信を行う。

制御部１１は、判別部１４と、指示出力部１５と備える。判別部１４と指示出力部１５とが判定部である。判別部１４は、家電装置２０から送信された文字情報に含まれる文言（ターム）から、対象となる家電装置２０を決定する。そして、判別部１４は、文字情報に含まれる文言から、対象となる家電装置２０に送信する指示（動作指示）を決定する。そして、指示出力部１５は、通信部１３を介して、対象となる家電装置２０に対して、指示の情報を送信する。なお、判別部１４及び指示出力部１５の動作の詳細については、後述する。

＜家電装置＞
次に、家電装置２０について説明する。図２に示すように、家電装置２０は、制御部２１と、記憶部２２と、通信部２３と、マイク２４と、スピーカ２５と、音声変換部２６と、を備える。制御部２１は、家電装置２０の各部を統合的に制御する。制御部２１は、音声管理サーバ１０の制御部１１と同様の構成を有している。なお、家電装置２０は、音声管理サーバ１０とは異なり、処理する情報量が少ない場合が多い。そのため、制御部２１は、制御部１１に比べて集積度が低いＣＰＵや専用のプロセッサ等を用いてもよい。

記憶部２２は、制御部２１による制御に必要となる情報やプログラムを記憶する。記憶部２２には、情報の読み出しのみが可能なＲＯＭ（Read Only Memory）や情報に随時アクセス可能（読書き可能）なＲＡＭ（Random Access Memory）等が含まれる。

通信部２３は、家電装置２０を通信ネットワークＮｗに接続するための接続インターフェースを含む。通信部２３は、制御部２１と接続されている。そして、通信部２３は、外部の機器、ここでは、通信ネットワークＮｗに接続された家電装置２０との間で情報の送受信を行う。また、通信ネットワークＮｗに接続されたほかの家電装置２０との間で情報の送受信も可能である。通信部２３は、無線通信を行うものであってもよいし、有線通信を行うものであってもよい。

マイク２４は、家電装置２０の周囲の音を拾い電気信号である音声信号として取り込む。音声信号は、制御部２１に送られる。マイク２４から出力された音声信号は、音声変換部２６で音声情報に変換される。すなわち、音声変換部２６は、アナログの音声信号をデジタルの音声情報に変換する。そして、音声変換部２６は、音声情報を、制御部２１に送る。制御部２１は、後述する、音声認識部２７を備えており、音声情報は音声認識部２７で処理される。

家電装置２０には、通信ネットワークＮｗを介して、音声情報が送られてくる場合もある。音声変換部２６は、外部から送られてきた音声情報をアナログの音声信号に変換する機能も備える。音声変換部２６は、アナログ／デジタルの双方向に変換する。音声変換部２６は、スピーカ２５が接続されており、音声変換部２６で音声情報変換された音声信号は、スピーカ２５に送信される。スピーカ２５は、音声信号に基づいて発声する。また、制御部２１は、家電装置２０の装置毎に備えられた部分の制御も行う。

制御部２１は、音声認識部２７を備える。音声認識部２７は、音声変換部２６から送られた音声情報（デジタル情報）から、ユーザが話した言葉（文字）を認識する。すなわち、音声認識部２７は、ユーザの音声から、ユーザが話した言葉を認識する処理を行う。なお、音声認識部２７による音声から文字への変換は、公知の技術であり、詳細な説明は省略する。音声認識部２７は、音声情報から認識された文字の情報、すなわち、文字情報を通信部２３から通信ネットワークＮｗを介して音声管理サーバ１０に送信する。

また、ユーザが話した言葉を認識するとき、音声認識部２７は、マイク２４で取得された音声の物理情報を取得してもよい。音声認識部２７が取得する音声の物理情報とは、例えば、音声の強弱、大小、位相等を挙げることができるがこれに限定されない。また、音声の物理情報を取得する場合において、音声の物理情報は音声情報に含まれていてもよいし、音声情報を処理することで取得してもよい。音声の物理情報は、必要に応じて、文字情報と共に音声管理サーバ１０に送信されてもよい。

家電装置システムＡ、音声管理サーバ１０及び家電装置２０は、以上示した構成を有している。次に、家電装置システムＡの動作について説明する。

＜家電装置システムの動作＞
家電装置システムＡにおいて、複数個の家電装置２０（空気調和機２０ａ、空気清浄機２０ｂ及びロボット掃除機２０ｃ）は、居室（不図示）に配置される。そして、家電装置システムＡでは、ユーザは、音声によって家電装置２０の動作を実行可能である。

家電装置システムＡでは、ユーザによる音声を検知して、対象となる家電装置２０の制御を行う。このような動作について、図面を参照して説明する。図３は、家電装置システムにおける音声入力による指示を送る手順を示すフローチャートである。

空気調和機２０ａ、空気清浄機２０ｂ及びロボット掃除機２０ｃのいずれか（ここでは、代表して家電装置２０とする）に搭載されているマイク２４が音声を取得したとき（ステップＳ１０１）、家電装置２０の音声変換部２６は、マイク２４からの音声信号を音声情報に変換する（ステップＳ１０２）。すなわち、音声変換部２６はアナログの音声信号をデジタルの音声情報に変換する。

そして、家電装置２０の制御部２１に配置された音声認識部２７が、音声情報に含まれる文字情報を認識する（ステップＳ１０３）。すなわち、音声認識部２７が、音声変換部２６から送信された音声情報から、ユーザが話した言葉（文字）を認識する。

そして、制御部２１は、認識された文字情報を音声管理サーバ１０に送る（ステップＳ１０４）。音声管理サーバ１０の判別部１４は、記憶部１２に記憶されている文言データベース１６を参照して、文字情報に含まれる文言から、対象となる家電装置２０を決定可能か否か確認する（ステップＳ１０５）。そして、対象となる家電装置２０が無い場合（ステップＳ１０５でＮｏの場合）、取得した音声はユーザによる音声指示ではないと判断し、処理を終了する。なお、対象となる家電装置２０が無い場合とは、認識された文字情報の中に、文言データベース１６に格納された文言が含まれない場合や、複数の家電装置２０で使用される文言だけを含む場合等があるが、これらに限定されない。家電装置２０の特定が不可能又は困難な場合を広く含む。

対象となる家電装置２０がある場合（ステップＳ１０５でＹｅｓの場合）、判別部１４は、対象となる家電装置２０を決定する（ステップＳ１０６）。さらに、判別部１４は、文字情報に含まれる文言から、対象となる家電装置２０の動作を決定可能か否か確認する（ステップＳ１０７）。対象となる家電装置２０の動作を決定不可能な場合（ステップＳ１０７でＮｏの場合）、判別部１４は、記憶部１２に予め記憶されている、動作を確定できなかったときに通知する文書を呼び出す（ステップＳ１０８）。そして、制御部１１は、指示出力部１５を介して動作を確定できなかった旨の文書を家電装置２０に送る（ステップＳ１０９）。動作を確定できなかった旨の文書を受け取った家電装置２０は、その文書を音声認識部２７で音声情報に変換するとともに、音声変換部２６で音声信号に変換してスピーカ２５から音声として出力して（ステップＳ１１０）、処理を終了する。

なお、動作を確定できなかったことを示す文書の通知は、文字情報を送信してきた家電装置２０に対して行ってもよいし、対象となる家電装置２０の対して行ってもよい。また、家電装置２０にスピーカ２５等の音声を出力する装置が備えられていない場合や、ユーザの意向により無音状態で駆動されている場合等で、音声を出力できない場合には、家電装置２０に備えられた表示部（不図示）に、動作を確定できなかったこと（文書、イラスト或いはそれらの組み合わせ等）を表示するようにしてもよい。

また、文字情報に含まれる文言から、対象となる家電装置２０の動作を決定可能な場合（ステップＳ１０７でＹｅｓの場合）、判別部１４は、動作の指示を決定する（ステップＳ１１１）。そして、制御部１１は、対象となる家電装置２０の情報と、動作の指示の情報を、指示出力部１５を介して対象となる家電装置２０に送信する（ステップＳ１１２）。動作の指示の情報を受け取った対象となる家電装置２０は、受け取った指示に従って、制御を実行する（ステップＳ１１３）。このとき、動作の指示に、ユーザに通知する内容を含む文書が取り付けられている場合がある。この場合、文書を受け取った家電装置２０は、文書を音声認識部２７で音声情報に変換するとともに、音声変換部２６で音声信号に変換してスピーカ２５から音声として出力する。

このように、家電装置システムＡでは、音声管理サーバ１０で、家電装置２０が取得した音声から、対象となる家電装置２０を決定し、さらに、その家電装置２０による動作を決定して、対象となる家電に、動作の指示を送る。このような構成とすることで、対象となる家電装置２０がユーザからの音声を取得できない場合でも、他の家電装置２０が取得して、判別部１４が対象となる家電装置２０及びその動作を決定することで、ユーザが操作したい家電装置２０をユーザの意図どおりに動作させることが可能である。これにより、ユーザの利便性を向上することが可能である。家電装置システムＡを利用することで、例えば、ユーザからの空気調和機２０ａに対する音声指示を、ロボット掃除機２０ｃが取得した場合であっても、空気調和機２０ａの動作を制御することが可能となる。

ここで、文言データベース１６について、図面を参照して説明する。図４は、文言データベースの概略図である。図４に示すように、文言データベース１６の第１欄１６１は、家電装置２０の種類（名前）が格納されている。本実施形態では、空気調和機２０ａ、空気清浄機２０ｂ、ロボット掃除機２０ｃである。第２欄１６２は、第１欄１６１の家電装置２０と関係する文言１（名詞や形容詞）が格納されている。例えば、空気調和機２０ａと関連付けられた第２欄１６２の文言１としては、例えば、「エアコン」、「冷房」、「暖房」等の名詞や、「暑い」、「寒い」、「じめじめ」等の形容詞が挙げられる。

第３欄１６３は、家電装置２０の動作に関連付けられた文言２が格納される。例えば、空気調和機２０ａと関連付けられた第３欄１６３の文言２としては、「温度上げる」、「温度下げる」等の動作を示す文言が挙げられる。また、第４欄１６４は、第３欄１６３の動作を示す文言に対応した動作が格納される。なお、文言データベース１６では、文言の欄は、第２欄１６２、第３欄１６３としているが、これ以上の文言の欄が設けられていてもよい。

判別部１４は、文字情報に含まれる文言と文言データベース１６とを照会する。そして、文字情報に含まれる文言から対象となる家電装置２０として決定する。例えば、文字情報に家電装置２０の名称が含まれる場合には、その文言の家電装置２０を対象となる家電装置２０に決定する。また、文字情報に、家電装置の名称が無い場合には、第２欄１６２、第３欄１６３を照会して、関連した家電装置２０を決定する。そして、判別部１４は、文字情報に動作の文言が含まれる場合には、その文言に対応した動作を抽出する。また、動作の文言が無い場合には、第２欄１６２に含まれる文言１から関係性の高い動作を想定して、対象となる家電装置２０の動作とする。

以下に、文字情報から対象となる家電装置２０や動作を決定する具体的な方法について説明する。たとえば、文字情報が「空気調和機を冷房運転開始」とする。この場合、文字情報には、「空気調和機」と、「冷房」と、「運転開始」とが含まれる。この場合、「空気調和機」との家電装置の名称が含まれるため、判別部１４は、空気調和機２０ａを対象となる家電装置２０に決定する。そのほかに、「冷房」、「運転開始」との文言が含まれるため、判別部１４は、空気調和機２０ａを冷房運転開始させる動作を動作指示として決定する。

また、文字情報が「冷房開始」であった場合、文字情報には、「冷房」と、「開始」が含まれる。判別部１４は、「冷房」を文言データベース１６で検索することで、「冷房」が空気調和機２０ａと関連していると判別し、対象となる家電装置２０を空気調和機２０ａに決定する。そして、「開始」を文言データベース１６で検索することで、「運転開始」と関連付ける。これにより、判別部１４は、空気調和機２０ａを冷房運転開始させる動作を動作指示として決定する。

さらに、文字情報が「寒い」の場合、文字情報には、「寒い」が含まれる。判別部１４は、「寒い」を文言データベース１６で検索し、「寒い」が空気調和機２０ａと関連していると判別し、対象となる家電装置２０を空気調和機２０ａに決定する。また、「寒い」には、空気調和機２０ａを「暖房運転する」と「設定温度を上げる」が関連付けられており、これらの動作を動作指示として決定する。これにより、判別部１４は、空気調和機２０ａを暖房運転開始させる又は設定温度を上げる動作を動作指示として決定する。なお、「暖房運転開始」又は「設定温度を上げる」のいずれに決定するかは、対象となる家電装置２０（ここでは、空気調和機２０ａ）の現在の動作状態を取得した後に決定してもよい。また、両方の指示を空気調和機２０ａに送り、空気調和機２０ａの制御部２１で決定するようにしてもよい。

図４に示す文言データベース１６は、一例の概略図であり、実際のデータベースの構成と異なる場合がある。家電装置と複数種類の文言とが関連付けられているとともに、文言同士が関連付けられているデータベースであれば、文言データベース１６の構成に限定されない。また、文言データベース１６では、逐次、家電装置、文言、動作が拡充されてもよい。例えば、ユーザが登録可能であってもよいし、家電装置のメーカ等、予め決められた操作者が登録可能であってもよい。ユーザが登録可能とすることで、製造者が想定していない動作を登録することができ、ユーザの利便性を向上できる。また、予め決められた操作者が登録可能とすることで、間違った文言や動作が登録されるのを抑制できる。

また、上述の音声認識、及び、対象となる家電装置２０の決定の手順は、一例であって、これに限定されるものではない。音声管理サーバ１０と接続された複数の家電装置２０のいずれかで取得された音声から文字情報を認識し、その文字情報から対象となる家電装置２０及びその動作を決定できる方法を広く採用することが可能である。本発明の家電装置システムＡは、家電装置で取得した音声から文字情報を認識し、その文字情報から制御の対象となる家電装置２０を決定するとともに、その動作を決定することができれば、上述の手順に限定されない。

（第２実施形態）
本発明にかかる家電装置システムの他の例について図面を参照して説明する。図５は、本発明にかかる家電装置システムの一例を示す図である。なお、本実施形態の家電装置システムＡの構成は、第１実施形態の家電装置システムと同じである。そのため、各部の符号は同じ符号を付すとともに、各部の詳細な説明は省略する。

家電装置システムＡでは、複数の家電装置２０が狭い領域に配置されていることが多い。この場合、ユーザが発した音声は複数の家電装置２０によって取得される。このような場合に音声管理サーバ１０の判別部１４には、異なる家電装置２０から文字情報が送信されてくる。そこで、家電装置システムＡでは、家電装置２０が音声を取得したときに、その音声の物理情報を取得し、物理情報を文字情報と共に音声管理サーバ１０に送信する。

音声管理サーバ１０の判別部１４は、同時又は略同時のタイミングで受け取った文字情報に対し、物理情報に基づいて優先順位をつける。そして、優先順位が高い文字情報に含まれる文言に基づいて、対象となる家電装置２０及びその動作を決定する。

ここで、物理情報及び優先順位のつけ方について、説明する。上述のとおり、複数の家電装置２０で音声が取得される場合がある。そして、音声管理サーバ１０に送信され、判別部１４が認識した文言から対象となる家電装置２０を決定することができるとともに、各家電装置２０からの情報が一致する場合には、問題は発生しにくい。一方で、各家電装置２０からの情報は一致するが文言から家電装置２０を決定しにくい場合や、各家電装置２０からの情報が異なり、対象となる家電装置２０が異なる場合、対象となる家電装置２０を決定しにくい。

そこで、判別部１４は、各家電装置２０から取得した文字情報それぞれに関連付けられた物理情報を比較して、文字情報の優先順位を決定する。例えば、ユーザの近くにある家電装置２０で取得した音声は、ユーザから離れた位置にある家電装置２０よりも正確な音声を取得している可能性が高い。そのため、家電装置２０は、物理情報として 音声のレベル（音の大きさ）を文字情報と共に、音声管理サーバ１０に送信する。判別部１４は、文字情報と共に物理情報を確認し、音声レベルの高い順に、文字情報に優先順位をつける。

例えば、家電装置システムＡにおいて、空気清浄機２０ｂと、ロボット掃除機２０ｃが音声を取得し、空気清浄機２０ｂが取得した音声の音声レベルＬ１が、ロボット掃除機２０ｃが取得した音声の音声レベルＬ２よりも大きいとする。このとき、判別部１４は、空気清浄機２０ｂから送られた文字情報を優先順位１番目、ロボット掃除機２０ｃから送られた文字情報を優先順位２番目に決定する。そして、判別部１４は、両方の文字情報から対象となる家電装置２０と、その動作を決定する。そして、対象となる家電装置２０又は動作の少なくとも一方が異なる場合、判別部は優先順位が高い方を選択する。

なお、物理情報としては、音声レベルを挙げたがこれに限定されない。例えば、位相、取得時間（ユーザからの距離）、明瞭性（文字情報と音声情報との一致度）等を挙げることができる。また、これら以外にも、音声の物理的な特性を示す情報で、音声取得状態の優劣を決定できるものを広く採用することができる。なお、優先順位を決定した後は、優先順位が高い方の文字情報だけを参照して、対象となる家電装置２０及びその動作を決定するようにしてもよい。

（変形例１）
上述の例では、２つの家電装置２０（空気清浄機２０ｂとロボット掃除機２０ｃ）が音声を取得した場合を例に説明した。この場合、判別部１４は、対象となる家電装置２０及びその動作として、２種類ずつ判別する場合がある。一方で、３台以上の家電装置２０が音声を取得した場合には、少なくとも２台の家電装置２０から送られた文字情報に基づいて決定した対象となる家電装置２０及び（又は）その動作が一致する場合がある。このような場合には、一致した家電装置及び（又は）その動作を、対象となる家電装置２０及び（又は）その動作として決定するようにしてもよい。また、異なる複数の一致する家電装置及び（又は）その動作が判別される場合、一致する数が多いものを対象とする家電装置及び（又は）その動作としてもよい。さらに、一致する数が同数の場合には、上述の優先順位の高い方からの文字情報で判別された家電装置及び（又は）その動作を対象とする家電装置及びその動作として決定するようにしてもよい。

（変形例２）
上述の例では、複数の家電装置２０から同時又は略同時に文字情報を取得した場合について説明した。一方で、異なるタイミングで複数の家電装置２０から異なる文字情報を取得する場合もある。そして、判別部１４が文字情報から決定した動作に、対象となる家電装置２０から音声の出力（以下、発話と称する）を行う動作が含まれる場合がある。この場合、複数の家電装置又は同じ家電装置から複数の発話が行われると、ユーザが聞き取りにくい場合がある。そこで、家電装置２０は、音声を取得した時間を、物理情報として文字情報として音声管理サーバ１０に送信する。判別部１４は、文字情報に関連付けられた物理情報から発話の優先順位をつける。指示出力部１５は、判別部１４が発話することを決定したときに、発話の内容から音声の出力継続時間を確認する。そして、指示出力部１５は、優先順位が高い発話から順に対象となる家電装置２０に送信する。次の優先順位の発話の情報は、前の発話が終了するタイミングで送信する。発話を行う指示を送る場合において、指示を送信するタイミングをずらすことで、発話が重なりにくく、ユーザが容易に聞き取ることが可能である。これにより、ユーザの利便性を高めることが可能である。

これら以外の特徴は、第１実施形態と同じである。

（変形例３）
家電装置システムＡでは、移動可能な家電装置２０、すなわち、ロボット掃除機２０ｃが含まれる。ユーザがロボット掃除機２０ｃの位置を確認したい場合がある。ユーザからロボット掃除機２０ｃの位置を検出する音声指示があったとき、音声管理サーバ１０の指示出力部１５は、ロボット掃除機２０ｃに対して発話の指示を送る。そして、ロボット掃除機２０ｃで発話された音声を、空気調和機２０ａ及び空気清浄機２０ｂで取得し、文字情報と物理情報とを音声管理サーバ１０に送る。そして、判別部１４は、空気調和機２０ａ及び空気清浄機２０ｂからの物理情報から、取得された音声の位相を確認し、位相から、ロボット掃除機２０ｃの位置を特定する。そして、その特定した位置の情報を空気調和機２０ａ及び（又は）空気清浄機２０ｂに送り、両方の家電装置又は一方の家電装置の表示部（不図示）にロボット掃除機２０ｃの位置を表示させる。このようにすることで、ロボット掃除機２０ｃの位置を容易に確認できる。なお、表示部への表示と共に又は表示に替えて、スピーカ２５からの発話で行ってもよい。

（第３実施形態）
本発明にかかる家電装置システムのさらに他の例について図面を参照して説明する。図６は、本発明にかかる家電装置システムのさらに他の例の構成を示す図である。図６に示す家電装置システムＢは、音声認識部１７が音声管理サーバ１０ｂに備えられている。これ以外の点については、第１実施形態の家電装置システムＡと同じ構成を有している。また、家電装置システムＢでは、音声認識部を備えていない家電装置３０が接続される。そのため、家電装置システムＢにおいて、家電装置システムＡと同じ構成には同じ符号を付すとともに、同じ部分の詳細な説明は省略する。

家電装置システムＢでは、音声管理サーバ１０ｂの制御部１１に音声認識部１７が備えられている。これにより、家電装置２０から音声管理サーバ１０ｂに対して、文字情報ではなく音声情報が送信される。そして、音声情報を文字情報に認識する操作が、音声管理サーバ１０ｂで行われる。このようにすることで、例えば、音声認識部を備えていない家電装置３０を含む構成とすることが可能である。また、音声管理サーバ１０ｂの制御部１１は、家電装置３０の制御部２１に比べて、処理能力が大幅に高い。そのため、音声管理サーバ１０ｂで音声情報から文字情報を認識する方が、認識の精度を高めることが可能である。

また、図６に示すように、音声認識部１７を備えている音声管理サーバ１０ｂに対して、音声認識部２７を備えた家電装置２０を接続してもよい。この場合、家電装置２０から音声管理サーバ１０ｂに、音声情報を送信してもよいし、音声認識部２７で認識された文字情報を送信してもよい。

これ以外の特徴については、第１実施形態及び第２実施形態と同じである。

（第４実施形態）
本発明にかかる家電装置システムのさらに他の例について図面を参照して説明する。図７は、本発明にかかる家電装置システムのさらに他の例の構成を示す図である。図７に示す家電装置システムＣは、少なくとも１つの家電装置４０が、制御部２１に、判別部２８、指示出力部２９を備えている。また、家電装置４０の記憶部２２には、文言データベース２２１が備えられる。そして、音声管理サーバ１０に接続していない。これ以外の点は、第１実施形態の家電装置システムＡと同じ構成を有している。そのため、家電装置システムＣにおいて、家電装置システムＡと同じ部分には、同じ符号を付すとともに、同じ部分の詳細な説明は省略する。また、判別部２８及び指示出力部２９は、音声管理サーバ１０に備えられる、判別部１４及び指示出力部１５と同様の構成を有する。そのため、判別部２８及び指示出力部２９の構成及び動作の詳細については省略する。

家電装置システムＣでは、複数の家電装置２０と、家電装置４０とが通信ネットワークＮｗに接続されている。家電装置システムＣの通信ネットワークＮｐは、ピアツーピア接続（Ｐ２Ｐ接続）である。そして、家電装置２０が音声を取得した場合に、家電装置２０は、音声認識部２７で認識した文字情報を、家電装置４０に送信する。家電装置４０では、内部に備えられた、判別部２８で対象となる家電装置２０又は家電装置４０を決定し、その動作を決定する。そして、指示出力部２９は、対象となる家電装置２０に、その動作の指示を送信する。

家電装置４０自身が音声を取得する場合もある。家電装置４０自身が音声を取得し、判別部２８が、対象となる家電装置として家電装置４０に決定したとき、制御部２１は、その動作に基づいて、家電装置４０の動作を制御する。

また、家電装置システムＣが複数の家電装置４０を備えていてもよい。この場合、家電装置４０同士で、判別部２８が判別した対象となる家電装置及びその動作の情報をやり取りし、優先順位、多数決等に基づいて、対象となる家電装置及びその動作を決定してもよい。

このようにＰ２Ｐ接続の通信ネットワークＮｐで家電装置システムＣを構築することで、家電装置システムＣの構成を簡略化することが可能である。また、インターネット等の通信ネットワークが敷設されていない場所でも、家電装置システムＣを構築することが可能である。なお、Ｐ２Ｐ接続の通信ネットワークＮｐで家電装置システムＣを構築する場合、各家電装置２０、４０の通信部２３は、無線通信可能な構成であってもよい。

これ以外の特徴については、第１実施形態～第３実施形態と同じである。

以上説明した本発明にかかる家電装置システムは、通信ネットワークに接続可能な複数個の家電装置と、各家電装置に備えられて各家電装置の周囲の音声を取得する音声取得部と、音声取得部で取得された音声を認識する音声認識部と、音声認識部で認識した音声に従って複数個の家電装置から対象となる家電装置を決定するとともに対象となる家電装置に対して指示を送信する判定部と、を備える。

このように構成することで、対象となる家電装置で音声を取得できない場合であっても、他の家電装置で音声を取得することで、対象となる家電装置を動作させることが可能である。これにより、ユーザの利便性を高めることが可能である。

上述した家電装置システムにおいて、判定部が通信ネットワーク上に配置されていてもよい。判定部は、例えば、通信ネットワーク上に配置されたサーバ上に配置されていてもよい。このように、通信ネットワーク上に配置することで、家電装置が行う情報の処理量を減らすことが可能である。これにより、家電装置の構成を簡略化でき、コストを低減することができる。また、家電装置よりも処理能力が優れるサーバで処理されることで、前記判定部による処理の速度を上げることが可能である。

上述した家電装置システムにおいて、判定部が前記複数個の家電装置の少なくとも１つに配置されていてもよい。このようにすることで、家電装置を外部のネットワーク（インターネット）に接続しなくてもよく、ネットワークの構築が容易である。また、外部のネットワークに接続しないので、ネットセキュリティ上有利である。

上述した家電装置システムにおいて、音声認識部が複数個の家電装置の各々に備えられていてもよい。

上述した家電装置システムにおいて、音声認識部が通信ネットワーク上に配置されていてもよい。

上述した家電装置システムにおいて、判定部は、音声認識部が認識した音声に予め決められた文言が含まれているか否か確認し、予め決められた文言が含まれていると判別した場合に判別した文言と関連付けられた家電装置を対象となる家電装置に決定してもよい。このように構成することで、ユーザが所望する家電装置にユーザが所望する動作させることが可能である。

上述した家電装置システムにおいて、音声認識部は、音声取得部で取得された音声の物理的な情報を取得し、判定部は、音声の物理的な情報から対象となる家電装置を決定してもよい。なお、音声の物理的な情報は、取得した音声の優先順位を決定するために用いられてもよい。

上述した家電装置システムにおいて、複数の家電装置は、各々音声出力部を備え、判定部は、音声出力部から出力させる音声情報を含む音声出力指示を送出し、判定部は、複数の家電装置から出力される音声が重ならないタイミングで各家電装置に音声出力指示を送ってもよい。

以上、本発明の実施形態について説明したが、本発明はこの内容に限定されるものではない。また本発明の実施形態は、発明の趣旨を逸脱しない限り、種々の改変を加えることが可能である。

Ａ～Ｃ 家電装置システム
Ｎｗ 通信ネットワーク（インターネット）
Ｎｐ 通信ネットワーク（Ｐ２Ｐネットワーク）
Ｃｄ クラウド
１０ 音声管理サーバ
１１ 制御部
１２ 記憶部
１３ 通信部
１４ 判別部
１５ 指示出力部
１６ 文言サーバ
１７ 音声認識部
２０ 家電装置
２０ａ 空気調和機
２０ｂ 空気清浄機
２０ｃ ロボット掃除機
２１ 制御部
２２ 記憶部
２３ 通信部
２４ マイク
２５ スピーカ
２６ 音声変換部
２７ 音声認識部
２８ 判別部
２９ 指示出力部
３０ 家電装置
４０ 家電装置

Claims (6)

1. 通信ネットワークに接続可能な複数個の家電装置と、
   前記各家電装置に備えられて各家電装置の周囲の音声を取得する音声取得部と、
   前記音声取得部で取得された音声を認識する音声認識部と、
   前記音声認識部で認識した音声に従って前記複数個の家電装置から対象となる家電装置を決定するとともに前記対象となる家電装置に対して指示を送信する判定部と、を備え、
   前記複数個の家電装置は、各々音声出力部を備え、
   前記判定部は、前記音声出力部から出力させる音声情報を含む音声出力指示を送出し、
   前記判定部は、前記複数個の家電装置から出力される音声が重ならないタイミングで各家電装置に前記音声出力指示を送る家電装置システム。
2. 前記判定部が前記通信ネットワーク上に配置されている請求項１に記載の家電装置システム。
3. 前記音声認識部が前記複数個の家電装置の各々に備えられる請求項１または請求項２に記載の家電装置システム。
4. 前記音声認識部が前記通信ネットワーク上に配置されている請求項１または請求項２に記載の家電装置システム。
5. 前記判定部は、前記音声認識部が認識した音声に予め決められた文言が含まれているか否か確認し、
   予め決められた文言が含まれていると判別した場合に判別した文言と関連付けられた家電装置を対象となる家電装置に決定する請求項１から請求項４のいずれかに記載の家電装置システム。
6. 通信ネットワークに接続可能な複数個の家電装置を備える家電装置システムを制御する方法であって、
   音声を取得するステップと、
   取得した前記音声を認識するステップと、
   認識した前記音声に従って前記複数個の家電装置から対象となる家電装置を決定すると
   ともに対象となる前記家電装置に対して指示を送信するステップと、
   前記家電装置に対して音声情報を含む音声出力指示を送出するステップと、を有し、
   前記複数個の家電装置から出力される音声が重ならないタイミングで各家電装置に前記音声出力指示を送る方法。

Images