JP2021153245A - 音入出力制御装置、音入出力制御方法、及びプログラム - Google Patents

Abstract

【課題】音出力装置により広い用途を付与できる音入出力制御装置、音入出力制御方法、及びプログラムを提供する。【解決手段】音入出力制御装置２００は、ユーザに独立して装着される複数の音出力装置１００のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する生体情報取得部２０１と、当該生体情報のうち少なくとも２つが同期しているか否かを判定する同期性判定部２０２と、音出力装置１００のそれぞれの動作を制御する動作制御部２０３と、当該生体情報が同期している場合に、動作制御部２０３は、第１の動作を行うように音出力装置１００のそれぞれを制御し、当該生体情報のうち少なくとも２つが同期していないと判定された場合に、動作制御部２０３は、第２の動作を行うように音出力装置１００のそれぞれを制御する。【選択図】図１

Description

本発明は、音入出力制御装置、音入出力制御方法、及びプログラムに関する。

特許文献１には、イヤホンを装着するユーザの身体の状態を取得し、当該身体の状態に基づいて、イヤホンを密閉型から開放型に切り替える技術が記載されている。

特開２０１６−０５１９１５号公報

また、近年、左右のイヤホンが完全にワイヤレスな、フルワイヤレスイヤホン（TWS：True Wireless Stereo）が普及しつつある。フルワイヤレスイヤホンは、左右のイヤホンによってステレオ方式で音を出力する。本発明者らは、フルワイヤレスイヤホンのように、独立して使用可能な複数の音出力装置における、ステレオ方式の音の出力という通常の動作モード以外の動作モードも可能にする技術に想到した。

本発明は、音出力装置により広い用途を付与できる音入出力制御装置、音入出力制御方法、及びプログラムを提供することを目的とする。

本発明に係る音入出力制御装置は、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する音入出力制御装置であって、前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する生体情報取得部と、前記生体情報取得部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期しているか否かを判定する同期性判定部と、前記音出力装置のそれぞれの動作を制御する動作制御部と、を備え、前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していると判定された場合に、前記動作制御部は、第１の動作を行うように前記音出力装置のそれぞれを制御し、前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していないと判定された場合に、前記動作制御部は、第２の動作を行うように前記音出力装置のそれぞれを制御する。

本発明に係る音入出力制御方法は、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を音入出力制御装置によって制御する音入出力制御方法であって、前記音入出力制御装置が、前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得し、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期しているか否かを判定し、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御するものである。

本発明に係るプログラムは、音入出力制御装置に、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する処理を実行させるプログラムであって、前記音入出力制御装置に、前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する処理と、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期しているか否かを判定する処理と、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御する処理と、を実行させるものである。

本発明によれば、音出力装置により広い用途を付与できる音入出力制御装置、音入出力制御方法、及びプログラムを提供することができる。

本発明の実施の形態１に係る音入出力制御装置の構成を模式的に示すブロック図である。 本発明の実施の形態２に係る音入出力制御装置の構成を模式的に示すブロック図である。 本発明の実施の形態１又は２に係る音入出力制御方法の一例を示すフローチャートである。 本発明の実施の形態１又は２に係る音入出力制御方法の他の例を示すフローチャートである。 本発明の実施の形態１又は２に係る音入出力制御方法の他の例を示すフローチャートである。 本発明の実施の形態１又は２に係る音入出力制御方法の他の例を示すフローチャートである。

実施の形態１
以下、図面を参照して本発明の実施の形態について説明する。
図１は、本発明の実施の形態１に係る音入出力制御装置２００の構成を模式的に示すブロック図である。音入出力制御装置２００は、図１に示す音出力装置１００の動作を制御する。具体的には、音入出力制御装置２００は、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置１００を制御する。これにより、音入出力制御装置２００は、音出力装置１００に、より広い用途を付与することができる。

音出力装置１００は、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等の完全に独立した個々のイヤホン等であり、例えばユーザの左右の耳に独立して装着される。すなわち、複数の音出力装置１００は、互いに完全に独立して、ユーザの耳に装着される。通常、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等は、２個の完全に独立したイヤホンが１組となっている。しかし、本発明では、３個以上の音出力装置１００が１組となっていてもよい。複数の音出力装置１００は、ユーザの頬骨などに左右独立して装着されてもよく、首掛けスピーカやウェアラブルスピーカであってもよい。音出力装置１００は、フルワイヤレス型に限定されず、その一部が有線接続であってもよい。

本実施の形態１に係る音出力装置１００は、図１に示すように、生体センサ１０１、音出力部１０２、音入力部１０３、通信部１０４等を備える。なお、１組の音出力装置１００のうち、少なくとも１つの音出力装置１００が音入力部１０３を備えていればよく、他の音出力装置１００は音入力部１０３を備えていなくてもよい。また、１組の音出力装置１００のすべてが音入力部１０３を備えない形態であってもよい。

生体センサ１０１は、ユーザの生体信号を検出するセンサであり、例えば、脈拍センサ、血圧センサ、呼吸センサ、体温計等である。生体センサ１０１が検出した生体信号は、通信部１０４によって、音入出力制御装置２００に送信される。

音出力部１０２は、スピーカ、又は、骨伝導スピーカ等を備え、スマートフォン等の携帯機器、ＤＡＰ（Digital Audio Player)、ＣＤプレーヤ等の音楽再生装置（図示省略）から取得する音声信号に従って、ユーザに向けて音を出力する。音楽再生装置からの音声信号は、音入出力制御装置２００を介して通信部１０４によって受信されてもよいし、音入出力制御装置２００を介さずに、直接、通信部１０４によって受信されてもよい。
また、音出力部１０２は、他の音出力装置１００から通信部１０４が受信した音声信号に従って、ユーザに向けて音を出力する形態があってもよい。具体的には、他の音出力装置１００の音入力部１０３が音声を収音することにより音声信号を取得し、音出力部１０２は、当該他の音出力装置１００から通信部１０４が受信した当該音声信号に従って、当該音声を出力する。

音入力部１０３は、マイク等であり、音出力装置１００を装着したユーザの音声を収音して音声信号を取得する。なお、音入力部１０３は、ユーザが当該音出力装置１００を装着した状態で、ユーザの音声を収音可能となっている。音入力部１０３が取得した音声信号は、通信部１０４によって、音入出力制御装置２００又は他の音出力装置１００に送信される。なお、音入力部１０３は、１組の音出力装置１００のうち、全ての音出力装置１００に備えられていてもよいし、少なくとも１つの音出力装置１００に備えられていてもよい。１組の音出力装置１００のうち、１台の音出力装置１００にのみ音入力部１０３が備えられる場合、音入力部１０３が備えられた音出力装置１００をマスター装置とし、他の音出力装置１００をスレーブ装置としてもよい。

なお、１組の音出力装置１００の全てに、音入力部１０３が備えられる場合、音出力部１０２から所定長さの音（例えば、数百ミリ秒の音）を出力し、ユーザの耳の穴の中を伝搬した音（反響音）を音入力部１０３が収音して、反響音信号を取得してもよい。そして、音入力部１０３が取得した反響音信号は、通信部１０４によって、音入出力制御装置２００に送信されてもよい。この場合、音入出力制御装置２００の生体情報取得部２０１（後述）は、当該反響音信号からユーザの個人認証情報を生成し、生体情報として取得してもよい。１組の音出力装置１００の全てに音入力部１０３が備えられる場合、音入力部１０３のそれぞれが収音した音声から声紋情報を導出し、生体情報取得部２０１（後述）は、当該声紋情報号からユーザの個人認証情報を生成し、生体情報として取得してもよい。

通信部１０４は、当該通信部１０４が備えられる音出力装置１００と、他の音出力装置１００及び音入出力制御装置２００、又は上述した音楽再生装置（図示省略）との間の通信を行う。
音出力装置１００間の通信は、近接場磁気誘導（NFMI：Near Field Magnetic Induction）通信、及び、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ（Near Field Communication）等の近距離無線通信等である。音出力装置１００間の通信として何れの通信を用いるのか、音出力装置１００間の距離に応じて切り替えられてもよい。
音出力装置１００と音入出力制御装置２００との間の通信は、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。音出力装置１００と音入出力制御装置２００との間の通信として何れの通信を用いるのか、音出力装置１００と音入出力制御装置２００との間の距離に応じて切り替えられてもよい。

音入出力制御装置２００は、上述したように、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置１００を制御する。例えば、音入出力制御装置２００は、１組の音出力装置１００のうち、少なくとも２台の音出力装置１００を制御する。音入出力制御装置２００は、図１に示すように、生体情報取得部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４、通信部２０５等を備える。

生体情報取得部２０１は、音出力装置１００のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する。すなわち、生体情報取得部２０１は、１組の音出力装置１００のそれぞれから、生体情報を個別に取得する。
具体的には、生体情報取得部２０１は、音出力装置１００の生体センサ１０１によって検出され通信部２０５が受信した生体信号を、生体情報として取得する。生体情報取得部２０１が取得する生体情報は、例えば、ユーザの脈拍、血圧、呼吸、体温等に関する情報である。
また、生体情報取得部２０１は、音出力装置１００の音入力部１０３が取得し通信部２０５が受信した反響音信号からユーザの個人認証情報を生成し、当該個人認証情報を生体情報として取得してもよい。生体センサ１０１は、上述した各種センサを複数組み合わせたものであってもよく、生体情報取得部２０１は、これら複数のセンサが取得する生体情報を組み合わせて取得してもよい。

同期性判定部２０２は、生体情報取得部２０１によって音出力装置１００のそれぞれから取得された生体情報が同期しているか否かを判定する。すなわち、同期性判定部２０２は、生体情報取得部２０１が１組の音出力装置１００のそれぞれから個別に取得した生体情報が同期しているか否かを判定する。
具体的には、例えば、同期性判定部２０２は、音出力装置１００のそれぞれから個別に取得する生体情報が脈拍、呼吸等に関する周期性を有する情報である場合、これらの生体情報の周期が一致するか否かに基づいて、これらの生体情報が同期しているか否かを判定する。同期性判定部２０２は、音出力装置１００のそれぞれから個別に取得する血圧や脈拍の強度、呼吸の深さ、体温などが略一致しているか否かに基づいて、これらの生体情報が同期しているか否かを判定してもよい。
もしくは、同期性判定部２０２は、音出力装置１００のそれぞれから個別に取得する生体情報が上記反響音信号である場合、これらの反響音信号からユーザの個人認証情報を生成し、これらの個人認証情報が一致するか否かに基づいて、これらの生体情報が同期しているか否かを判定する。

動作制御部２０３は、１組の音出力装置１００のそれぞれの動作を制御する。
具体的には、同期性判定部２０２によって音出力装置１００のそれぞれから取得された生体情報が同期していると判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが同一のユーザに装着されている場合に適した第１の動作、例えば音楽再生装置から取得する音声信号をステレオモードで再生する動作を行うように音出力装置１００のそれぞれを制御する。動作制御部２０３は、音出力装置１００のそれぞれから取得された生体情報が同期していると判定された場合に、特定された動作を第１の動作として行うことなく、ユーザ指定の動作を行う、または通常動作を継続する形態であってもよい。言い換えると、第１の動作は、特に指定された動作でなくともよい。
また、同期性判定部２０２によって音出力装置１００のそれぞれから取得された生体情報が同期していないと判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが異なるユーザに装着されている場合に適した第２の動作、例えば音楽再生装置から取得する音声信号をモノラルモードで再生する動作を行うように音出力装置１００のそれぞれを制御する。
上記第１の動作及び上記第２の動作の詳細については、後述する。

したがって、本実施の形態１に係る音入出力制御装置２００は、１組の音出力装置１００が２台の音出力装置１００からなる場合、当該２台の音出力装置１００から個別に取得した生体情報が同期している場合、当該２台の音出力装置１００は同一のユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第１の動作を行うように当該２台の音出力装置１００を制御する。
また、音入出力制御装置２００は、１組の音出力装置１００が２台の音出力装置１００からなる場合、当該２台の音出力装置１００から個別に取得した生体情報が同期していない場合、当該２台の音出力装置１００は異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第２の動作を行うように当該２台の音出力装置１００を制御する。

また、音入出力制御装置２００は、１組の音出力装置１００が３台以上の音出力装置１００からなり、１組の音出力装置１００のうち２台の音出力装置１００から個別に取得した生体情報が同期している場合、当該２台の音出力装置１００は同一のユーザに装着されていると判断する。同時に、音入出力制御装置２００は、１組の音出力装置１００のうち生体情報が同期していない他の音出力装置１００がある場合、１組の音出力装置１００のうち他の音出力装置１００は異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第１の動作を行うように当該２台の音出力装置１００を制御するとともに、上記第２の動作を行うように他の音出力装置１００を制御する。
また、音入出力制御装置２００は、１組の音出力装置１００が３台以上の音出力装置１００からなり、これらの音出力装置１００から個別に取得した生体情報がいずれも同期していない場合、これらの音出力装置１００はいずれも異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第２の動作を行うようにこれらの音出力装置１００を制御する。

音入出力処理部２０４は、通信部２０５が音楽再生装置（図示省略）から受信した音声信号に所定の処理を行って、それぞれの音出力装置１００に送信する音声信号を生成する。例えば、音入出力処理部２０４は、ステレオ方式の音声信号又はモノラル方式の音声信号を生成する。そして、音入出力処理部２０４が生成した音声信号は、通信部２０５によって、それぞれの音出力装置１００に送信される。
例えば、１組の音出力装置１００が、右耳用の音出力装置１００、左耳用の音出力装置１００からなり、これらの音出力装置１００が同一のユーザに装着されている場合、第１の動作として、音入出力処理部２０４は、右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５は、音入出力処理部２０４が生成した右耳用の音声信号を右耳用の音出力装置１００に送信し、音入出力処理部２０４が生成した左耳用の音声信号を左耳用の音出力装置１００に送信する。言い換えると、第１の動作とは、ステレオ方式の音声信号の再生動作（一人モード）である。
また、１組の音出力装置１００が異なるユーザに装着されている場合、第２の動作として、音入出力処理部２０４は、モノラル方式の音声信号を生成し、通信部２０５は、モノラル方式の音声信号をそれぞれの音出力装置１００に送信する。言い換えると、第２の動作とは、モノラル方式の音声信号の再生動作（二人モード）である。
１組の音出力装置１００が異なるユーザに装着されている場合、第２の動作として、音入出力処理部２０４は、音入力部１０３が収音した音声信号を取得し、通信部２０５は、収音した音声信号を他の音出力装置１００に送信してもよい。言い換えると、第２の動作とは、音出力装置１００による異なるユーザ間の通信動作（トランシーバモード）であってもよい。トランシーバモードは、片方向の送受信のみであってもよく、双方向に送受信が可能であってもよい。
第２の動作とは、後述するように、音声出力の音量または音質調整などを別個に設定可能な動作モードであってもよい。

通信部２０５は、音入出力制御装置２００と音出力装置１００及び音楽再生装置（図示省略）との間の通信を行う。
音入出力制御装置２００と音出力装置１００及び音楽再生装置との間の通信は、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。音入出力制御装置２００と音出力装置１００及び音楽再生装置との間の通信として何れの通信を用いるのか、音入出力制御装置２００と音出力装置１００及び音楽再生装置との間の距離に応じて切り替えられてもよい。

なお、音入出力制御装置２００は、スマートフォン等の携帯機器、ＤＡＰ、ＣＤプレーヤ等の音楽再生装置と一体であってもよい。この場合通信部２０５は、音入出力制御装置２００と音出力装置１００との通信を行う。また、音楽再生装置に音入出力制御装置２００の上記機能を実行させるアプリーケーションプログラムがインストールされてもよい。

実施の形態２
図２は、本発明の実施の形態２に係る音入出力制御装置としてのヒアラブルデバイス３００の構成を模式的に示すブロック図である。実施の形態２に係るヒアラブルデバイス３００は、実施の形態１に係る音出力装置１００と音入出力制御装置２００とが一体化したものである。したがって、ヒアラブルデバイス３００に備えられる、生体センサ３０１、音出力部３０２、音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６、音入出力処理部３０７の機能は、図１に示す生体センサ１０１、音出力部１０２、音入力部１０３、生体情報取得部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４と同様である。また、ヒアラブルデバイス３００に備えられる通信部３０８の機能は、図１に示す通信部１０４の機能と通信部２０５の機能とを合わせたものと同様である。そのため、生体センサ３０１、音出力部３０２、音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６、音入出力処理部３０７、通信部３０８の機能のうち、生体センサ１０１、音出力部１０２、音入力部１０３、生体情報取得部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４、通信部１０４、通信部２０５と同一の機能については、その説明を省略する。

また、ヒアラブルデバイス３００は、実施の形態１に係る音出力装置１００と同様に、ユーザに独立して装着され、当該ユーザに向けて音を出力する。具体的には、ヒアラブルデバイス３００は、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等の完全に独立した個々のイヤホン等であり、ユーザに独立して装着される。すなわち、複数のヒアラブルデバイス３００は、互いに完全に独立して、ユーザに装着される。通常、フルワイヤレスイヤホン、フルワイヤレス骨伝導イヤホン等は、２個の完全に独立したイヤホンが１組となっている。しかし、本発明では、３個以上のヒアラブルデバイス３００が１組となっていてもよい。

本実施の形態２に係るヒアラブルデバイス３００は、図２に示すように、生体センサ３０１、音出力部３０２、音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６、音入出力処理部３０７、通信部３０８等を備える。なお、１組のヒアラブルデバイス３００のうち、少なくとも１つのヒアラブルデバイス３００が音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６を備えていればよく、他のヒアラブルデバイス３００は音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６を備えていなくてもよい。１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６が備えられる場合、音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６が備えられたヒアラブルデバイス３００をマスター装置とし、他のヒアラブルデバイス３００をスレーブ装置としてもよい。

生体センサ３０１が検出した生体信号は、生体情報取得部３０４に入力される。また、生体センサ３０１が検出した生体信号は、通信部３０８によって、他のヒアラブルデバイス３００に送信される。

音出力部３０２は、音楽再生装置としての携帯機器４００から通信部３０８が受信した音声信号に従って、ユーザに向けて音を出力する。
また、音出力部３０２は、他のヒアラブルデバイス３００から通信部３０８が受信した音声信号に従って、ユーザに向けて音を出力する。

音入力部３０３が取得した音声信号は、通信部３０８によって、他のヒアラブルデバイス３００に送信される。
なお、１組のヒアラブルデバイス３００の全てに、音入力部３０３が備えられる場合、音入力部３０３が上記反響音信号を取得してもよい。そして、音入力部３０３が取得した反響音信号は、生体情報取得部３０４に入力される。また、音入力部３０３が取得した反響音信号は、通信部３０８によって、他のヒアラブルデバイス３００に送信されてもよい。この場合、生体情報取得部３０４は、当該反響音信号からユーザの個人認証情報を生成し、生体情報として取得してもよい。

生体情報取得部３０４は、１組のヒアラブルデバイス３００のそれぞれから、生体センサ３０１によって検出される当該ユーザの生体信号を生体情報として個別に取得する。
例えば、１組のヒアラブルデバイス３００の全てに生体情報取得部３０４が備えられる場合、生体情報取得部３０４は、当該生体情報取得部３０４が備えられるヒアラブルデバイス３００の生体センサ３０１が検出した生体信号を生体情報として取得するとともに、通信部３０８が受信した他のヒアラブルデバイス３００の生体センサ３０１が検出した生体信号も生体情報として取得する。
また、１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ生体情報取得部３０４が備えられる場合、当該生体情報取得部３０４は、当該生体情報取得部３０４が備えられるヒアラブルデバイス３００の生体センサ３０１が検出した生体信号を生体情報として取得するとともに、通信部３０８が受信した他のヒアラブルデバイス３００の生体センサ３０１が検出した生体信号も生体情報として取得する。
生体情報取得部３０４が取得する生体情報は、例えば、ユーザの脈拍、血圧、呼吸、体温等に関する情報である。また、生体情報取得部３０４は、生体センサ３０１が検出した反響音信号、及び、通信部３０８が受信した他のヒアラブルデバイス３００の反響音信号からユーザの個人認証情報を生成し、当該個人認証情報を生体情報として取得してもよい。

同期性判定部３０５は、生体情報取得部３０４によって１組のヒアラブルデバイス３００のそれぞれから取得された生体情報が同期しているか否かを判定する。１組のヒアラブルデバイス３００の全てにおいて、それぞれ、同期性判定部３０５による同期判定が行われてもよい。また、１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ生体情報取得部３０４、同期性判定部３０５が備えられる場合、他のヒアラブルデバイス３００から生体信号が当該１台のヒアラブルデバイス３００に送信されて、当該１台のヒアラブルデバイス３００の同期性判定部３０５による同期判定が行われてもよい。

動作制御部３０６は、ヒアラブルデバイス３００の動作を制御する。
１組のヒアラブルデバイス３００の全てにおいて、それぞれ、動作制御部３０６による動作制御が行われてもよい。例えば、１組のヒアラブルデバイス３００のうち、２台のヒアラブルデバイス３００において、一方のヒアラブルデバイス３００の生体情報と他方のヒアラブルデバイス３００の生体情報とが同期している場合、当該２台のヒアラブルデバイス３００の動作制御部３０６は、上記第１の動作を行うように当該ヒアラブルデバイス３００を制御する。また、１組のヒアラブルデバイス３００の上記２台以外のヒアラブルデバイス３００のそれぞれの動作制御部３０６は、上記第２の動作を行うように当該ヒアラブルデバイス３００を制御する。
また、１組のヒアラブルデバイス３００の全てにおいて、一のヒアラブルデバイス３００の生体情報と他のヒアラブルデバイス３００の生体情報とが同期していない場合、それぞれのヒアラブルデバイス３００の動作制御部３０６は、第２の動作を行うように当該ヒアラブルデバイス３００を制御する。
また、１組のヒアラブルデバイス３００のうち、１台のヒアラブルデバイス３００にのみ生体情報取得部３０４、同期性判定部３０５、動作制御部３０６が備えられる場合、当該１台のヒアラブルデバイス３００の動作制御部３０６が、他のヒアラブルデバイス３００の動作を制御してもよい。例えば、１組のヒアラブルデバイス３００のうち、２台のヒアラブルデバイス３００において、一方のヒアラブルデバイス３００の生体情報と他方のヒアラブルデバイス３００の生体情報とが同期している場合、動作制御部３０６は、上記第１の動作を行うように当該２台のヒアラブルデバイス３００を制御する。また、動作制御部３０６は、上記第２の動作を行うように、１組のヒアラブルデバイス３００の上記２台以外のヒアラブルデバイス３００を制御する。
また、１組のヒアラブルデバイス３００の全てにおいて、一のヒアラブルデバイス３００の生体情報と他のヒアラブルデバイス３００の生体情報とが同期していない場合、動作制御部３０６は、第２の動作を行うようにそれぞれのヒアラブルデバイス３００を制御する。
ここで、第１の動作、及び第２の動作とは、実施の形態１と同等の動作である。

音入出力処理部３０７は、通信部３０８が音楽再生装置としての携帯機器４００から受信した音声信号に所定の処理を行って、音出力部３０２に入力する音声信号を生成する。
例えば、１組のヒアラブルデバイス３００が、右耳用のヒアラブルデバイス３００、左耳用のヒアラブルデバイス３００からなり、これらのヒアラブルデバイス３００が同一のユーザに装着されている場合、右耳用のヒアラブルデバイス３００の音入出力処理部３０７は右耳用の音声信号を生成し、左耳用のヒアラブルデバイス３００の音入出力処理部３０７は左耳用の音声信号を生成する。
また、１組のヒアラブルデバイス３００が異なるユーザに装着されている場合、それぞれのヒアラブルデバイス３００の音入出力処理部３０７は、モノラル方式の音声信号を生成する。

通信部３０８は、当該通信部３０８が備えられるヒアラブルデバイス３００と他のヒアラブルデバイス３００との間の通信を行う。また、通信部３０８は、当該通信部３０８が備えられるヒアラブルデバイス３００と音楽再生装置としての携帯機器４００との間の通信を行う。
ヒアラブルデバイス３００間の通信は、近接場磁気誘導通信、及び、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。ヒアラブルデバイス３００間の通信として何れの通信を用いるのか、ヒアラブルデバイス３００間の距離に応じて切り替えられてもよい。
ヒアラブルデバイス３００と携帯機器４００との間の通信は、Bluetooth（登録商標）、Wi-Fi（登録商標）等の無線ＬＡＮ、赤外線通信、ＮＦＣ等の近距離無線通信等である。ヒアラブルデバイス３００と携帯機器４００との間の通信として何れの通信を用いるのか、ヒアラブルデバイス３００と携帯機器４００との間の距離に応じて切り替えられてもよい。

なお、音楽再生装置は、上記に挙げたスマートフォン等の携帯機器４００だけでなく、ＤＡＰ、ＣＤプレーヤ等であってもよい。また、ヒアラブルデバイス３００は、音楽再生装置と一体であってもよい。

次に、図３乃至図６を参照しながら、本発明の実施の形態１又は２に係る音入出力制御方法の例について説明する。なお、以下の説明では、１組の音出力装置１００又は１組のヒアラブルデバイス３００が２台の音出力装置１００又は２台のヒアラブルデバイス３００からなり、一方の音出力装置１００又はヒアラブルデバイス３００がマスター装置となり、他方の音出力装置１００又はヒアラブルデバイス３００がスレーブ装置となる場合を例に挙げて説明する。
また、以下の説明では、実施の形態１に係る音入出力制御装置２００における処理フローを例に挙げて説明する。実施の形態２に係るヒアラブルデバイス３００における処理フローの説明は、生体センサ１０１、音出力部１０２、音入力部１０３、生体情報取得部２０１、同期性判定部２０２、動作制御部２０３、音入出力処理部２０４、通信部１０４、通信部２０５による処理を、それぞれ、生体センサ３０１、音出力部３０２、音入力部３０３、生体情報取得部３０４、同期性判定部３０５、動作制御部３０６、音入出力処理部３０７、通信部３０８による処理に読み換えれば同様となるため、その説明を省略する。

最初に、図３に示す音入出力制御方法の例について説明する。
まず、生体情報取得部２０１は、１組の音出力装置１００のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する（ステップＳ１０１）。すなわち、生体情報取得部２０１は、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから、生体情報を個別に取得する。

次に、同期性判定部２０２は、生体情報取得部２０１によって、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから取得された生体情報が同期しているか否かを判定する（ステップＳ１０２）。

ステップＳ１０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから取得された生体情報が同期している場合（ステップＳ１０２；Ｙｅｓ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を一人モード（第１の動作）で動作するように制御する（ステップＳ１０３）。

そして、右耳用の音出力装置１００と左耳用の音出力装置１００において通常動作が行われる（ステップＳ１０４）。具体的には、音入出力処理部２０４が右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５が右耳用の音声信号を右耳用の音出力装置１００に送信し、左耳用の音声信号を左耳用の音出力装置１００に送信する。そして、右耳用の音出力装置１００の音出力部１０２が当該右耳用の音声信号に従ってユーザに向けて音を出力し、左耳用の音出力装置１００の音出力部１０２が当該左耳用の音声信号に従ってユーザに向けて音を出力する。

ステップＳ１０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから取得された生体情報が同期していない場合（ステップＳ１０２；Ｎｏ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を二人モード（第２の動作）で動作するように制御する（ステップＳ１０５）。

そして、右耳用の音出力装置１００と左耳用の音出力装置１００においてモノラル方式で音楽の再生が行われる（ステップＳ１０６）。具体的には、音入出力処理部２０４がモノラル方式の音声信号を生成し、通信部２０５が当該モノラル方式の音声信号を右耳用の音出力装置１００と左耳用の音出力装置１００とに送信する。そして、右耳用の音出力装置１００音出力部１０２と左耳用の音出力装置１００の音出力部１０２とが、それぞれ、当該モノラル方式の音声信号に従ってユーザに向けて音を出力する。

次に、図４に示す音入出力制御方法の例について説明する。図４に示す音入出力制御方法において、ステップＳ２０１、ステップＳ２０２、ステップＳ２０４の処理は、それぞれ、図３に示す音入出力制御方法のステップＳ１０１、ステップＳ１０２、ステップＳ１０４の処理と同様であるため、その説明を省略する。

ステップＳ２０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから取得された生体情報が同期している場合（ステップＳ２０２；Ｙｅｓ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を音声出力モード（第１の動作）で動作するように制御する（ステップＳ２０３）。

ステップＳ２０２において、右耳用の音出力装置１００と左耳用の音出力装置１００のそれぞれから取得された生体情報が同期していない場合（ステップＳ２０２；Ｎｏ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００をトランシーバモード（第２の動作）で動作するように制御する（ステップＳ２０５）。

そして、一方の音出力装置１００のマイク（音入力部）１０３で収音したユーザの音声信号が他方の音出力装置１００へ送信され、他方の音出力装置１００が当該音声信号を受信し、他方の音出力装置１００の音出力部１０２は、当該音声信号に従って、ユーザに音を出力する（ステップＳ２０６）。例えば、右耳用の音出力装置１００を装着したユーザの音声が当該右耳用の音出力装置１００のマイク（音入力部）１０３によって収音され、左耳用の音出力装置１００へ送信される。そして、左耳用の音出力装置１００の音出力部１０２は、当該音声信号に従って、当該左耳用の音出力装置１００を装着したユーザに音を出力する。反対に、左耳用の音出力装置１００を装着したユーザの音声が当該左耳用の音出力装置１００のマイク（音入力部）１０３によって収音され、右耳用の音出力装置１００へ送信される。そして、右耳用の音出力装置１００の音出力部１０２は、当該音声信号に従って、当該右耳用の音出力装置１００を装着したユーザに音を出力する。これにより、右耳用の音出力装置１００と左耳用の音出力装置１００とが異なるユーザに装着された場合に、右耳用の音出力装置１００と左耳用の音出力装置１００とをトランシーバとして用いることができる。

なお、上記トランシーバモードにおいて、動作制御部２０３は、音出力部１０２による音声信号に基づく音の出力を停止させるように、又は、音声信号に基づく音の出力の音量を低下させるように音出力装置１００を制御してもよい。また、上記トランシーバモードにおいて、動作制御部２０３は、右耳用の音出力装置１００又は左耳用の音出力装置１００の何れか一方における音入力部１０３による収音を停止させるように音出力装置１００を制御してもよい。

次に、図５に示す音入出力制御方法の例について説明する。図５に示す音入出力制御方法において、ステップＳ３０１、ステップＳ３０２、ステップＳ３０３、ステップＳ３０５の処理は、それぞれ、図３に示す音入出力制御方法のステップＳ１０１、ステップＳ１０２、ステップＳ１０３、ステップＳ１０５の処理と同様であるため、その説明を省略する。

ステップＳ３０３において、右耳用及び左耳用の音出力装置１００が一人モード（第１の動作）で動作するように制御された後、右耳用の音出力装置１００と左耳用の音出力装置１００において音量や音質等の同時調整（通常動作）が行われる（ステップＳ３０４）。具体的には、音入出力処理部２０４が右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５が右耳用の音声信号を右耳用の音出力装置１００に送信し、左耳用の音声信号を左耳用の音出力装置１００に送信する。また、動作制御部２０３は、例えば、右耳用及び左耳用の音出力装置１００における音出力部１０２が音を出力する音量や音質を実質的に同じ音量や音質となるように同時に調整する。そして、右耳用の音出力装置１００の音出力部１０２が当該右耳用の音声信号に従ってユーザに向けて音を出力し、左耳用の音出力装置１００の音出力部１０２が当該左耳用の音声信号に従ってユーザに向けて音を出力する。

ステップＳ３０５において、右耳用及び左耳用の音出力装置１００が二人モード（第２の動作）で動作するように制御された後、右耳用の音出力装置１００と左耳用の音出力装置１００において音量や音質の個別調整が行われる（ステップＳ３０６）。具体的には、音入出力処理部２０４が右耳用の音声信号と左耳用の音声信号を生成し、通信部２０５が右耳用の音声信号を右耳用の音出力装置１００に送信し、左耳用の音声信号を左耳用の音出力装置１００に送信する。また、動作制御部２０３は、例えば、右耳用及び左耳用の音出力装置１００における音出力部１０２が音を出力する音量や音質を個別に調整可能とする。例えば、音入出力制御装置２００又は音楽再生装置が、自身の表示部（図示省略）に、右耳用の音量や音質を調整するための設定画面と左耳用の音量や音質を調整するための設定画面を別々に表示する。これにより、右耳用の音出力装置１００を装着したユーザ及び左耳用の音出力装置１００を装着したユーザがそれぞれの設定画面を操作することにより、右耳用の音出力装置１００と左耳用の音出力装置１００の音量や音質をそれぞれのユーザごとに好みのものに設定できる。そして、右耳用の音出力装置１００の音出力部１０２が当該右耳用の音声信号に従ってユーザに向けて音を出力し、左耳用の音出力装置１００の音出力部１０２が当該左耳用の音声信号に従ってユーザに向けて音を出力する。

次に、図６に示す音入出力制御方法の例について説明する。図６に示す音入出力制御方法において、ステップＳ４０１の処理は、それぞれ、図３に示す音入出力制御方法のステップＳ１０１の処理と同様であるため、その説明を省略する。

同期性判定部２０２は、ステップＳ１０２又はＳ２０２又はＳ３０２における同期性判定を行う前に、生体情報取得部２０１によって、右耳用の音出力装置１００と左耳用の音出力装置１００の双方から生体情報が取得されたか否かを判定する（ステップＳ４０２）。

ステップＳ４０２において、右耳用の音出力装置１００と左耳用の音出力装置１００の双方から生体情報が取得されている場合（ステップＳ４０２；Ｙｅｓ）、ステップＳ１０２又はＳ２０２又はＳ３０２の処理へ進む（ステップＳ４０３）。

ステップＳ４０２において、右耳用の音出力装置１００と左耳用の音出力装置１００の双方から生体情報が取得されていない場合（ステップＳ４０２；Ｎｏ）、動作制御部２０３は、右耳用の音出力装置１００と左耳用の音出力装置１００を一人モードで動作するように制御する（ステップＳ４０４）。そして、ステップＳ１０４又はＳ２０４又はＳ３０４の処理へ進む（ステップＳ４０５）。

以上に説明した、実施の形態１に係る音入出力制御装置２００によれば、同期性判定部２０２が、生体情報取得部２０１によって音出力装置１００のそれぞれから取得された生体情報が同期しているか否かが判定する。また、同期性判定部２０２によって音出力装置１００のそれぞれから取得された生体情報が同期していると判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが同一のユーザに装着されている場合に適した第１の動作を行うように音出力装置１００のそれぞれを制御する。また、同期性判定部２０２によって音出力装置１００のそれぞれから取得された生体情報が同期していないと判定された場合に、動作制御部２０３は、音出力装置１００のそれぞれが異なるユーザに装着されている場合に適した第２の動作を行うように音出力装置１００のそれぞれを制御する。
また、音入出力制御装置２００は、１組の音出力装置１００から個別に取得した生体情報がいずれも同期していない場合、これらの音出力装置１００はいずれも異なるユーザに装着されていると判断する。そして、音入出力制御装置２００は、上記第２の動作を行うようにこれらの音出力装置１００を制御する。
そのため、ユーザの耳に独立して装着される複数の音出力装置１００に、ステレオ方式の音を出力する等の通常の動作である第１の動作以外の、音出力装置１００のそれぞれが異なるユーザに装着されている場合に適した第２の動作も付与することができる。よって、音出力装置１００により広い用途を付与することができる。
実施の形態２に係るヒアラブルデバイス３００も同様である。

上述の実施の形態では、本発明をハードウェアの構成として説明したが、本発明は、これに限定されるものではない。本発明は、図３乃至６のフローチャートに記載の処理手順を、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）にコンピュータプログラムを実行させることにより実現することも可能である。

また、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ ｃｏｍｐｕｔｅｒ ｒｅａｄａｂｌｅ ｍｅｄｉｕｍ）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（ｔａｎｇｉｂｌｅ ｓｔｏｒａｇｅ ｍｅｄｉｕｍ）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ ＰＲＯＭ）、フラッシュＲＯＭ、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（ｔｒａｎｓｉｔｏｒｙ ｃｏｍｐｕｔｅｒ ｒｅａｄａｂｌｅ ｍｅｄｉｕｍ）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。

なお、本発明は上述した実施の形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。

１００ 音出力装置
２００ 音入出力制御装置
３００ ヒアラブルデバイス（音入出力制御装置）
１０１、３０１ 生体センサ
１０２、３０２ 音出力部
１０３、３０３ 音入力部
１０４、３０８ 通信部
２０１、３０４ 生体情報取得部
２０２、３０５ 同期性判定部
２０３、３０６ 動作制御部
２０４、３０７ 音入出力処理部
２０５、３０８ 通信部
４００ 携帯機器（音楽再生装置）

Claims (9)

1. ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する音入出力制御装置であって、
   前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する生体情報取得部と、
   前記生体情報取得部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期しているか否かを判定する同期性判定部と、
   前記音出力装置のそれぞれの動作を制御する動作制御部と、
   を備え、
   前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していると判定された場合に、前記動作制御部は、第１の動作を行うように前記音出力装置のそれぞれを制御し、
   前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していないと判定された場合に、前記動作制御部は、第２の動作を行うように前記音出力装置のそれぞれを制御する、音入出力制御装置。
2. 前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していないと判定された場合に、前記動作制御部は、前記音出力装置のそれぞれにモノラル方式の音を出力させる、請求項１に記載の音入出力制御装置。
3. 前記音出力装置の少なくとも１つは、当該音出力装置が装着されたユーザの音声を収音する音入力部を備え、
   前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していないと判定された場合に、前記動作制御部は、一の前記音出力装置から前記音入力部によって収音された音声を、他の前記音出力装置に出力させる、請求項１に記載の音入出力制御装置。
4. 前記同期性判定部によって前記音出力装置のうち少なくとも２つから取得された前記生体情報が同期していないと判定された場合に、前記動作制御部は、前記音出力装置のそれぞれの音量を個別に調整可能とする、請求項１乃至３の何れか一項に記載の音入出力制御装置。
5. 前記生体情報取得部が取得する前記生体情報は、前記音出力装置が装着されたユーザの脈拍、血圧、呼吸、体温の少なくとも１つに関する情報である、請求項１乃至４の何れか一項に記載の音入出力制御装置。
6. 前記生体情報取得部が取得する前記生体情報は、前記音出力装置が装着されたユーザの耳の穴の中の音の反響性、又は、前記音出力装置が装着されたユーザの声紋に関する情報である、請求項１乃至４の何れか一項に記載の音入出力制御装置。
7. 前記音出力装置と一体的に構成される、請求項１乃至６の何れか一項に記載の音入出力制御装置。
8. ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を音入出力制御装置によって制御する音入出力制御方法であって、
   前記音入出力制御装置が、
   前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得し、
   前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期しているか否かを判定し、
   前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、
   前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御する、音入出力制御方法。
9. 音入出力制御装置に、ユーザに独立して装着され、当該ユーザに向けて音を出力する複数の音出力装置を制御する処理を実行させるプログラムであって、
   前記音入出力制御装置に、
   前記音出力装置のそれぞれによって検出される当該ユーザの生体信号を生体情報として取得する処理と、
   前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期しているか否かを判定する処理と、
   前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していると判定した場合に、第１の動作を行うように前記音出力装置のそれぞれを制御し、
   前記音出力装置のうち少なくとも２つから取得した前記生体情報が同期していないと判定した場合に、第２の動作を行うように前記音出力装置のそれぞれを制御する処理と、を実行させるプログラム。

Images