JP6856277B1 - 音声入力で翻訳言語を設定する自動音声翻訳システム、自動音声翻訳方法及びそのプログラム - Google Patents

Abstract

【課題】挨拶などの簡易な言葉（音声）を発するだけで、言語の種類を判別し、翻訳する言語を容易に設定することができ、双方向の自動音声翻訳を簡易な操作で実現する。【解決手段】第１会話者Ａ（日本人）が発する第１言語（日本語）の音声と、この第１言語と異なる第２会話者Ｂ（外国人）が発する第２言語（母国語）の音声を双方向に翻訳する、音声入力で翻訳言語を設定する自動音声翻訳システムであり、音声翻訳端末器１に、第２会話者Ｂが発する第２言語の音声データを入力し、その音声データを翻訳管理サーバ１１に送信し、翻訳管理サーバ１１で翻訳する言語（第１言語）を分析して特定することで、双方の翻訳言語が設定され、その設定された言語（第２言語）と第１言語の双方向に音声翻訳内容を音声翻訳端末器１へ送信し、音声を発する。【選択図】図２

Description

本発明は、ある言語で表現された会話の内容を他の言語の音声に翻訳する音声翻訳技術に係り、特に、会話している相手が発する言語が判別できないときに、その音声を入力し、その言語の種類を判別して音声翻訳する、音声入力で翻訳言語を設定する自動音声翻訳システム、自動音声翻訳方法及びそのプログラムに関する。

従来の音声翻訳装置（通訳装置）は、それを使用する人の言語（例えば日本語）と、会話している相手の言語（例えば英語）との双方向に音声翻訳するものである。

この音声翻訳装置を用いて会話をする方法は、図１２の「レンタカーを借りるときの会話」の作業概略図に示すように、この音声翻訳装置５１は、先ず使用者の言語、例えば「日本語」を設定するスイッチを押し、次に会話相手の言語、例えば「英語」を設定するスイッチを押す。その後、使用者は音声翻訳装置５１に「１日だけレンタカーを借りたいのですが」と音声をマイク５２から入力する。この音声翻訳装置５１はこの音声を取り込み、その音声データを、無線ＬＡＮを通じて、音声翻訳を管理する管理サーバ５３に送信する。この管理サーバ５３では、データベースに蓄積された「レンタカーを借りたいのですが」に相当する英語表現を選択し、「Ｉ’ｄ ｌｉｋｅ ｔｏ ｒｅｎｔ ａ ｃａｒ．」を選択し、この音声データを送信する。この音声データを受信した音声翻訳装置５１が「Ｉ’ｄ ｌｉｋｅ ｔｏ ｒｅｎｔ ａ ｃａｒ．」の音声に変換して、その音声をスピーカ５４から出力する。この音声を会話の相手が聞いて、双方の会話が成立するようになっている。

このような翻訳装置に関する技術は種々提案されている。例えば、特許文献１の特開２０１９−１７４７８６号公報「音声翻訳装置、音声翻訳方法及びそのプログラム」のように、音声翻訳装置であって、前記音声翻訳装置の使用者または前記使用者の会話相手に操作されることにより翻訳開始を指示する翻訳開始ボタンと、マイクロホンアレイ部により取得された音響信号を信号処理することにより、音源方向を推定する音源方向推定部と、使用者、前記会話相手、及び、ディスプレイの異なる位置関係を示し、記憶部に記憶されている複数のレイアウト情報のうち、予め選択された一のレイアウト情報に示される位置関係を用いて、前記翻訳開始ボタンにより翻訳開始が指示された後において前記音源方向推定部により推定された音源方向に基づき、音声を発した会話者が前記使用者及び前記会話相手のうちの一方の者であることを特定し、かつ、第１言語と前記第１言語と異なる第２言語のうち前記音響信号の内容を認識する一方の言語と翻訳する他方の言語とを示す翻訳方向を決定する制御部と、前記制御部により決定された前記翻訳方向に従って、認識処理部に前記音響信号を前記一方の言語で認識させて得た、前記音響信号の内容を示すテキスト文、及び、翻訳処理部に当該テキスト文を他方の言語で翻訳させて得た、前記音響信号の内容を示す翻訳テキスト文を取得する翻訳部と、特定された前記一方の者の位置に対応する前記ディスプレイの領域に、前記テキスト文を表示させ、前記一方と異なる他方の者の位置に対応する、前記ディスプレイの領域に前記翻訳テキスト文を表示させるディスプレイ部とを備える、音声翻訳装置が提案されている。

特開２０１９−１７４７８６号公報

特許文献１に開示された「音声翻訳装置、音声翻訳方法及びそのプログラム」は、使用者とその会話相手とは、毎回ボタン操作を行ってから会話する必要があり、操作が煩雑であるという課題を解決したものである。使用者とその会話相手とが会話を開始する度にボタン操作をしなくても、翻訳開始時に翻訳開始ボタンを１度押すことで、音源方向に基づき、音声を発した会話者が使用者及び会話相手のうちの一方の者であることを特定することで、使用者と会話相手との会話に応じて認識言語と翻訳言語との切替が自動で行われるものである。しかし、会話相手が発する言語を判別できないときは、翻訳開始ボタンを押せないという問題を有していた。

従来の音声翻訳装置は、会話相手の言語の種類が明確に判別できるときは容易に利用できる。英語、フランス語、ドイツ語、中国語といった主要な言語のときは判別しやすく、その言語の種類のスイッチを容易に押すことができる。しかしながら、最近は日本において馴染みの少ない言語に出会う機会が多くなってきた。このような場合には、会話相手が発する言語を判別しづらく、音声翻訳装置を容易に使用できないという問題を有していた。

また、主要な言語であっても、いわゆる方言、訛り（なまり）がある音声の場合も言語を区別できないことがあった。例えば、英語といってもアメリカ英語、イギリス英語、オーストラリア英語、カナダ英語のように種々あり、それぞれ微妙に言語表現が相違している。

また、従来の音声翻訳装置では、日本人が海外旅行において病気、けがをしたときに、病院や周囲の人たちに、病気、けがの状況を正確に伝達しづらいことがあった。特に、言語そのものが不明なときは音声翻訳装置を的確に使用できないという問題を有していた。同様に、外国人が日本に旅行しているときに、病気、けがをしたときにも、その病気、けがの状況を正確に伝達できず、緊急に対応できないという問題を有していた。

更に、日本人が海外旅行において、又は外国人が日本に旅行しているときに、犯罪や事件に巻き込まれたときに、従来の音声翻訳装置では、警察や事件現場においてその状況について、正確に伝達できないことがあった。このときも言語そのものが不明なときは音声翻訳装置を使用できないという問題を有していた。

本発明は、かかる問題点を解決するために創案されたものである。すなわち、本発明の目的は、挨拶などの簡易な言葉（音声）を発するだけで、言語の種類を判別し、翻訳する言語を容易に設定することができ、双方向の自動音声翻訳を簡易な操作で実現することができる音声入力で翻訳言語を設定する自動音声翻訳システム、自動音声翻訳方法及びそのプログラムを提供することにある。

本発明の自動音声翻訳システムは、第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声を双方向に翻訳する、音声入力で翻訳言語を設定する自動音声翻訳システムであって、
入力部（２）の操作により制御される制御部（３）と、第１言語を使用している第１会話者（Ａ）が発する会話の音声データ及び第２言語を使用している第２会話者（Ｂ）が発する会話の音声データを入力する音声入力部（４）と、翻訳管理サーバ（１１）で音声翻訳された第２言語の音声データ及び、同じく音声翻訳された第１言語の音声データを出力する音声出力部（５）と、該音声入力部（４）で入力した第１言語と第２言語の音声データを前記翻訳管理サーバ（１１）に送信すると共に、該翻訳管理サーバ（１１）から出力した第２言語と第１言語の音声データを受信する送信部・受信部（６）と、を有する音声翻訳端末器（１）と、
入力部（１４）の操作により制御される制御部（１２）と、前記音声翻訳端末器（１）の音声入力部（４）から入力した第１言語及び第２言語の音声データを受信し、翻訳管理サーバ（１１）から出力した第２言語及び第１言語の音声データを送信する送信部・受信部（１３）と、言語の種類特定に関する情報データを蓄積した多言語情報データベース（１８ａ）と、「方言」と医療関係用語、刑事事件関係用語のような「専門用語」を蓄積した専門用語・方言情報データベース（１８ｂ）と、該送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語による専門用語に関する会話内容の音声データ、又は第２会話者（Ｂ）が方言により発する第２言語の音声データから、該多言語情報データベース（１８ａ）と該専門用語・方言情報データベース（１８ｂ）を用いてその第２言語の種類を特定する言語分析部（１６）と、該言語分析部（１６）で設定された第２言語を第１言語に音声翻訳し、第１言語を第２言語に音声翻訳する翻訳部（１５）と、を有する翻訳管理サーバ（１１）と、を備え、
前記音声翻訳端末器（１）に、第２会話者（Ｂ）が発する第２言語による専門用語に関する会話内容の音声データ、又は第２会話者（Ｂ）が方言により発する第２言語の音声データを入力し、
その音声データを前記翻訳管理サーバ（１１）に送信し、該翻訳管理サーバ（１１）で翻訳する言語（第２言語）を分析して特定することで、その翻訳言語が設定され、
その設定された言語（第２言語）と第１言語の双方向に音声翻訳内容を該音声翻訳端末器（１）へ送信し、音声を発するように構成された、ことを特徴とする。

また、本発明の自動音声翻訳システムは、第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声と、更に第１言語、第２言語と異なる第３会話者（Ｃ）が発する第３言語の音声をそれぞれに翻訳する、音声入力で翻訳言語を設定する自動音声翻訳システムであって、
入力部（２）の操作により制御される制御部（３）と、第１言語を使用している第１会話者（Ａ）が発する会話の音声データ、第２言語を使用している第２会話者（Ｂ）が発する会話の音声データ及び第３言語を使用している第３会話者（Ｃ）が発する会話の音声データを入力する音声入力部（４）と、翻訳管理サーバ（１１）で音声翻訳された第２言語、第３言語の音声データ及び、同じく音声翻訳された第１言語の音声データを出力する音声出力部（５）と、該音声入力部（４）で入力した第１言語、第２言語及び第３言語の音声データを前記翻訳管理サーバ（１１）に送信すると共に、該翻訳管理サーバ（１１）から出力した第２言語、第３言語と第１言語の音声データを受信する送信部・受信部（６）と、有する音声翻訳端末器（１）と、
入力部（１４）の操作により制御される制御部（１２）と、前記音声翻訳端末器（１）の音声入力部（４）から入力した第１言語、第２言語及び第３言語の音声データを受信し、翻訳管理サーバ（１１）から出力した第２言語、第３言語及び第１言語の音声データを送信する送信部・受信部（１３）と、言語の種類特定に関する情報データを蓄積した多言語情報データベース（１８ａ）と、「方言」と医療関係用語、刑事事件関係用語のような「専門用語」を蓄積した専門用語・方言情報データベース（１８ｂ）と、該送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語、第３会話者（Ｃ）が発する第３言語による専門用語に関する会話内容音声データ、又は第２会話者（Ｂ）、第３会話者（Ｃ）が方言により発する第２言語、第３言語の音声データから、該多言語情報データベース（１８ａ）と該専門用語・方言情報データベース（１８ｂ）を用いてその第２言語、第３言語の種類を特定する言語分析部（１６）と、該言語分析部（１６）で設定された第２言語、第３言語が発する会話の音声を第１言語に音声翻訳し、第１言語を第２言語、第３言語に音声翻訳する翻訳部（１５）と、を有する翻訳管理サーバ（１１）と、を備え、
前記音声翻訳端末器（１）に、第２会話者（Ｂ）、第３会話者（Ｃ）が発する第２言語、第３言語による専門用語に関する会話内容の音声データ、又は第２会話者（Ｂ）、第３会話者（Ｃ）が方言により発する第２言語、第３言語の音声データを入力し、その音声データを前記翻訳管理サーバ（１１）に送信し、該翻訳管理サーバ（１１）で翻訳する言語（第２言語、第３言語）を分析して特定することで、それぞれの翻訳言語が設定され、その設定された言語（第２言語、第３言語）と第１言語の双方向に音声翻訳内容を該音声翻訳端末器（１）へ送信し、音声を発するように構成された、ことを特徴とする。

本発明の自動音声翻訳方法は、第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声を双方向に翻訳する、音声入力で翻訳言語を設定する自動音声翻訳方法であって、
入力部（２）の操作により制御される制御部（３）を有する音声翻訳端末器（１）に、第２会話者（Ｂ）が発する第２言語の音声データが入力され、
この第２言語の音声データが、翻訳管理サーバ（１１）に送信され、
前記翻訳管理サーバ（１１）に格納された多言語情報データベース（１８ａ）と専門用語・方言情報データベース（１８ｂ）に基づいて、送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語による専門用語に関する会話内容の音声データ、又は第２会話者（Ｂ）が方言により発する第２言語の音声について、その第２言語の種類が設定され、
その後、前記音声翻訳端末器（１）に第２会話者（Ｂ）が発する第２言語の音声データが入力されると、第１言語に前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力され、
設定された第２言語と第１言語の双方向に前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力される、ことを特徴とする。

また、本発明の自動音声翻訳方法は、第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声と、更に第１言語、第２言語と異なる第３会話者（Ｃ）が発する第３言語の音声をそれぞれに翻訳する、音声入力で翻訳言語を設定する自動音声翻訳方法であって、
入力部（２）の操作により制御される制御部（３）を有する音声翻訳端末器（１）に、第２会話者（Ｂ）が発する第２言語の音声データ、第３会話者（Ｃ）が発する第３言語の音声データが入力され、
この第２言語、第３言語の音声データが、翻訳管理サーバ（１１）に送信され、
前記翻訳管理サーバ（１１）に格納された多言語情報データベース（１８ａ）と専門用語・方言情報データベース（１８ｂ）に基づいて、送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語、第３会話者（Ｃ）が発する第３言語による専門用語に関する会話内容音声データ、又は第２会話者（Ｂ）、第３会話者（Ｃ）が方言により発する第２言語、第３言語の音声について、その第２言語、第３言語の種類が設定され、
その後、前記音声翻訳端末器（１）に第２会話者（Ｂ）が発する第２言語、第３会話者（Ｃ）が発する第３言語の音声データが入力されると、第１言語に前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力され、
設定された第２言語、第３言語と第１言語それぞれに前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力される、ことを特徴とする。

本発明の自動音声翻訳のプログラムは、第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声を双方向に翻訳する、音声入力で翻訳言語を設定する自動音声翻訳方法を実行するプログラムであって、
第１会話者（Ａ）が使用する音声翻訳端末器（１）に、第２会話者（Ｂ）が発した第２言語の音声データを、翻訳管理サーバ（１１）が受信する、受信ステップと、
前記翻訳管理サーバ（１１）に格納された多言語情報データベース（１８ａ）と専門用語・方言情報データベース（１８ｂ）に基づいて、送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語による専門用語に関する会話内容の音声、又は第２会話者（Ｂ）が方言により発する第２言語の音声から、その第２言語の種類を特定して翻訳言語を設定する、翻訳言語設定ステップと、
前記音声翻訳端末器（１）に第１会話者（Ａ）が発する第１言語の音声データが入力されると第２言語に、及び第２会話者（Ｂ）が発する第２言語の音声データが入力されると第１言語に双方向に前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力する音声翻訳ステップと、から成る翻訳管理サーバ（１１）が自動音声翻訳方法を実行する、ことを特徴とする。

また、本発明の自動音声翻訳のプログラムは、第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声と、更に第１言語、第２言語と異なる第３会話者（Ｃ）が発する第３言語の音声をそれぞれに翻訳する、音声入力で翻訳言語を設定する自動音声翻訳方法を実行するプログラムであって、
第１会話者（Ａ）が使用する音声翻訳端末器（１）に、第２会話者（Ｂ）が発した第２言語の音声データと、第３会話者（Ｃ）が発した第３言語の音声データを、翻訳管理サーバ（１１）が受信する、受信ステップと、
前記翻訳管理サーバ（１１）に格納された多言語情報データベース（１８ａ）と専門用語・方言情報データベース（１８ｂ）に基づいて、送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語、第３会話者（Ｃ）が発する第３言語による専門用語に関する会話内容音声、又は第２会話者（Ｂ）、第３会話者（Ｃ）が方言により発する第２言語、第３言語の音声から、その第２言語、第３言語の種類を特定して翻訳言語を設定する、翻訳言語設定ステップと、
前記音声翻訳端末器（１）に第１会話者（Ａ）が発する第１言語の音声データが入力されると第２言語、第３言語に、及び第２会話者（Ｂ）が発する第２言語の音声データ、第３会話者（Ｃ）が発する第３言語の音声が入力されると第１言語それぞれに前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力する音声翻訳ステップと、から成る翻訳管理サーバ（１１）が自動音声翻訳方法を実行する、ことを特徴とする。

上記構成の音声入力で翻訳言語を設定する自動音声翻訳システム、自動音声翻訳方法及びそのプログラムでは、会話相手（第２会話者（Ｂ）、第３会話者（Ｃ））の発する言語（第２言語、第３言語）が不明な場合であっても、その会話相手が発する一言、例えば挨拶などの簡易な言葉（音声）を音声翻訳端末器（１）に話しかけるだけで、容易にその不明な言語の国名（種類）を判別し、双方の翻訳する言語の種類を容易に設定することができる。会話が必要な場面で迅速に双方向の自動音声翻訳を簡易な操作で実現することができる。

また、第２会話者（Ｂ）、第３会話者（Ｃ）の発する言語（第２言語、第３言語）が主要国の言語であってもいわゆる方言がある音声の場合においても容易に言語を判別できる。日本人が海外旅行において、又は外国人が日本に滞在しているときに、病気、けがをしたときに、病院や周囲の人に、病気、けがの状況を正確に伝達できる。日本人が海外旅行において、又は外国人が日本に滞在しているときに、犯罪や事件に巻き込まれたときに、警察や事件現場においてその状況について正確に伝達できる。
音声翻訳端末器（１）に、不明な言語を特定した際にその言語の種類をデータベース化した翻訳設定蓄積部（９）を備えているので、同様な不明な言語について、翻訳管理サーバ（１１）からの分析を経ることなく言語の種類を迅速に特定できる。

本発明の実施例１の音声入力で翻訳言語を設定する自動音声翻訳システムを説明する概略説明図であり、（ａ）は翻訳言語を設定する段階、（ｂ）は双方向の音声翻訳の段階である。 本発明の実施例１の音声入力で翻訳言語を設定する自動音声翻訳システムの構成を示すブロック図である。 第１言語の翻訳言語を設定する、言語分析１の作業フロー図である。 第２言語の翻訳言語を設定する、言語分析２の作業フロー図である。 第１言語と第２言語の翻訳言語を共に設定する、言語分析１、２の作業フロー図である。 本発明の実施例１の音声入力で翻訳言語を設定する自動音声翻訳システムの変形例１を説明する概略説明図であり、（ａ）は翻訳言語を設定する段階、（ｂ）は第２会話者との音声翻訳の段階である。 本発明の実施例１の音声入力で翻訳言語を設定する自動音声翻訳システムの変形例１を説明する概略説明図であり、（ｃ）は第３会話者Ｃとの音声翻訳の段階である。 方言を有する第２言語の翻訳言語を設定する設定方法の変形例１の言語分析の作業フロー図である。 専門用語を有する第２言語の翻訳言語を設定する設定方法の変形例２の言語分析の作業フロー図である。 本発明の自動音声翻訳方法を説明する概略説明図であり、（ａ）は第１言語と第２言語共に音声による翻訳言語を設定する状態、（ｂ）は第２言語のみ音声による翻訳言語を設定する状態である。 本発明の実施例３の音声入力で翻訳言語を設定する自動音声翻訳装置の構成を示すブロック図である。 従来の自動音声翻訳システムの構成を示す概略構成図である。

本発明の音声入力で翻訳言語を設定する自動音声翻訳システムは、日本国内において、例えば外国人がその母国語で表現した会話の内容を、その母国語と異なる日本人の日本語の音声に双方向に翻訳する際に、この相手の言語を音声で判別し、設定するシステムである。

以下、本発明の好ましい実施の形態を図面を参照して説明する。
＜自動音声翻訳システムの構成＞
図１は本発明の実施例１の音声入力で翻訳言語を設定する自動音声翻訳システムを説明する概略説明図であり、（ａ）は翻訳言語を設定する段階、（ｂ）は双方向の音声翻訳の段階である。図２は本発明の実施例１の音声入力で翻訳言語を設定する自動音声翻訳システムの構成を示すブロック図である。
実施例１の本発明の音声入力で翻訳言語を設定する自動音声翻訳システムは、音声翻訳を欲する会話者（第１会話者Ａ）が使用する音声翻訳端末器１と、無線ＬＡＮでデータが送受信される、翻訳に関する情報を管理する翻訳管理サーバ１１とから構成されるシステムである。第１会話者Ａの第１言語で表現された会話の内容を、第１言語と異なる第２会話者Ｂの第２言語の音声に双方向に翻訳する際に、この第２会話者Ｂの第２言語の相手の言語を音声で判別し、翻訳言語を設定するシステムである。

ここで第１会話者Ａ、第１言語、第２会話者Ｂ、第２言語と表現しているが、これらは順番、等級とは関係なく、便宜的に表現したものである。例えば、第１会話者Ａは日本人で、第１言語は日本語を意味する。第２会話者Ｂは外国人で、第２言語は日本語以外の母国語を意味する。即ち、本発明の自動音声翻訳システムを利用する人が、第１会話者Ａとなる。例えば音声翻訳端末器１を持っている人がスペイン人のときは、第１会話者Ａとなり、第１言語がスペイン語となる。その会話の相手がフランス人のときは、第２会話者Ｂとなり、第２言語が例えばフランス語となる。これらに例示した言語に限定されないことは勿論である。

＜音声翻訳端末器の構成＞
第１会話者Ａが使用する音声翻訳端末器１は、図２に示すように、ＯＮ／ＯＦＦの電源スイッチの入力部２と、この入力部（操作ボタン）２の操作により制御されるＣＰＵなどの制御部３を有する。この音声翻訳端末器１は、音声入力部４と音声出力部５を有する。音声入力部４は、第１言語を使用している第１会話者Ａが発する会話の音声データと、第２言語を使用している第２会話者Ｂが発する会話の音声データを入力するマイクなどである。音声出力部５は、後述する翻訳管理サーバ１１で音声翻訳された第２言語の音声データと、同じく音声翻訳された第１言語の音声データを出力するスピーカなどである。なお、図示例では、２個の音声翻訳端末器１しか表示されていないが、これが多数あることは勿論である。

音声翻訳端末器１は、その送信部・受信部６が音声入力部４で入力した第１言語と第２言語の音声データを翻訳管理サーバ１１の送信部・受信部１３に送信すると共に、この翻訳管理サーバ１１から出力した第２言語と第１言語の音声データを受信する。この音声翻訳端末器１はインターネット２１に接続して、翻訳管理サーバ１１の送信部・受信部１３に送信・受信する。

この音声翻訳端末器１には、翻訳管理サーバ１１により音声翻訳すべき言語が判別されたきに、それぞれの言語を設定する翻訳設定部７を有する。この翻訳設定部７は、例えば第２会話者Ｂの第２言語が「英語」と判別され、第１会話者Ａの第１言語の「日本語」との間で双方向に音声翻訳することを設定する。

この音声翻訳端末器１には、表示部８と翻訳設定蓄積部９を有する。表示部８はスイッチのＯＮ／ＯＦＦ、現在の言語の種類、無線ＬＡＮの受信状況、バッテリー残量などの情報を表示する。音声翻訳端末器１のモニター画面（表示部８）がタッチパネルのときは、そのまま第１言語、第２言語、専門用語等を入力する入力部２として機能する。キーボード、操作ボタンがあるときはこれが入力部２となる。

翻訳設定蓄積部９は、後述する不明な言語を特定した際にその言語の種類をデータベース化したものである。同様な不明な言語について、翻訳管理サーバ１１からの分析を経ることなく言語の種類を迅速に特定できるようになっている。

＜翻訳管理サーバの構成＞
翻訳管理サーバ１１は、図２に示すように、例えばＣＰＵなどの制御部１２によって構成され、送信部・受信部１３、入力部１４、翻訳部１５、言語分析部１６、表示部１７とから成る。更に、各国の言語に関するデータを格納する多言語情報データベース１８ａと、専門用語、方言に関する情報を格納する専門用語・方言情報データベース１８ｂとを有する。

多言語情報データベース１８ａは、例えば日本語に相当する意味合いを有する外国語の表現に関する情報データを蓄積したデータベースである。更に英語とスペイン語の双方向の音声翻訳、ドイツ語と中国語の双方向の音声翻訳にも対応できるようになっている。その他種々の音声翻訳に対応するようになっている。
専門用語・方言情報データベース１８ｂは、専門用語、方言に関する情報データを蓄積したデータベースである。これは例えば英語であれば、アメリカ英語、イギリス英語、オーストラリア英語、カナダ英語の微妙な相違に関する情報データを蓄積したデータベースがある。病気・ケガについて各言語の表現に関する情報データを蓄積したデータベースがある。更に、犯罪・事件について各言語の表現に関する情報データを蓄積したデータベースがある。これらの専門用語・方言情報データベースは一例であって、その他の種々の言語に関する情報データが該当する。

翻訳管理サーバ１１は、音声翻訳端末器１から送信された音声データについて翻訳部１５が所定の言語に音声翻訳する。英語を日本語に音声翻訳し、第１会話者Ａの第１言語（英語）の会話内容を理解する。次に第２会話者Ｂの第２言語（日本語）を英語に音声翻訳し、会話相手（第１会話者Ａ）に会話内容を理解してもらうようになっている。

翻訳管理サーバ１１は、言語一時蓄積部（メモリ）１９を有し、ここには翻訳部１５が過去に翻訳した双方向の翻訳内容を一時的に蓄積する。

＜翻訳言語の設定方法＞
翻訳言語を設定する際は２種類の方法がある。第１の設定方法は、上述したような第２言語の判別し、翻訳言語の設定と同様な手順で、第１言語の翻訳言語についても設定することができる。例えば、日本語を第１言語にしたいときは、音声翻訳端末器１の音声入力部４に「おはよう」と発して、翻訳管理サーバ１１において第１言語が「日本語」であることを特定し、翻訳言語とする設定方法である。
第２の設定方法は、本発明の音声翻訳端末器１を操作する第１会話者Ａは、第１言語は予め自ら選択できるので、音声翻訳端末器１に第１言語の種類を入力部２で特定する設定方法である。

図３は第１言語の翻訳言語を設定する、言語分析１の作業フロー図である。図４は第２言語の翻訳言語を設定する、言語分析２の作業フロー図である。図５は第１言語と第２言語の翻訳言語を共に設定する、言語分析１、２の作業フロー図である。
音声翻訳端末器１を有する第１会話者Ａは、図３と図５に示すように、「おはよう」とスピーカなどの音声入力部４に発する。この音声翻訳端末器１に入力された音声データは、送信部・受信部６，１３とインターネット２１を介して、翻訳管理サーバ１１に送信される。

翻訳管理サーバ１１では、受信した音声データについて、言語情報データベース１８ａに格納されたデータと比較し、音声データの言語について判定、推測する。例えば、第１言語の音声について、その第１言語の種類が「日本語」と判別される。その翻訳言語の設定情報が、送信部・受信部６，１３とインターネット２１を介して、音声翻訳端末器１に送信され、音声翻訳端末器１の翻訳設定部７に判断された翻訳言語（日本語）が設定される。翻訳機能の起動中は、第１言語は日本語で出力する。

次に、言語が不明な第２会話者Ｂは、図４と図５に示すように、音声入力部４に「Ｂｕｅｎｏｓ ｄｉａｓ．」と発する。この音声翻訳端末器１に入力された音声データが、送信部・受信部６，１３とインターネット２１を介して、翻訳管理サーバ１１に送信される。受信した音声データは、翻訳管理サーバ１１に格納された言語情報データベース１８ａに基づいて、第２言語の音声について、その第２言語の種類が「スペイン語」と判別される。その翻訳言語の設定情報が、送信部・受信部６，１３とインターネット２１を介して、音声翻訳端末器１に送信され、音声翻訳端末器１の翻訳設定部７に判断された翻訳言語（英語）が設定される。翻訳機能の起動中は、第２言語はスペイン語で出力する。

その後、図５に示すように、特定された第１言語と第２言語の双方向に翻訳された音声が音声翻訳端末器１に出力される。この翻訳設定部７に基づき、「スペイン語」の会話音声が音声翻訳端末器１に取り込まれると、その会話内容が翻訳管理サーバ１１で「日本語」に音声翻訳される。「日本語」の会話音声が音声翻訳端末器１に取り込まれると、その会話内容が翻訳管理サーバ１１で「スペイン語」に音声翻訳される。これにより音声翻訳が双方向になされ、第１会話者Ａと第２会話者Ｂの間で会話の意思の疎通が図れる。

本発明の音声入力で翻訳言語を設定する自動音声翻訳システムは、これを使用中に、緊急放送が入った場合に、その言語をセットして優先的に翻訳する機能を含めることが可能である。

＜翻訳言語の設定方法の変形例１＞
図６は本発明の実施例１の音声入力で翻訳言語を設定する自動音声翻訳システムの変形例１を説明する概略説明図であり、（ａ）は翻訳言語を設定する段階、（ｂ）は第２会話者との音声翻訳の段階である。図７は本発明の実施例１の音声入力で翻訳言語を設定する自動音声翻訳システムの変形例１を説明する概略説明図であり、（ｃ）は第３会話者Ｃとの音声翻訳の段階である。
変形例１の自動音声翻訳システムは、会話者が３名の場合にも使用できる。変形例１の自動音声翻訳システムは、第１会話者Ａが発する第１言語の音声と、この第１言語と異なる第２会話者Ｂが発する第２言語の音声と、更に第１言語、第２言語と異なる第３会話者Ｃが発する第３言語の音声とをそれぞれに翻訳するシステムである。

変形例１の音声翻訳端末器１は、入力部２の操作により制御される制御部３と、第１言語を使用している第１会話者Ａが発する会話の音声データ、第２言語を使用している第２会話者Ｂが発する会話の音声データ及び第３言語を使用している第３会話者Ｃが発する会話の音声データを入力する音声入力部４と、翻訳管理サーバ１１で音声翻訳された第２言語、第３言語の音声データ及び、同じく音声翻訳された第１言語の音声データを出力する音声出力部５と、音声入力部４で入力した第１言語、第２言語と第３言語の音声データを翻訳管理サーバ１１に送信すると共に、翻訳管理サーバ１１から出力した第２言語、第３言語と第１言語の音声データを受信する送信部・受信部６と、を有する。

変形例１の翻訳管理サーバ１１は、入力部１４の操作により制御される制御部１２と、音声翻訳端末器１の音声入力部４から入力した第１言語、第２言語及び第３言語の音声データを受信し、翻訳管理サーバ１１から出力した第２言語、第３言語及び第１言語の音声データを送信する送信部・受信部１３と、言語の種類特定に関する情報データを蓄積した言語情報データベース１８ａと、送信部・受信部１３で入力した第２言語、第３言語の音声データから、該言語情報データベース１８ａを用いてその第２言語、第３言語の種類を特定する言語分析部１６と、言語分析部１６で設定された第２言語、第３言語を第１言語に音声翻訳し、第２言語、第３言語を第１言語に音声翻訳する翻訳部１５と、を有する。

変形例１の自動音声翻訳システムは、音声翻訳端末器１に、第２会話者Ｂが発する第２言語の音声データを入力し、その音声データを翻訳管理サーバ１１に送信し、翻訳管理サーバ１１で翻訳する言語（第２言語、第３言語）を分析して特定することで、それぞれの翻訳言語が設定され、その設定された言語（第２言語、第３言語）と第１言語の双方向に音声翻訳内容を該音声翻訳端末器１へ送信し、音声を発するようになっている。

図示例では、不明な第２会話者Ｂの第２言語を「スペイン語」と設定した後に、更に不明な第３会話者Ｃの第３言語を「イタリア語」と設定した状態を示す。言語が不明な第３会話者Ｃは、図６（ａ）に示すように、音声入力部４に「Ｂｕｏｎｇｉｏｒｎｏ．」と発する。この音声翻訳端末器１に入力された音声データが、送信部・受信部６，１３とインターネット２１を介して、翻訳管理サーバ１１に送信される。受信した音声データは、翻訳管理サーバ１１に格納された多言語情報データベース１８ａに基づいて、第３言語の音声について、その第３言語の種類が「イタリア語」と判別される。その翻訳言語の設定情報が、送信部・受信部６，１３とインターネット２１を介して、音声翻訳端末器１に送信され、音声翻訳端末器１の翻訳設定部７に判断された翻訳言語（英語）が設定される。翻訳機能の起動中は、第３言語はイタリア語で出力する。

＜翻訳言語の設定方法の変形例２＞
図８は方言を有する第２言語の翻訳言語を設定する設定方法の変形例２の言語分析の作業フロー図である。
言語が不明な第２会話者Ｂが方言を有する場合は、図８に示すように、「Ｇｏｏｄ ｄａｙ」と音声入力部４に発する。この音声翻訳端末器１に入力された音声データが、翻訳管理サーバ１１に送信される。受信した音声データは、翻訳管理サーバ１１に格納された言語情報データベース１８ａに基づいて、第２言語の音声について、種々ある英語のいずれかであると判定される。その判断基準は、方言、イントネーション、語尾、語頭、特徴的発音（巻き舌、濃音など）から判断される。アメリカ英語、イギリス英語、オーストラリア英語、カナダ英語などの中から、あいさつが「Ｇｏｏｄ ｄａｙ」となるため、オーストラリア英語と判断される。
専門用語・方言情報データベース１８ｂには、英語に限らず、例えば、フランス語についてフランス国のほかにカナダ仏語、アフリカの仏語などが含まれる。また、ドイツ語もヨーロッパのドイツ国のほかにスイス独語などが含まれる。

＜翻訳言語の設定方法の変形例３＞
図９は専門用語を有する第２言語の翻訳言語を設定する設定方法の変形例３の言語分析の作業フロー図である。
日本人である第１会話者Ａは第１言語を日本語に設定する。
第２会話者Ｂは第２言語を判別してもらうために、図９に示すように、「Ｇｕｎａｙｄｉｎ」と音声入力部４に発する。この音声翻訳端末器１に入力された音声データが、翻訳管理サーバ１１に送信される。受信した音声データは、翻訳管理サーバ１１に格納された言語情報データベース１８ａに基づいて、第２言語の音声について、「トルコ語」と判別し、翻訳言語は「トルコ語」と設定する。

次に、第２会話者Ｂは「Ｃｕｚｄｎｉｍ Ｃａｌｉｎｄｉ」と音声入力部４に発する。これは「財布を盗まれた」の意味を有するので、受信した音声データは、翻訳管理サーバ１１に格納された専門用語・方言情報データベース１８ｂに基づいて、第２言語の音声について、翻訳言語は「トルコ語」であり、犯罪に関する専門用語が必要であると設定する。
その第１言語が日本語と共に、第２言語はトルコ語となり、犯罪用語が主な内容になるとも判断される。その設定情報が音声翻訳端末器１に送信され、音声翻訳端末器１の翻訳設定部７に判断された翻訳言語（日本語、犯罪用語）が設定される。翻訳機能の起動中は、第１言語は「日本語」で、第２言語は「トルコ語」で出力する。
専門用語・方言情報データベース１８ｂには、犯罪用語に限定されず、科学用語、法律用語などの種々の専門用語を含む。

＜自動音声翻訳方法の構成＞
図１０は本発明の自動音声翻訳方法を説明する概略説明図であり、（ａ）は第１言語と第２言語共に音声による翻訳言語を設定する状態、（ｂ）は第２言語のみ音声による翻訳言語を設定する状態である。
本発明の音声入力で翻訳言語を設定する自動音声翻訳方法には、図１０（ａ）に示すように、第１言語と第２言語共に音声による翻訳言語を設定する方法がある。この自動音声翻訳方法は、入力部２の操作により制御される制御部３を有する音声翻訳端末器１に、第１会話者Ａが発する第１言語の音声データが入力され、この第１言語の音声データが、翻訳管理サーバ１１に送信され、この翻訳管理サーバ１１に格納された言語情報データベース１８ａに基づいて、この送信部・受信部１３で入力した第１言語の音声について、その第１言語の種類が判別される。

次に、同じく音声翻訳端末器１に、第２会話者Ｂが発する第２言語の音声データが入力され、この第２言語の音声データが、翻訳管理サーバ１１に送信され、この翻訳管理サーバ１１に格納された言語情報データベース１８ａに基づいて、送信部・受信部１３で入力した第２言語の音声について、その第２言語の種類が判別される。

音声翻訳端末器１に第２会話者Ｂが発する第２言語の音声データが入力されると、第２言語に翻訳された音声が音声翻訳端末器１に出力され、この音声翻訳端末器１に第１言語の音声データが入力されて双方の言語が設定される。その後、設定された第２言語と第１言語の双方向に翻訳された音声が音声翻訳端末器１に出力される。

図１０（ｂ）に示すように、第２言語のみ音声による翻訳言語を設定する方法がある。この自動音声翻訳方法は、第１会話者Ａは、現在自己が使用している言語であるため、予め第１言語を設定することができる。第２言語の設定は、上述した方法で設定する。
その後は、本発明の音声入力で自動音声翻訳方法は、設定された第１言語と第２言語について、第１会話者Ａが発する第１言語の音声と、この第１言語と異なる第２会話者Ｂが発する第２言語の音声を双方向に音声翻訳する。
この自動音声翻訳方法の場合にも、第１言語、第２言語と異なる第３会話者Ｃが発する第３言語の音声についても、その翻訳言語を設定する共に、第１言語に翻訳する機能を持たせることも可能である。

＜自動音声翻訳方法を実行するプログラムの構成＞
実施例２は音声入力で翻訳言語を設定する自動音声翻訳方法を実行させるプログラムである。実施例２のプログラムは、第１会話者Ａが使用する音声翻訳端末器１に、第２会話者Ｂが発する第２言語の音声データを入力する、入力ステップと、この第２言語の音声データを、翻訳管理サーバ１１に送信する、送信ステップと、この翻訳管理サーバ１１に格納された言語情報データベース１８ａに基づいて、送信部・受信部１３で入力した第２言語の音声から、その第２言語の種類を特定して設定する、言語設定ステップと、音声翻訳端末器１に第１会話者Ａが発する第１言語の音声データが入力されると第２言語に、及び第２会話者Ｂが発する第２言語の音声データが入力されると第１言語に双方向に翻訳された音声が音声翻訳端末器１に出力する音声翻訳ステップと、とをコンピュータに実行させるプログラムである。

実施例２のプログラムは、第１会話者Ａが発する第１言語の音声と、この第１言語と異なる第２会話者Ｂが発する第２言語の音声を双方向に翻訳する、音声入力で翻訳言語を設定する自動音声翻訳方法を実行させるプログラムである。これにより、挨拶などの簡易な言葉（音声）を発するだけで、言語の種類を判別し、翻訳する言語を容易に設定することができ、双方向の自動音声翻訳を簡易な操作で実現することができる。

なお、これらのうちの一部の具体的な態様は、音声翻訳システム、音声翻訳方法、音声翻訳コンピュータプログラムまたはコンピュータで読み取り可能なＣＤ−ＲＯＭなどの記録媒体を用いて実現される。また、音声翻訳システム、音声翻訳方法、音声翻訳コンピュータプログラムまたは記録媒体の任意な組み合わせを用いて実現される。
このプログラムの場合にも、第１言語、第２言語と異なる第３会話者Ｃが発する第３言語の音声についても、その翻訳言語を設定する共に、第１言語に翻訳する機能を持たせることも可能である。

＜自動音声翻訳装置の構成＞
図１１は本発明の実施例３の音声入力で翻訳言語を設定する自動音声翻訳装置の構成を示すブロック図である。
実施例３の音声入力で翻訳言語を設定する自動音声翻訳装置３１は、第１会話者Ａが発する第１言語の音声と、この第１言語と異なる第２会話者Ｂが発する第２言語の音声を双方向に翻訳する、音声入力で翻訳言語を設定する自動音声翻訳装置である。実施例３の自動音声翻訳装置３１は、入力部３２の操作により制御される制御部３３と、第１言語を使用している第１会話者Ａが発する会話の音声データ及び第２言語を使用している第２会話者Ｂが発する会話の音声データを入力する音声入力部３４と、言語の種類特定に関する情報データを蓄積した言語情報データベース３５と、この音声入力部３４で入力した第２言語の音声データから、この言語情報データベース３５を用いてその第２言語の種類を特定する言語分析部３６と、この言語分析部３６で特定された第２言語を第１言語に音声翻訳し、第２言語が発する会話の音声を第１言語に音声翻訳する翻訳部３７と、この翻訳部３７で音声翻訳された第２言語の音声データ及び、同じく音声翻訳された第１言語の音声データを出力する音声出力部３８と、音声翻訳すべき言語が判別されたきに、それぞれの言語を設定する翻訳設定部３９と、翻訳部３７が過去に翻訳した双方向の翻訳内容を一時的に蓄積する言語一時蓄積部（メモリ）４０と、を備えたものである。

実施例３の自動音声翻訳装置３１は、音声入力部３４に、第２会話者Ｂが発する第２言語の音声データを入力し、言語分析部３６が翻訳する言語（第２言語）を分析して特定することで、双方の翻訳言語が設定され、その設定された言語（第２言語）と第１言語の双方向に音声翻訳内容の音声を発するように構成されたものである。

更に、実施例３の自動音声翻訳装置３１は、音声翻訳すべき言語が判別されたときに、それぞれの言語を設定する翻訳設定部３９と、翻訳部３７が過去に翻訳した双方向の翻訳内容を一時的に蓄積する。スイッチのＯＮ／ＯＦＦ、現在の言語の種類、バッテリー残量などの情報は表示部４１に表示される。
この自動音声翻訳装置３１の場合にも、第１言語、第２言語と異なる第３会話者Ｃが発する第３言語の音声についても、その翻訳言語を設定する共に、第１言語に翻訳する機能を持たせることも可能である。

なお、本発明は、挨拶などの簡易な言葉（音声）を発するだけで、言語の種類を判別し、翻訳する言語を容易に設定することができ、双方向の自動音声翻訳を簡易な操作で実現することができる構成であれば、上述した発明の実施の形態に限定されず、本発明の要旨を逸脱しない範囲で種々変更できることは勿論である。

本発明の音声入力で翻訳言語を設定する自動音声翻訳システム、自動音声翻訳方法及びそのプログラムは、次のような場面に利用することができる。
（ａ）コンビニ、スーパー、ドラックストア等で外国人のお客様と接客する際
（ｂ）外国人店員向けの接客アシストする場面
（ｃ）日本語の方言に対応することで、地方の店舗などでも対応可能（例 英語→関西弁）（ｄ）スマートスピーカーの対応言語を切り替える際
（ｅ）スマートホンアプリなどで自国語設定したスマートホン等を持っていれば、公共の音声案内が、あらかじめスマートホン等に設定された自国語で公共の音声案内が再生する際

１ 音声翻訳端末器
２ 入力部
３ 制御部
４ 音声入力部
５ 音声出力部
６ 送信部・受信部
１１ 翻訳管理サーバ
１２ 制御部
１３ 送信部・受信部
１４ 入力部
１５ 翻訳部
１６ 言語分析部
１８ａ 多言語情報データベース
１８ｂ 専門用語・方言情報データベース
３１ 自動音声翻訳装置
３２ 入力部
３３ 制御部
３４ 音声入力部
３５ 言語情報データベース
３６ 言語分析部
３７ 翻訳部
３８ 音声出力部
Ａ 第１会話者
Ｂ 第２会話者
Ｃ 第３会話者

Claims (6)

1. 第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声を双方向に翻訳する、音声入力で翻訳言語を設定する自動音声翻訳システムであって、
   入力部（２）の操作により制御される制御部（３）と、第１言語を使用している第１会話者（Ａ）が発する会話の音声データ及び第２言語を使用している第２会話者（Ｂ）が発する会話の音声データを入力する音声入力部（４）と、翻訳管理サーバ（１１）で音声翻訳された第２言語の音声データ及び、同じく音声翻訳された第１言語の音声データを出力する音声出力部（５）と、該音声入力部（４）で入力した第１言語と第２言語の音声データを前記翻訳管理サーバ（１１）に送信すると共に、該翻訳管理サーバ（１１）から出力した第２言語と第１言語の音声データを受信する送信部・受信部（６）と、を有する音声翻訳端末器（１）と、
   入力部（１４）の操作により制御される制御部（１２）と、前記音声翻訳端末器（１）の音声入力部（４）から入力した第１言語及び第２言語の音声データを受信し、翻訳管理サーバ（１１）から出力した第２言語及び第１言語の音声データを送信する送信部・受信部（１３）と、言語の種類特定に関する情報データを蓄積した多言語情報データベース（１８ａ）と、「方言」と医療関係用語、刑事事件関係用語のような「専門用語」を蓄積した専門用語・方言情報データベース（１８ｂ）と、該送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語による専門用語に関する会話内容の音声データ、又は第２会話者（Ｂ）が方言により発する第２言語の音声データから、該多言語情報データベース（１８ａ）と該専門用語・方言情報データベース（１８ｂ）を用いてその第２言語の種類を特定する言語分析部（１６）と、該言語分析部（１６）で設定された第２言語を第１言語に音声翻訳し、第１言語を第２言語に音声翻訳する翻訳部（１５）と、を有する翻訳管理サーバ（１１）と、を備え、
   前記音声翻訳端末器（１）に、第２会話者（Ｂ）が発する第２言語による専門用語に関する会話内容の音声データ、又は第２会話者（Ｂ）が方言により発する第２言語の音声データを入力し、
   その音声データを前記翻訳管理サーバ（１１）に送信し、該翻訳管理サーバ（１１）で翻訳する言語（第２言語）を分析して特定することで、その翻訳言語が設定され、
   その設定された言語（第２言語）と第１言語の双方向に音声翻訳内容を該音声翻訳端末器（１）へ送信し、音声を発するように構成された、ことを特徴とする音声入力で翻訳言語を設定する自動音声翻訳システム。
2. 第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声と、更に第１言語、第２言語と異なる第３会話者（Ｃ）が発する第３言語の音声をそれぞれに翻訳する、音声入力で翻訳言語を設定する自動音声翻訳システムであって、
   入力部（２）の操作により制御される制御部（３）と、第１言語を使用している第１会話者（Ａ）が発する会話の音声データ、第２言語を使用している第２会話者（Ｂ）が発する会話の音声データ及び第３言語を使用している第３会話者（Ｃ）が発する会話の音声データを入力する音声入力部（４）と、翻訳管理サーバ（１１）で音声翻訳された第２言語、第３言語の音声データ及び、同じく音声翻訳された第１言語の音声データを出力する音声出力部（５）と、該音声入力部（４）で入力した第１言語、第２言語及び第３言語の音声データを前記翻訳管理サーバ（１１）に送信すると共に、該翻訳管理サーバ（１１）から出力した第２言語、第３言語と第１言語の音声データを受信する送信部・受信部（６）と、を有する音声翻訳端末器（１）と、
   入力部（１４）の操作により制御される制御部（１２）と、前記音声翻訳端末器（１）の音声入力部（４）から入力した第１言語、第２言語及び第３言語の音声データを受信し、翻訳管理サーバ（１１）から出力した第２言語、第３言語及び第１言語の音声データを送信する送信部・受信部（１３）と、言語の種類特定に関する情報データを蓄積した多言語情報データベース（１８ａ）と、「方言」と医療関係用語、刑事事件関係用語のような「専門用語」を蓄積した専門用語・方言情報データベース（１８ｂ）と、該送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語、第３会話者（Ｃ）が発する第３言語による専門用語に関する会話内容音声データ、又は第２会話者（Ｂ）、第３会話者（Ｃ）が方言により発する第２言語、第３言語の音声データから、該多言語情報データベース（１８ａ）と該専門用語・方言情報データベース（１８ｂ）を用いてその第２言語、第３言語の種類を特定する言語分析部（１６）と、該言語分析部（１６）で設定された第２言語、第３言語が発する会話の音声を第１言語に音声翻訳し、第１言語を第２言語、第３言語に音声翻訳する翻訳部（１５）と、を有する翻訳管理サーバ（１１）と、を備え、
   前記音声翻訳端末器（１）に、第２会話者（Ｂ）、第３会話者（Ｃ）が発する第２言語、第３言語による専門用語に関する会話内容の音声データ、又は第２会話者（Ｂ）、第３会話者（Ｃ）が方言により発する第２言語、第３言語の音声データを入力し、その音声データを前記翻訳管理サーバ（１１）に送信し、該翻訳管理サーバ（１１）で翻訳する言語（第２言語、第３言語）を分析して特定することで、それぞれの翻訳言語が設定され、その設定された言語（第２言語、第３言語）と第１言語の双方向に音声翻訳内容を該音声翻訳端末器（１）へ送信し、音声を発するように構成された、ことを特徴とする音声入力で翻訳言語を設定する自動音声翻訳システム。
3. 第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声を双方向に翻訳する、音声入力で翻訳言語を設定する自動音声翻訳方法であって、
   入力部（２）の操作により制御される制御部（３）を有する音声翻訳端末器（１）に、第２会話者（Ｂ）が発する第２言語の音声データが入力され、
   この第２言語の音声データが、翻訳管理サーバ（１１）に送信され、
   前記翻訳管理サーバ（１１）に格納された多言語情報データベース（１８ａ）と専門用語・方言情報データベース（１８ｂ）に基づいて、送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語による専門用語に関する会話内容の音声データ、又は第２会話者（Ｂ）が方言により発する第２言語の音声について、その第２言語の種類が設定され、
   その後、前記音声翻訳端末器（１）に第２会話者（Ｂ）が発する第２言語の音声データが入力されると、第１言語に前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力され、
   設定された第２言語と第１言語の双方向に前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力される、ことを特徴とする音声入力で翻訳言語を設定する自動音声翻訳方法。
4. 第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声と、更に第１言語、第２言語と異なる第３会話者（Ｃ）が発する第３言語の音声をそれぞれに翻訳する、音声入力で翻訳言語を設定する自動音声翻訳方法であって、
   入力部（２）の操作により制御される制御部（３）を有する音声翻訳端末器（１）に、第２会話者（Ｂ）が発する第２言語の音声データ、第３会話者（Ｃ）が発する第３言語の音声データが入力され、
   この第２言語、第３言語の音声データが、翻訳管理サーバ（１１）に送信され、
   前記翻訳管理サーバ（１１）に格納された多言語情報データベース（１８ａ）と専門用語・方言情報データベース（１８ｂ）に基づいて、送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語、第３会話者（Ｃ）が発する第３言語による専門用語に関する会話内容音声データ、又は第２会話者（Ｂ）、第３会話者（Ｃ）が方言により発する第２言語、第３言語の音声について、その第２言語、第３言語の種類が設定され、
   その後、前記音声翻訳端末器（１）に第２会話者（Ｂ）が発する第２言語、第３会話者（Ｃ）が発する第３言語の音声データが入力されると、第１言語に前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力され、
   設定された第２言語、第３言語と第１言語それぞれに前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力される、ことを特徴とする音声入力で翻訳言語を設定する自動音声翻訳方法。
5. 第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声を双方向に翻訳する、音声入力で翻訳言語を設定する自動音声翻訳方法を実行するプログラムであって、
   第１会話者（Ａ）が使用する音声翻訳端末器（１）に、第２会話者（Ｂ）が発した第２言語の音声データを、翻訳管理サーバ（１１）が受信する、受信ステップと、
   前記翻訳管理サーバ（１１）に格納された多言語情報データベース（１８ａ）と専門用語・方言情報データベース（１８ｂ）に基づいて、送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語による専門用語に関する会話内容の音声、又は第２会話者（Ｂ）が方言により発する第２言語の音声から、その第２言語の種類を特定して翻訳言語を設定する、翻訳言語設定ステップと、
   前記音声翻訳端末器（１）に第１会話者（Ａ）が発する第１言語の音声データが入力されると第２言語に、及び第２会話者（Ｂ）が発する第２言語の音声データが入力されると第１言語に双方向に前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力する音声翻訳ステップと、から成る翻訳管理サーバ（１１）が自動音声翻訳方法を実行する、ことを特徴とする音声入力で翻訳言語を設定する自動音声翻訳方法を実行するプログラム。
6. 第１会話者（Ａ）が発する第１言語の音声と、この第１言語と異なる第２会話者（Ｂ）が発する第２言語の音声と、更に第１言語、第２言語と異なる第３会話者（Ｃ）が発する第３言語の音声をそれぞれに翻訳する、音声入力で翻訳言語を設定する自動音声翻訳方法を実行するプログラムであって、
   第１会話者（Ａ）が使用する音声翻訳端末器（１）に、第２会話者（Ｂ）が発した第２言語の音声データと、第３会話者（Ｃ）が発した第３言語の音声データを、翻訳管理サーバ（１１）が受信する、受信ステップと、
   前記翻訳管理サーバ（１１）に格納された多言語情報データベース（１８ａ）と専門用語・方言情報データベース（１８ｂ）に基づいて、送信部・受信部（１３）で入力した、第２会話者（Ｂ）が発する第２言語、第３会話者（Ｃ）が発する第３言語による専門用語に関する会話内容音声、又は第２会話者（Ｂ）、第３会話者（Ｃ）が方言により発する第２言語、第３言語の音声から、その第２言語、第３言語の種類を特定して翻訳言語を設定する、翻訳言語設定ステップと、
   前記音声翻訳端末器（１）に第１会話者（Ａ）が発する第１言語の音声データが入力されると第２言語、第３言語に、及び第２会話者（Ｂ）が発する第２言語の音声データ、第３会話者（Ｃ）が発する第３言語の音声が入力されると第１言語それぞれに前記翻訳管理サーバ（１１）によって翻訳された音声が該音声翻訳端末器（１）に出力する音声翻訳ステップと、から成る翻訳管理サーバ（１１）が自動音声翻訳方法を実行する、ことを特徴とする音声入力で翻訳言語を設定する自動音声翻訳方法を実行するプログラム。
   
   

Images