JP7098056B2 - 電気機器のためのポータブルの自然言語処理インターフェースをカスタマイズするためのシステム、及び方法 - Google Patents
電気機器のためのポータブルの自然言語処理インターフェースをカスタマイズするためのシステム、及び方法 Download PDFInfo
- Publication number
- JP7098056B2 JP7098056B2 JP2021520381A JP2021520381A JP7098056B2 JP 7098056 B2 JP7098056 B2 JP 7098056B2 JP 2021520381 A JP2021520381 A JP 2021520381A JP 2021520381 A JP2021520381 A JP 2021520381A JP 7098056 B2 JP7098056 B2 JP 7098056B2
- Authority
- JP
- Japan
- Prior art keywords
- electrical equipment
- control device
- voice
- voice control
- nlp
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003058 natural language processing Methods 0.000 title claims description 407
- 238000000034 method Methods 0.000 title claims description 114
- 238000004891 communication Methods 0.000 claims description 223
- 230000006870 function Effects 0.000 claims description 64
- 230000015654 memory Effects 0.000 claims description 43
- 230000004044 response Effects 0.000 claims description 29
- 238000001514 detection method Methods 0.000 claims description 4
- 230000008569 process Effects 0.000 description 28
- 238000010586 diagram Methods 0.000 description 22
- 238000012549 training Methods 0.000 description 20
- 238000012545 processing Methods 0.000 description 18
- 230000003213 activating effect Effects 0.000 description 15
- 238000007726 management method Methods 0.000 description 7
- 238000003825 pressing Methods 0.000 description 7
- 230000004913 activation Effects 0.000 description 5
- 238000010411 cooking Methods 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000003993 interaction Effects 0.000 description 4
- 239000000047 product Substances 0.000 description 4
- 239000007787 solid Substances 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000005265 energy consumption Methods 0.000 description 3
- 235000015927 pasta Nutrition 0.000 description 3
- 230000001960 triggered effect Effects 0.000 description 3
- 238000005406 washing Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000012790 confirmation Methods 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 241000238558 Eucarida Species 0.000 description 1
- 206010040880 Skin irritation Diseases 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000000994 depressogenic effect Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 235000013305 food Nutrition 0.000 description 1
- 208000013057 hereditary mucoepithelial dysplasia Diseases 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000000704 physical effect Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000036556 skin irritation Effects 0.000 description 1
- 231100000475 skin irritation Toxicity 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 235000019640 taste Nutrition 0.000 description 1
- 230000005612 types of electricity Effects 0.000 description 1
- 238000009423 ventilation Methods 0.000 description 1
- 230000005428 wave function Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
- G10L15/063—Training
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
- G10L15/1815—Semantic context, e.g. disambiguation of the recognition hypotheses based on word meaning
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L15/18—Speech classification or search using natural language modelling
- G10L15/183—Speech classification or search using natural language modelling using context dependencies, e.g. language models
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/06—Creation of reference templates; Training of speech recognition systems, e.g. adaptation to the characteristics of the speaker's voice
- G10L15/063—Training
- G10L2015/0635—Training updating or merging of old and new templates; Mean values; Weighting
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Artificial Intelligence (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Telephonic Communication Services (AREA)
- Telephone Function (AREA)
- Selective Calling Equipment (AREA)
Description
本願は、2018年10月15日に提出された米国特許出願第16/160,934号に対する優先権を主張し、その全ての内容が引用により本明細書に組み込まれる。
この開示される技術の実施例又は従来技術における技術案をより明確に説明するために、以下では、実施例又は従来技術を説明するための添付の図面を簡単に紹介する。明らかに、以下の説明する図面は、この開示された技術の一部の実施例を示すだけであるが、当業者は、創造的な努力なしに、これらの図面から他の図面を依然として導き出すことができる。
―オペレーティングシステム918は、様々な基本システムサービスを処理し、ハードウェアに関連するタスクを実行するためのプロセスを含む。
―ネットワーク通信モジュール920は、1つ又は複数のネットワークインターフェース904(有線又は無線)を介して音声制御機器102を、1つ又は複数のネットワークに接続された他のコンピュータ装置(例えば、サーバーシステム220)又はユーザ装置202(例えば、スマートフォン又はタブレットコンピュータ)に接続するために使用される。
―音声通信モジュール922は、ユーザからの音声入力を受信するために使用される。
―データ通信モジュール924は、複数のタイプの電気機器とのデータ通信を確立するために使用され、当該複数のタイプの電気機器は、異なる機械コマンドセットに応答して、対応する機器操作を実行するように構成される。
―NLP処理モジュール926は、ユーザからの音声入力を処理して、機械コマンドを取得して対応する電気機器を制御するために使用され、NLP処理モジュール926は、
――ターゲット電気機器のためにNLPモデルを選択するためのNLPモデル選択モジュール928と、
――NLPモデルと対応する電気機器との間の関係を記録するためのNLPモデル登録モジュール930とを含む。
―通信インターフェース932は、音声制御機器102とユーザ装置202との間のデータ通信を確立するために使用され、
――サーバーシステム220からNLPモデルをダウンロードするためのNLPモデルダウンロードモジュール934と、
――音声制御機器で収集された音声コマンドデータをNLPモデルの更新のためにアップロードするための音声コマンドアップロードモジュール936とを含む。
―データベース940は、
――ユーザ制御電気機器から収集された音声コマンド942と、
――NLPモデル944(例えば、図1のNLPモデル132)、及び
――NLPモデルレジストリ946(例えば、図1のNLPモデルレジストリ136)を含む。
―オペレーティングシステム966は、様々な基本システムサービスを処理し、ハードウェアに関連するタスクを実行するためのプロセスを含む。
―通信モジュール968は、1つ又は複数のネットワークインタ―フェース954(有線又は無線)を介してユーザ装置202を、1つ又は複数のネットワーク240に接続された他のコンピュータ装置(例えば、サーバーシステム220)に接続するために使用される。
―ユーザ入力処理モジュール970は、1つ又は複数の入力装置964のうちの1つから1つ又は複数のユーザ入力又は対話を検出し、且つ検出された入力又は対話を解釈するために使用される。
―ユーザ装置202によって実行される1つ又は複数のアプリケーションプログラム972(例えば、支払いプラットフォーム、メディアプレーヤー及び/又は他のネットワークベース又は非ネットワークベースのアプリケーションプログラム)。
―クライアントモジュールは、音声コマンドデバイス管理モジュール974を含み、前記音声コマンドデバイス管理モジュール974は、
――音声制御機器102とのデータ接続を確立するためのデバイス接続モジュール976と、
――音声制御機器102に対して初期構成を行うためのデバイス構成モジュール978と、
――ユーザの選択に従って、サーバーシステム220から1つ又は複数のNLPモデルをダウンロードするためのNLPモデルダウンロードモジュール980と、
――ダウンロードされたNLPモデルを音声制御機器102のNLPモジュール130に追加するためのNLPモデル追加モジュール982と、
――音声制御機器102で収集されたユーザの音声コマンドに応じてNLPモデルを更新(例えばカスタマイズ)するためのNLPモデル更新モジュール984と、
――1つ又は複数の電気機器を制御するためのユーザの音声コマンドデータを音声制御機器102から検索するための音声入力管理モジュール986と、
――NLPモデルをトレーニングするためのNLPモデルトレーニングモジュール988と、
――本明細書で説明される他の機能を実行するための他のモジュールとを含むが、これらに限定されない。
―クライアントデータベース990は、データ及びモデルを記憶するために使用され、
――音声入力992と、
――NLPモデル994と、
――ユーザデータ996(例えば、顧客名、年齢、収入レベル、色の好み、以前に購入した製品、製品カテゴリ、製品ポートフォリオ/組み合わせ、先に問い合わせた製品、過去の納品先、インタラクションチャネル、インタラクション場所、購入時間、納期、特殊な要求、IDデータ、人口統計データ、社会的関係、ソーシャルネットワークアカウント名、ソーシャルネットワークへの投稿又はコメント、営業担当者、カスタマーサービス担当者又は配送担当者とのやりとりのレコード、好み、嫌気、気持ち、信仰、習俗、個性、気質、対話スタイルなど)、を含むが、これらに限定されない。
102 音声制御機器
102 音声制御デバイス
102 ユーザ装置
104 音声通信インターフェイス
106 ターゲット選択モジュール
108 通信インターフェース
112 音声コマンドメモリ
114 通信インターフェース
116 NLPモデルダウンロードモジュール
118 音声コマンドアップロードモジュール
Claims (12)
- 複数のタイプの電気機器のためのポータブルの音声制御に基づくユーザインターフェイスをカスタマイズするための方法であって、
メモリ、ディスプレイ及び1つ又は複数のプロセッサを有するユーザ装置においては、
音声制御機器とのデータ通信接続を確立することであって、前記音声制御機器が、内蔵のデータ通信インターフェイス、内蔵の音声通信インターフェイス、及び内蔵の自然言語処理モジュール、即ち、NLPモジュールを含み、前記データ通信インターフェイスが、複数のタイプの電気機器とのデータ通信を確立するように構成され、前記複数のタイプの電気機器が、異なる機械コマンドセットに応答して対応する電気機器操作を実行するように構成され、前記音声通信インターフェイスが、ユーザからの音声に基づく入力を受信するように構成され、前記NLPモジュールが、前記音声制御機器のメモリに記憶され、ここで、前記NLPモジュールが、複数のNLPモデルを記憶し、且つ現在の受信された音声入力に対する、指定されたターゲット電気機器に応じて、前記複数のNLPモデル内の対応する1つのNLPモデルを選択的に使用するように構成される、ことと、
前記音声制御機器の前記NLPモジュールを更新するように第1のユーザリクエストを検出する、ことと、
前記音声制御機器の前記NLPモジュールを更新するように前記第1のユーザリクエストを検出したことに応答する、ことと、
前記音声制御機器に対応するNLPモデルサーバーとの接続を確立して、
前記ディスプレイのグラフィカルユーザインターフェイスに、電気機器のタイプのリスト及び各電気機器のタイプに対応する電気機器の機能のリストを表示して、
グラフィカルユーザインターフェースに表示される、第1の電気機器のタイプに対する第1の電気機器の機能セット及び第2の電気機器のタイプに対する第2の電気機器の機能セットのユーザ選択を受信して、
前記第1の電気機器のタイプに対する前記第1の電気機器の機能セット及び前記第2の電気機器のタイプに対する前記第2の電気機器の機能セットの前記ユーザ選択を受信することに応答して、
前記NLPモデルサーバーから、前記第1の電気機器のタイプに対する前記第1の電気機器の機能セットについての音声コマンドによりトレーニングされた第1のNLPモデルと、前記第2の電気機器のタイプに対する前記第2の電気機器の機能セットについての音声コマンドによりトレーニングされた第2のNLPモデルとをダウンロードし、
ダウンロードされた前記第1のNLPモデルと前記第2のNLPモデルとを前記音声制御機器の前記NLPモジュールに追加する、こととを含む、
複数のタイプの電気機器のためのポータブルの音声制御に基づくユーザインターフェイスをカスタマイズするための方法。 - 前記音声制御機器とのデータ通信接続を確立することは、
前記音声制御機器が前記音声制御機器のバッテリーを充電している時に、前記音声制御機器からデータ通信リクエストを受信することを含むことを特徴とする
請求項1に記載の方法。 - 前記音声制御機器を前記ユーザ装置に接続させたことに応答して、前記第1のユーザリクエストを検出することを特徴とする
請求項1に記載の方法。 - 前記音声制御機器の前記NLPモジュールを更新するように前記第1のユーザリクエストを検出することは、
前記ユーザ装置内の音声制御機器を管理するためのユーザアプリケーションプログラムを起動するためのユーザ入力を検出することと、
前記ユーザアプリケーションプログラムのグラフィカルユーザインターフェイスに表示される機能更新に対するユーザ選択を検出することとを含むことを特徴とする
請求項1に記載の方法。 - 前記音声制御機器において前記第1のNLPモデルを前記NLPモジュールに追加した後、
前記音声制御機器との前記データ通信接続を確立して、
前記第1の電気機器のタイプに対する第1の電気機器の機能セットを制御するように、前記音声制御機器からユーザからの1つの又は複数の音声コマンドの音声データを受信して、
前記NLPモデルサーバーとの接続を確立した後、前記音声データを前記音声制御機器に対応する前記NLPモデルサーバーにアップロードして、
前記NLPモデルサーバーが前記1つ又は複数の音声コマンドの音声データを使用して前記第1のNLPモデルを更新した後、前記NLPモデルサーバーから前記第1のNLPモデルを受信して、
更新された第1のNLPモデルを前記音声制御機器の前記NLPモジュールに追加することをさらに含むことを特徴とする
請求項1に記載の方法。 - 前記音声制御機器において前記第1のNLPモデルを前記NLPモジュールに追加した後、
前記音声制御機器との前記データ通信接続を確立して、
前記第1の電気機器のタイプに対する第1の電気機器の機能セットを制御するように、前記音声制御機器からユーザからの1つの又は複数の音声コマンドの音声データを受信して、
前記ユーザ装置における前記1つ又は複数の音声コマンドの音声データに基づいて、前記第1のNLPモデルを調整して、
調整された第1のNLPモデルを前記音声制御機器の前記NLPモジュールに追加することをさらに含むことを特徴とする
請求項1に記載の方法。 - 前記音声制御機器において前記第1のNLPモデルを前記NLPモジュールに追加した後、
前記音声制御機器とのデータ通信接続を確立して、
前記グラフィカルユーザインターフェイスに表示される前記電気機器のタイプのリスト及び各電気機器のタイプに対応する前記電気機器の機能のリストから、前記第1の電気機器のタイプに対する前記第1の電気機器の機能セットの選択をキャンセルするように、第1のユーザ入力を受信して、ここで、前記第1の電気機器のタイプに対する前記第1の電気機器の機能セットに対応する前記第1のNLPモデルが前記音声制御機器の前記NLPモジュールに既に追加され、
前記音声制御機器の前記NLPモジュールから前記第1のNLPモデルを削除するように、前記第1のユーザ入力に応答して前記音声制御機器に削除コマンドを送信することをさらに含むことを特徴とする
請求項1に記載の方法。 - 前記音声制御機器において前記第1のNLPモデルを前記NLPモジュールに追加した後、
前記音声制御機器とのデータ通信接続を確立して、
前記グラフィカルユーザインターフェイスに表示される前記電気機器のタイプのリストと各電気機器のタイプに対応する前記電気機器の機能のリストから、前記第1の電気機器のタイプに対する前記第1の電気機器の機能セットからの第1の電気機器の機能サブセットの選択をキャンセルするように、第2のユーザ入力を受信して、ここで、前記第1の電気機器のタイプに対する前記第1の電気機器の機能セットに対応する前記第1のNLPモデルが前記音声制御機器の前記NLPモジュールに既に追加され、
前記第1の電気機器のタイプに対する前記第1の電気機器の機能セットから除去された前記第1の電気機器の機能サブセットに基づいて前記第1のNLPモデルを調整するように、前記NLPモデルサーバーにリクエストを送信して、
調整された第1のNLPモデルをダウンロードし、第1の電気機器のタイプに対応する前記第1の電気機器の機能セットから前記第1の電気機器の機能サブセットを排除するように前記調整された第1のNLPモデルが更新されて、
前記調整された第1のNLPモデルを前記音声制御機器の前記NLPモジュールに追加することをさらに含むことを特徴とする
請求項1に記載の方法。 - 前記音声制御機器において前記第1のNLPモデルを前記NLPモジュールに追加した後、
前記音声制御機器とのデータ通信接続を確立して、
前記グラフィカルユーザインターフェイスに表示される前記電気機器のタイプのリストと各電気機器のタイプに対応する前記電気機器の機能のリストから、前記第1の電気機器のタイプに対する前記第1の電気機器の機能セットからの第1の電気機器の機能サブセットの選択をキャンセルするように、第2のユーザ入力を受信して、ここで、前記第1の電気機器のタイプに対する前記第1の電気機器の機能セットに対応する前記第1のNLPモデルが前記音声制御機器の前記NLPモジュールに既に追加され、
前記第1の電気機器のタイプに対する前記第1の電気機器の機能セットから除去された前記第1の電気機器の機能サブセットに基づいて前記第1のNLPモデルを調整して、
調整された第1のNLPモデルを前記音声制御機器の前記NLPモジュールに追加することをさらに含むことを特徴とする
請求項1に記載の方法。 - 前記音声制御機器において前記第1のNLPモデルを前記NLPモジュールに追加した後、
前記音声制御機器とのデータ通信接続を確立して、
前記第1の電気機器のタイプに対する前記第1の電気機器の機能セットの1つ又は複数の機能の更新を検出して、
検出された1つ又は複数の機能の更新に対するユーザ選択に従って、前記第1のNLPモデルを更新するためのプロンプトを前記ディスプレイに表示することをさらに含むことを特徴とする
請求項1に記載の方法。 - 複数のタイプの電気機器のためのポータブルの音声制御に基づくユーザインターフェイスをカスタマイズするように構成されたユーザ装置であって、
ディスプレイと、
1つ又は複数のプロセッサと、
コマンドを記憶するように構成されメモリとを備え、
前記コマンドが前記1つ又は複数のプロセッサによって実行される場合、前記コマンドが前記プロセッサに請求項1~10のいずれか一項に記載の複数のタイプの電気機器のためのポータブルの音声制御に基づくユーザインターフェイスをカスタマイズするための方法を実行させるように構成される、
ユーザ装置。 - コマンドを記憶するコンピュータ読み取り可能な記憶媒体であって、前記コマンドが1つの又は複数のプロセッサによって実行される場合、前記コマンドが前記プロセッサに請求項1~10のいずれか一項に記載の複数のタイプの電気機器のためのポータブルの音声制御に基づくユーザインターフェイスをカスタマイズするための方法を実行させるように構成される、
コンピュータ読み取り可能な記憶媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/160,934 | 2018-10-15 | ||
US16/160,934 US10978046B2 (en) | 2018-10-15 | 2018-10-15 | System and method for customizing portable natural language processing interface for appliances |
PCT/CN2019/078930 WO2020077947A1 (en) | 2018-10-15 | 2019-03-20 | System and method for customizing portable natural language processing interface for appliances |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022502713A JP2022502713A (ja) | 2022-01-11 |
JP7098056B2 true JP7098056B2 (ja) | 2022-07-08 |
Family
ID=70159593
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021520381A Active JP7098056B2 (ja) | 2018-10-15 | 2019-03-20 | 電気機器のためのポータブルの自然言語処理インターフェースをカスタマイズするためのシステム、及び方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10978046B2 (ja) |
EP (1) | EP3850442B1 (ja) |
JP (1) | JP7098056B2 (ja) |
CN (1) | CN112789561B (ja) |
WO (1) | WO2020077947A1 (ja) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108428452B (zh) * | 2018-03-14 | 2019-12-13 | 百度在线网络技术(北京)有限公司 | 终端支架和远场语音交互系统 |
US20200210804A1 (en) * | 2018-12-31 | 2020-07-02 | Qi Lu | Intelligent enclosure systems and computing methods |
US11482215B2 (en) * | 2019-03-27 | 2022-10-25 | Samsung Electronics Co., Ltd. | Multi-modal interaction with intelligent assistants in voice command devices |
WO2020222539A1 (en) * | 2019-05-02 | 2020-11-05 | Samsung Electronics Co., Ltd. | Hub device, multi-device system including the hub device and plurality of devices, and method of operating the same |
US11398238B2 (en) * | 2019-06-07 | 2022-07-26 | Lg Electronics Inc. | Speech recognition method in edge computing device |
JP7335794B2 (ja) * | 2019-11-20 | 2023-08-30 | シュナイダーエレクトリックホールディングス株式会社 | 情報処理装置及び設定装置 |
US11217027B2 (en) * | 2020-03-13 | 2022-01-04 | Wipro Limited | Method and system for generating augmented reality (AR)/virtual reality (VR) content in real-time |
US20210349708A1 (en) * | 2020-05-05 | 2021-11-11 | Caterpillar Inc. | System and method involving multiple software targets packaged into one file |
US11887589B1 (en) * | 2020-06-17 | 2024-01-30 | Amazon Technologies, Inc. | Voice-based interactions with a graphical user interface |
CN111968637B (zh) * | 2020-08-11 | 2024-06-14 | 北京小米移动软件有限公司 | 终端设备的操作模式控制方法、装置、终端设备及介质 |
EP3997609A1 (en) * | 2020-09-29 | 2022-05-18 | Google LLC | Document mark-up and navigation using natural language processing |
EP4182920A4 (en) * | 2020-10-30 | 2023-12-27 | Samsung Electronics Co., Ltd. | METHOD AND SYSTEM FOR ASSIGNING A UNIQUE VOICE FOR AN ELECTRONIC DEVICE |
US20220343225A1 (en) * | 2021-03-16 | 2022-10-27 | Tata Consultancy Services Limited | Method and system for creating events |
CN113689848A (zh) * | 2021-09-02 | 2021-11-23 | 成都启英泰伦科技有限公司 | 一种语音识别方法 |
US20230359973A1 (en) * | 2022-05-04 | 2023-11-09 | Kyndryl, Inc. | Ad-hoc application development |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002525690A (ja) | 1998-09-21 | 2002-08-13 | トムソン マルチメディア | 遠隔制御される装置を含むシステム及び、装置の音声に基づく遠隔制御のための装置 |
JP2003280683A (ja) | 2002-03-20 | 2003-10-02 | Toshiba Corp | 音声認識装置、音声認識装置における音声認識制御方法、音声処理に関する辞書管理装置 |
JP2014134604A (ja) | 2013-01-09 | 2014-07-24 | Nec Corp | 車載情報システムおよび音声認識適応方法 |
WO2015029379A1 (ja) | 2013-08-29 | 2015-03-05 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 機器制御方法、表示制御方法及び購入決済方法 |
Family Cites Families (41)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE69942663D1 (de) * | 1999-04-13 | 2010-09-23 | Sony Deutschland Gmbh | Zusammenfügen von Sprachschnittstellen zur gleichzeitigen Benützung von Vorrichtungen und Anwendungen |
GB9911971D0 (en) * | 1999-05-21 | 1999-07-21 | Canon Kk | A system, a server for a system and a machine for use in a system |
WO2001075837A2 (en) * | 2000-03-30 | 2001-10-11 | Xircom, Inc. | Universal remote control device wirelessly linked to personal computer |
JP4359004B2 (ja) * | 2001-03-19 | 2009-11-04 | 株式会社日立製作所 | 遠隔操作システムおよび遠隔操作方法および遠隔操作アダプタおよびサービス機器 |
KR20030034739A (ko) * | 2001-10-26 | 2003-05-09 | 삼성전자주식회사 | 음성단위모델데이터의 갱신방법 및 그 장치 |
US7409337B1 (en) | 2004-03-30 | 2008-08-05 | Microsoft Corporation | Natural language processing interface |
US9632665B2 (en) * | 2004-09-08 | 2017-04-25 | Universal Electronics Inc. | System and method for flexible configuration of a controlling device |
US10264138B2 (en) * | 2009-01-28 | 2019-04-16 | Headwater Research Llc | Mobile device and service management |
US8375328B2 (en) * | 2009-11-11 | 2013-02-12 | Google Inc. | Implementing customized control interfaces |
CN102377622A (zh) | 2010-08-17 | 2012-03-14 | 鸿富锦精密工业(深圳)有限公司 | 远程控制接口及其远程控制方法 |
WO2013059906A1 (en) * | 2011-10-28 | 2013-05-02 | Research In Motion Limited | Electronic device management using interdomain profile-based inferences |
US8825020B2 (en) | 2012-01-12 | 2014-09-02 | Sensory, Incorporated | Information access and device control using mobile phones and audio in the home environment |
US20130238326A1 (en) * | 2012-03-08 | 2013-09-12 | Lg Electronics Inc. | Apparatus and method for multiple device voice control |
US8831957B2 (en) * | 2012-08-01 | 2014-09-09 | Google Inc. | Speech recognition models based on location indicia |
CN103839549A (zh) * | 2012-11-22 | 2014-06-04 | 腾讯科技(深圳)有限公司 | 一种语音指令控制方法及系统 |
US10687193B2 (en) * | 2013-09-19 | 2020-06-16 | Unaliwear, Inc. | Assist device and system |
CN203870416U (zh) | 2013-12-12 | 2014-10-08 | 余海洋 | 一种家电语音控制器 |
US9171445B2 (en) * | 2013-12-24 | 2015-10-27 | H Keith Nishihara | Activity level monitoring participant station network |
US9741344B2 (en) | 2014-10-20 | 2017-08-22 | Vocalzoom Systems Ltd. | System and method for operating devices using voice commands |
GB201420308D0 (en) * | 2014-11-14 | 2014-12-31 | Mastercard International Inc | Smart appliance processing system and associated methods |
US20170032783A1 (en) | 2015-04-01 | 2017-02-02 | Elwha Llc | Hierarchical Networked Command Recognition |
CN204650175U (zh) | 2015-05-25 | 2015-09-16 | 深圳市中阳通讯有限公司 | 一种语音识别控制电器设备系统 |
US20160379630A1 (en) | 2015-06-25 | 2016-12-29 | Intel Corporation | Speech recognition services |
US9996316B2 (en) * | 2015-09-28 | 2018-06-12 | Amazon Technologies, Inc. | Mediation of wakeword response for multiple devices |
CN106886166A (zh) | 2015-12-11 | 2017-06-23 | 美的集团股份有限公司 | 通过音箱控制家用电器的方法、装置以及音箱 |
CN105845139B (zh) * | 2016-05-20 | 2020-06-16 | 北方民族大学 | 一种离线语音控制方法和装置 |
US10148546B2 (en) * | 2016-06-09 | 2018-12-04 | Apple Inc. | Scheduling processing tasks based on predicted context |
CN105897531A (zh) * | 2016-06-21 | 2016-08-24 | 美的智慧家居科技有限公司 | 移动终端、家电的语音控制系统及其语音控制方法 |
EP3507798A1 (en) * | 2016-10-03 | 2019-07-10 | Google LLC | Processing voice commands based on device topology |
KR20180055189A (ko) * | 2016-11-16 | 2018-05-25 | 삼성전자주식회사 | 자연어 처리 방법 및 장치와 자연어 처리 모델을 학습하는 방법 및 장치 |
US10339769B2 (en) * | 2016-11-18 | 2019-07-02 | Google Llc | Server-provided visual output at a voice interface device |
CN106791160A (zh) | 2017-01-05 | 2017-05-31 | 珠海格力电器股份有限公司 | 通过智能电器进行通信的方法及智能电器 |
US10459687B2 (en) * | 2017-03-28 | 2019-10-29 | Wipro Limited | Method and system for controlling an internet of things device using multi-modal gesture commands |
US10992795B2 (en) * | 2017-05-16 | 2021-04-27 | Apple Inc. | Methods and interfaces for home media control |
KR102436511B1 (ko) * | 2017-08-14 | 2022-08-25 | 삼성전자주식회사 | 모바일 엑스선 장치 및 모바일 엑스선 장치에서의 전원 제어 방법 |
US11314215B2 (en) * | 2017-09-15 | 2022-04-26 | Kohler Co. | Apparatus controlling bathroom appliance lighting based on user identity |
US10466962B2 (en) * | 2017-09-29 | 2019-11-05 | Sonos, Inc. | Media playback system with voice assistance |
US20190149987A1 (en) * | 2017-11-10 | 2019-05-16 | Amazon Technologies, Inc. | Secondary device setup |
CN108170034B (zh) | 2017-12-29 | 2021-06-08 | 上海器魂智能科技有限公司 | 智能设备控制方法、装置、计算机设备和储存介质 |
KR102498007B1 (ko) | 2018-01-08 | 2023-02-08 | 엘지전자 주식회사 | 음성인식을 이용한 세탁물 처리기기 제어시스템 및 동작방법 |
US11106868B2 (en) | 2018-03-06 | 2021-08-31 | Samsung Electronics Co., Ltd. | System and method for language model personalization |
-
2018
- 2018-10-15 US US16/160,934 patent/US10978046B2/en active Active
-
2019
- 2019-03-20 JP JP2021520381A patent/JP7098056B2/ja active Active
- 2019-03-20 CN CN201980064293.0A patent/CN112789561B/zh active Active
- 2019-03-20 EP EP19873521.9A patent/EP3850442B1/en active Active
- 2019-03-20 WO PCT/CN2019/078930 patent/WO2020077947A1/en unknown
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002525690A (ja) | 1998-09-21 | 2002-08-13 | トムソン マルチメディア | 遠隔制御される装置を含むシステム及び、装置の音声に基づく遠隔制御のための装置 |
JP2003280683A (ja) | 2002-03-20 | 2003-10-02 | Toshiba Corp | 音声認識装置、音声認識装置における音声認識制御方法、音声処理に関する辞書管理装置 |
JP2014134604A (ja) | 2013-01-09 | 2014-07-24 | Nec Corp | 車載情報システムおよび音声認識適応方法 |
WO2015029379A1 (ja) | 2013-08-29 | 2015-03-05 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 機器制御方法、表示制御方法及び購入決済方法 |
Also Published As
Publication number | Publication date |
---|---|
US20200118548A1 (en) | 2020-04-16 |
EP3850442A4 (en) | 2021-11-17 |
US10978046B2 (en) | 2021-04-13 |
CN112789561A (zh) | 2021-05-11 |
EP3850442B1 (en) | 2022-11-16 |
JP2022502713A (ja) | 2022-01-11 |
EP3850442A1 (en) | 2021-07-21 |
WO2020077947A1 (en) | 2020-04-23 |
CN112789561B (zh) | 2022-04-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7098056B2 (ja) | 電気機器のためのポータブルの自然言語処理インターフェースをカスタマイズするためのシステム、及び方法 | |
JP7115813B2 (ja) | 複数の電気機器に跨るポータブルの自然言語処理インターフェースを提供するためのシステム、及び方法 | |
JP7198861B2 (ja) | ホームオートメーションのためのインテリジェントアシスタント | |
CN207937781U (zh) | 电子设备、语音接口设备以及电子系统 | |
CN109917663B (zh) | 设备控制的方法和装置 | |
US10778830B2 (en) | Electronic device and method for performing task using external device by electronic device | |
US20210383811A1 (en) | Methods and systems for audio voice service in an embedded device | |
JP6767206B2 (ja) | 応答システム | |
JP2019109510A (ja) | 複数のウェイクワードを利用して人工知能機器を制御する方法およびシステム | |
US20150172878A1 (en) | Acoustic environments and awareness user interfaces for media devices | |
EP3916720A1 (en) | Voice control method and apparatus, and computer storage medium | |
CN104823411A (zh) | 自动化系统的语音控制配置 | |
KR102561572B1 (ko) | 센서 활용 방법 및 이를 구현한 전자 장치 | |
CN106462464B (zh) | 通过使硬件或软件元件执行联动操作来实现功能的方法和系统 | |
CN105898890A (zh) | 装置搜索方法和用于支持其的电子装置 | |
JP6448901B2 (ja) | トポロジーに基づいた周辺機器制御システム及び方法 | |
CN107637028A (zh) | 电子设备和网关及用于其的控制方法 | |
US20170195129A1 (en) | Method and device to control secondary devices | |
WO2024008013A1 (zh) | 一种智能家居设备联动方案推荐方法及相关装置 | |
US20210194716A1 (en) | Methods and devices to manage action of remote electronic devices | |
CN115914453A (zh) | 一种操作应用程序的方法、终端及服务器 | |
Dhillon et al. | Method for Real-Time Voice Communication | |
KR20170059346A (ko) | 서버, 전자 장치 및 전자 장치에서의 사물 인터넷 수행 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210611 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210611 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220526 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220621 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220628 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7098056 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |