JP2020198588A - 音声処理システム、会議システム、音声処理方法、及び音声処理プログラム - Google Patents
音声処理システム、会議システム、音声処理方法、及び音声処理プログラム Download PDFInfo
- Publication number
- JP2020198588A JP2020198588A JP2019105188A JP2019105188A JP2020198588A JP 2020198588 A JP2020198588 A JP 2020198588A JP 2019105188 A JP2019105188 A JP 2019105188A JP 2019105188 A JP2019105188 A JP 2019105188A JP 2020198588 A JP2020198588 A JP 2020198588A
- Authority
- JP
- Japan
- Prior art keywords
- command
- voice
- unit
- target user
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 9
- 230000005540 biological transmission Effects 0.000 claims description 27
- 230000004044 response Effects 0.000 abstract description 11
- 238000000034 method Methods 0.000 description 43
- 230000008569 process Effects 0.000 description 37
- 238000004891 communication Methods 0.000 description 20
- 238000010586 diagram Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 10
- 238000004458 analytical method Methods 0.000 description 3
- 230000004913 activation Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 230000007306 turnover Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/28—Constructional details of speech recognition systems
- G10L15/34—Adaptation of a single recogniser for parallel processing, e.g. by use of multiple processors or cloud computing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L2015/088—Word spotting
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Computational Linguistics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Telephonic Communication Services (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Transfer Between Computers (AREA)
Abstract
Description
図1は、本発明の実施形態に係る会議システムの概略構成を示す図である。会議システム100は、音声処理装置1と、クラウドサーバ2と、表示装置3と、データベースDBとを含んでいる。音声処理装置1A,1B,1Cのそれぞれは、マイク及びスピーカを備えたマイクスピーカ装置であり、例えばAIスピーカ、スマートスピーカなどである。ここでは、会議室Aに設置された音声処理装置1Aと、会議室Bに設置された音声処理装置1Bと、会議室Cに設置された音声処理装置1Cとを示している。表示装置3A,3B,3Cは各種情報を表示する表示部を備える。ここでは、会議室Aに設置された表示装置3Aと、会議室Bに設置された表示装置3Bと、会議室Cに設置された表示装置3Cとを示している。音声処理装置1A及び表示装置3Aと、音声処理装置1B及び表示装置3Bと、音声処理装置1C及び表示装置3Cと、クラウドサーバ2と、データベースDBとは、ネットワークN1を介して互いに接続されている。ネットワークN1は、インターネット、LAN、WAN、又は公衆電話回線などの通信網である。クラウドサーバ2は、例えば1台又は複数台のデータサーバ(仮想サーバ)で構築される。データベースDBは、各種データを記憶する。データベースDBは、クラウドサーバ2に含まれてもよいし、表示装置3A,3B,3Cのいずれか一つに含まれてもよいし、複数の表示装置3に分散して設けられてもよい。またデータベースDBは、音声処理装置1A,1B,1Cのいずれか一つに含まれてもよいし、複数の音声処理装置1に分散して設けられてもよい。音声処理装置1A,1B,1Cのそれぞれは、本発明の音声処理装置の一例である。表示装置3A,3B,3Cのそれぞれは、本発明の表示装置、端末装置の一例である。
図2に示すように、音声処理装置1は、制御部11、記憶部12、スピーカ13、マイク14、及び通信インターフェース15などを備える。音声処理装置1は、例えばAIスピーカ、スマートスピーカなどの機器であってもよい。音声処理装置1は、例えば会議室の机上に配置され、会議に参加するユーザの音声をマイク14を介して取得したり、当該ユーザに対してスピーカ13から音声を出力(報知)したりする。
図2に示すように、クラウドサーバ2は、制御部21、記憶部22、通信インターフェース23などを備える。
図2に示すように、表示装置3は、制御部31、記憶部32、操作部33、表示部34、通信インターフェース35などを備える。
以下、図13及び図14を参照しつつ、音声処理装置1の制御部11、クラウドサーバ2の制御部21、及び表示装置3の制御部31によって実行される音声処理の手順の一例について説明する。ここでは、図1に示す会議システム100において、音声処理装置1A及び表示装置3Aに着目して前記音声処理を説明する。例えば、音声処理装置1Aの制御部11がユーザAの音声を受信することにより前記音声処理プログラムの実行を開始することによって、前記音声処理の実行を開始する。なお、前記音声処理は、音声処理装置1A,1B,1Cのそれぞれにおいて、個別に並行して実行される。
2 :クラウドサーバ
3 :表示装置
11 :制御部
12 :記憶部
13 :スピーカ
14 :マイク
15 :通信インターフェース
21 :制御部
22 :記憶部
23 :通信インターフェース
31 :制御部
32 :記憶部
33 :操作部
34 :表示部
35 :通信インターフェース
100 :会議システム
111 :音声受信部
112 :話者特定部
113 :音声判定部
114 :音声送信部
115 :応答処理部
211 :音声受信部
212 :コマンド特定部
213 :対象ユーザ特定部
214 :コマンド処理部
311 :コマンド取得部
312 :コマンド実行部
Claims (10)
- 音声を受信する音声受信部と、
前記音声受信部より受信される前記音声に基づいて発話者を特定する話者特定部と、
前記音声受信部より受信される前記音声に基づいて、当該音声に所定のコマンドの受け付けを開始するための特定ワードが含まれるか否かを判定する音声判定部と、
前記音声判定部により、前記音声に前記特定ワードが含まれると判定された場合に、前記音声に含まれ、前記特定ワードに続くコマンド用キーワードに基づいて、前記コマンドを特定するコマンド特定部と、
前記コマンド特定部により特定される前記コマンドの内容に基づいて、前記コマンドを実行する対象ユーザを特定する対象ユーザ特定部と、
前記コマンド特定部により特定される前記コマンドを、前記対象ユーザ特定部により特定される前記対象ユーザに対して実行するコマンド実行部と、
を備える音声処理システム。 - 前記対象ユーザ特定部は、前記コマンド用キーワードと前記コマンドと前記対象ユーザとを予め互いに関連付けて記憶する記憶部を参照して、前記コマンド特定部により特定される前記コマンドの内容に基づいて前記対象ユーザを特定する、
請求項1に記載の音声処理システム。 - 前記対象ユーザ特定部は、前記音声受信部より受信される前記音声に前記対象ユーザを特定するためのユーザ特定用ワードが含まれる場合に、当該ユーザ特定用ワードに基づいて前記対象ユーザを特定する、
請求項1に記載の音声処理システム。 - 前記コマンドが、所定のコンテンツを表示させる内容であって、前記コンテンツに、ユーザの閲覧権限の有無が設定されている場合において、
前記対象ユーザ特定部は、前記コンテンツの閲覧を許可されたユーザを前記対象ユーザに特定する、
請求項1に記載の音声処理システム。 - ネットワークを介して互いに接続される、第1ユーザに対応する第1端末装置と第2ユーザに対応する第2端末装置とを含み、
前記対象ユーザ特定部により第1コマンドを実行する前記対象ユーザとして前記第1ユーザが特定された場合に、前記コマンド実行部は、前記第1コマンドに対応する第1コンテンツを前記第1端末装置に表示させる一方、
前記対象ユーザ特定部により第2コマンドを実行する前記対象ユーザとして前記第1ユーザ及び前記第2ユーザが特定された場合に、前記コマンド実行部は、前記第2コマンドに対応する第2コンテンツを前記第1端末装置及び前記第2端末装置に表示させる、
請求項1から請求項4のいずれか1項に記載の音声処理システム。 - 前記コマンド特定部により特定される前記コマンドを実行する対象の端末装置ごとにコマンド記憶領域を備え、
前記コマンド実行部は、前記端末装置ごとに設けられており、
第1端末装置の第1コマンド実行部は、当該第1端末装置に対応する第1コマンド記憶領域に第1コマンドが登録された場合に当該第1コマンドを実行し、
第2端末装置の第2コマンド実行部は、当該第2端末装置に対応する第2コマンド記憶領域に第2コマンドが登録された場合に当該第2コマンドを実行する、
請求項1から請求項5のいずれか1項に記載の音声処理システム。 - 前記話者特定部により、前記音声受信部より受信された前記音声の前記発話者として第1ユーザが特定された場合において、
前記音声判定部により、前記第1ユーザが発話した前記音声に前記特定ワードが含まれないと判定された場合に、前記音声受信部より受信された前記音声を第2ユーザに送信する音声送信部をさらに備える、
請求項1から請求項6のいずれか1項に記載の音声処理システム。 - 領域ごとに音声処理装置及び表示装置が配置され、前記音声処理装置を介して前記領域間で音声の送受信を行うことが可能な会議システムであって、
前記音声を受信する音声受信部と、
前記音声受信部より受信される前記音声に基づいて発話者を特定する話者特定部と、
前記音声受信部より受信される前記音声に基づいて、当該音声に所定のコマンドの受け付けを開始するための特定ワードが含まれるか否かを判定する音声判定部と、
前記音声判定部により、前記音声に前記特定ワードが含まれると判定された場合に、前記音声に含まれ、前記特定ワードに続くコマンド用キーワードに基づいて、前記コマンドを特定するコマンド特定部と、
前記コマンド特定部により特定される前記コマンドの内容に基づいて、前記コマンドを実行する対象ユーザを特定する対象ユーザ特定部と、
前記コマンド特定部により特定される前記コマンドを、前記対象ユーザ特定部により特定される前記対象ユーザが位置する前記領域の前記表示装置において実行するコマンド実行部と、
を備える会議システム。 - 音声を受信する音声受信ステップと、
前記音声受信ステップより受信される前記音声に基づいて発話者を特定する話者特定ステップと、
前記音声受信ステップより受信される前記音声に基づいて、当該音声に所定のコマンドの受け付けを開始するための特定ワードが含まれるか否かを判定する音声判定ステップと、
前記音声判定ステップにより、前記音声に前記特定ワードが含まれると判定された場合に、前記音声に含まれ、前記特定ワードに続くコマンド用キーワードに基づいて、前記コマンドを特定するコマンド特定ステップと、
前記コマンド特定ステップにより特定される前記コマンドの内容に基づいて、前記コマンドを実行する対象ユーザを特定する対象ユーザ特定ステップと、
前記コマンド特定ステップにより特定される前記コマンドを、前記対象ユーザ特定ステップにより特定される前記対象ユーザに対して実行するコマンド実行ステップと、
を一又は複数のプロセッサにより実行する音声処理方法。 - 音声を受信する音声受信ステップと、
前記音声受信ステップより受信される前記音声に基づいて発話者を特定する話者特定ステップと、
前記音声受信ステップより受信される前記音声に基づいて、当該音声に所定のコマンドの受け付けを開始するための特定ワードが含まれるか否かを判定する音声判定ステップと、
前記音声判定ステップにより、前記音声に前記特定ワードが含まれると判定された場合に、前記音声に含まれ、前記特定ワードに続くコマンド用キーワードに基づいて、前記コマンドを特定するコマンド特定ステップと、
前記コマンド特定ステップにより特定される前記コマンドの内容に基づいて、前記コマンドを実行する対象ユーザを特定する対象ユーザ特定ステップと、
前記コマンド特定ステップにより特定される前記コマンドを、前記対象ユーザ特定ステップにより特定される前記対象ユーザに対して実行するコマンド実行ステップと、
を一又は複数のプロセッサにより実行させるための音声処理プログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019105188A JP7351642B2 (ja) | 2019-06-05 | 2019-06-05 | 音声処理システム、会議システム、音声処理方法、及び音声処理プログラム |
US16/874,201 US11568866B2 (en) | 2019-06-05 | 2020-05-14 | Audio processing system, conferencing system, and audio processing method |
CN202010426661.6A CN112053684A (zh) | 2019-06-05 | 2020-05-19 | 语音处理系统、会议系统、语音处理方法以及记录介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019105188A JP7351642B2 (ja) | 2019-06-05 | 2019-06-05 | 音声処理システム、会議システム、音声処理方法、及び音声処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020198588A true JP2020198588A (ja) | 2020-12-10 |
JP7351642B2 JP7351642B2 (ja) | 2023-09-27 |
Family
ID=73608783
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019105188A Active JP7351642B2 (ja) | 2019-06-05 | 2019-06-05 | 音声処理システム、会議システム、音声処理方法、及び音声処理プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US11568866B2 (ja) |
JP (1) | JP7351642B2 (ja) |
CN (1) | CN112053684A (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006208696A (ja) * | 2005-01-27 | 2006-08-10 | Sony Corp | プレゼンテーション用アプリケーションをリモートコントロールするための装置,方法,プログラム及び記録媒体 |
JP2012160793A (ja) * | 2011-01-28 | 2012-08-23 | Konica Minolta Business Technologies Inc | テレビ会議システム及びテレビ会議用装置並びにプログラム |
WO2014010290A1 (ja) * | 2012-07-13 | 2014-01-16 | ソニー株式会社 | 情報処理システムおよび記憶媒体 |
WO2016039992A1 (en) * | 2014-09-12 | 2016-03-17 | Apple Inc. | Dynamic thresholds for always listening speech trigger |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9607041B2 (en) * | 1999-07-15 | 2017-03-28 | Gula Consulting Limited Liability Company | System and method for efficiently accessing internet resources |
JP2004343232A (ja) | 2003-05-13 | 2004-12-02 | Nec Corp | 通信装置及び通信方法 |
JP2007147762A (ja) * | 2005-11-24 | 2007-06-14 | Fuji Xerox Co Ltd | 発話者予測装置および発話者予測方法 |
US8050917B2 (en) * | 2007-09-27 | 2011-11-01 | Siemens Enterprise Communications, Inc. | Method and apparatus for identification of conference call participants |
JP2011053629A (ja) * | 2009-09-04 | 2011-03-17 | Sharp Corp | 会議中継装置及びコンピュータプログラム |
US10475439B2 (en) * | 2015-03-23 | 2019-11-12 | Sony Corporation | Information processing system and information processing method |
JP2016218361A (ja) * | 2015-05-25 | 2016-12-22 | クラリオン株式会社 | 音声認識システム、車載器およびサーバ装置 |
US10319375B2 (en) * | 2016-12-28 | 2019-06-11 | Amazon Technologies, Inc. | Audio message extraction |
US10735479B2 (en) * | 2017-03-30 | 2020-08-04 | Intel Corporation | Methods, systems and apparatus to enable voice assistant device communication |
US20190251961A1 (en) * | 2018-02-15 | 2019-08-15 | Lenovo (Singapore) Pte. Ltd. | Transcription of audio communication to identify command to device |
WO2020012220A1 (en) * | 2018-07-11 | 2020-01-16 | Yogesh Chunilal Rathod | In the event of selection of message, invoking camera to enabling to capture media and relating, attaching, integrating, overlay message with/on/in captured media and send to message sender |
-
2019
- 2019-06-05 JP JP2019105188A patent/JP7351642B2/ja active Active
-
2020
- 2020-05-14 US US16/874,201 patent/US11568866B2/en active Active
- 2020-05-19 CN CN202010426661.6A patent/CN112053684A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006208696A (ja) * | 2005-01-27 | 2006-08-10 | Sony Corp | プレゼンテーション用アプリケーションをリモートコントロールするための装置,方法,プログラム及び記録媒体 |
JP2012160793A (ja) * | 2011-01-28 | 2012-08-23 | Konica Minolta Business Technologies Inc | テレビ会議システム及びテレビ会議用装置並びにプログラム |
WO2014010290A1 (ja) * | 2012-07-13 | 2014-01-16 | ソニー株式会社 | 情報処理システムおよび記憶媒体 |
WO2016039992A1 (en) * | 2014-09-12 | 2016-03-17 | Apple Inc. | Dynamic thresholds for always listening speech trigger |
Also Published As
Publication number | Publication date |
---|---|
US11568866B2 (en) | 2023-01-31 |
CN112053684A (zh) | 2020-12-08 |
US20200388279A1 (en) | 2020-12-10 |
JP7351642B2 (ja) | 2023-09-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6902136B2 (ja) | システムの制御方法、システム、及びプログラム | |
KR102619621B1 (ko) | 챗봇과 대화하기 위한 전자 장치 및 그의 동작 방법 | |
US9940929B2 (en) | Extending the period of voice recognition | |
US20210286867A1 (en) | Voice user interface display method and conference terminal | |
KR20190111624A (ko) | 전자 장치 및 전자 장치의 음성 인식 제어 방법 | |
US10403272B1 (en) | Facilitating participation in a virtual meeting using an intelligent assistant | |
US20160294892A1 (en) | Storage Medium Storing Program, Server Apparatus, and Method of Controlling Server Apparatus | |
CN111639503A (zh) | 会议数据处理方法、装置、存储介质及设备 | |
CN109920436A (zh) | 一种提供辅助服务的装置及方法 | |
JP2008242837A (ja) | コミュニケーションの状況を管理する装置、方法およびプログラム | |
JP2010109898A (ja) | 撮影制御装置、撮影制御方法及びプログラム | |
JP6689953B2 (ja) | 通訳サービスシステム、通訳サービス方法及び通訳サービスプログラム | |
JP7351642B2 (ja) | 音声処理システム、会議システム、音声処理方法、及び音声処理プログラム | |
KR20190011031A (ko) | 자연어 표현 생성 방법 및 전자 장치 | |
JP2008011272A (ja) | 会議システム及び制御方法、並びにプログラム及び記憶媒体 | |
CN117609617A (zh) | 职位信息的推荐方法、装置、电子设备及存储介质 | |
KR20200112481A (ko) | 회의 제어를 위한 컴퓨터 프로그램, 전자 장치, 및 시스템 | |
JP7290524B2 (ja) | 情報処理システム、情報処理方法、及び情報処理プログラム | |
JP2024024879A (ja) | 表示制御システム、表示制御方法、及び表示制御プログラム | |
WO2020241701A1 (ja) | コミュニケーション管理装置 | |
JP2021018664A (ja) | 情報処理システム、情報処理方法、及びプログラム | |
CN111667822B (zh) | 语音处理装置、会议系统以及语音处理方法 | |
JP7163968B2 (ja) | サーバ装置、会議支援システム、会議支援方法及びプログラム | |
JP7139839B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
US20230065136A1 (en) | Server device, conference assistance system, conference assistance method, and program storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220323 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230310 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230404 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230602 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230905 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230914 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7351642 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |