JP7374157B2 - 盲導方法、盲導装置、電子デバイス、記憶媒体、プログラム、及び盲導製品 - Google Patents
盲導方法、盲導装置、電子デバイス、記憶媒体、プログラム、及び盲導製品 Download PDFInfo
- Publication number
- JP7374157B2 JP7374157B2 JP2021166091A JP2021166091A JP7374157B2 JP 7374157 B2 JP7374157 B2 JP 7374157B2 JP 2021166091 A JP2021166091 A JP 2021166091A JP 2021166091 A JP2021166091 A JP 2021166091A JP 7374157 B2 JP7374157 B2 JP 7374157B2
- Authority
- JP
- Japan
- Prior art keywords
- blind
- user
- route
- blind guiding
- broadcasting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 34
- 238000005516 engineering process Methods 0.000 claims description 21
- 230000004044 response Effects 0.000 claims description 6
- 238000004422 calculation algorithm Methods 0.000 claims description 4
- 238000004891 communication Methods 0.000 description 19
- 238000012545 processing Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000002452 interceptive effect Effects 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 101000822695 Clostridium perfringens (strain 13 / Type A) Small, acid-soluble spore protein C1 Proteins 0.000 description 1
- 101000655262 Clostridium perfringens (strain 13 / Type A) Small, acid-soluble spore protein C2 Proteins 0.000 description 1
- 101000655256 Paraclostridium bifermentans Small, acid-soluble spore protein alpha Proteins 0.000 description 1
- 101000655264 Paraclostridium bifermentans Small, acid-soluble spore protein beta Proteins 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H3/00—Appliances for aiding patients or disabled persons to walk about
- A61H3/06—Walking aids for blind persons
- A61H3/061—Walking aids for blind persons with electronic detecting or guiding means
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3652—Guidance using non-audiovisual output, e.g. tactile, haptic or electric stimuli
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61H—PHYSICAL THERAPY APPARATUS, e.g. DEVICES FOR LOCATING OR STIMULATING REFLEX POINTS IN THE BODY; ARTIFICIAL RESPIRATION; MASSAGE; BATHING DEVICES FOR SPECIAL THERAPEUTIC OR HYGIENIC PURPOSES OR SPECIFIC PARTS OF THE BODY
- A61H3/00—Appliances for aiding patients or disabled persons to walk about
- A61H3/06—Walking aids for blind persons
- A61H3/068—Sticks for blind persons
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3407—Route searching; Route guidance specially adapted for specific applications
- G01C21/343—Calculating itineraries, i.e. routes leading from a starting point to a series of categorical destinations using a global route restraint, round trips, touristic trips
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3453—Special cost functions, i.e. other than distance or default speed limit of road segments
- G01C21/3492—Special cost functions, i.e. other than distance or default speed limit of road segments employing speed data or traffic data, e.g. real-time or historical
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3605—Destination input or retrieval
- G01C21/3608—Destination input or retrieval using speech input, e.g. using speech recognition
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3629—Guidance using speech or audio output, e.g. text-to-speech
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/03—Cooperating elements; Interaction or communication between different cooperating elements or between cooperating elements and receivers
- G01S19/04—Cooperating elements; Interaction or communication between different cooperating elements or between cooperating elements and receivers providing carrier phase data
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/03—Cooperating elements; Interaction or communication between different cooperating elements or between cooperating elements and receivers
- G01S19/07—Cooperating elements; Interaction or communication between different cooperating elements or between cooperating elements and receivers providing data for correcting measured positioning data, e.g. DGPS [differential GPS] or ionosphere corrections
- G01S19/071—DGPS corrections
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/13—Receivers
- G01S19/14—Receivers specially adapted for specific applications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
- G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/40—Correcting position, velocity or attitude
- G01S19/41—Differential correction, e.g. DGPS [differential GPS]
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
- G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/42—Determining position
- G01S19/43—Determining position using carrier phase measurements, e.g. kinematic positioning; using long or short baseline interferometry
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3602—Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Computer Networks & Wireless Communication (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Life Sciences & Earth Sciences (AREA)
- Rehabilitation Therapy (AREA)
- Physical Education & Sports Medicine (AREA)
- Pain & Pain Management (AREA)
- Epidemiology (AREA)
- Animal Behavior & Ethology (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Acoustics & Sound (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
- Rehabilitation Tools (AREA)
- Position Fixing By Use Of Radio Waves (AREA)
Description
衛星測位データと基地局の差分データを取得し、キャリア位相差分技術を用いてユーザの位置情報を決定することと、
盲導請求に応じて、現在の位置情報とユーザが入力した目的地情報に基づいて盲導経路を生成することと、
盲導経路に基づいて音声プロンプトをブロードキャストすることと、を含む。
衛星測位データと基地局の差分データを取得し、キャリア位相差分技術を用いてユーザの位置情報を決定する測位モジュールと、
盲導請求に応じて、現在の位置情報とユーザが入力した目的地情報に基づいて盲導経路を生成する盲導経路生成モジュールと、
盲導経路に基づいて音声プロンプトをブロードキャストするプロンプトモジュールと、を備える。
少なくとも1つのプロセッサと、
少なくとも1つのプロセッサに通信可能に接続するメモリとを備え、
該メモリには、該少なくとも1つのプロセッサにより実行可能なコマンドが記憶されており、該コマンドは、該少なくとも1つのプロセッサにより実行されると、該少なくとも1つのプロセッサに本開示のいずれか1つの実施形態に記載の盲導方法を実行させる。
図1に示すように、該方法は、以下のステップS101~S103を含む。
ステップS101において、北斗衛星データと基地局の差分データを取得し、キャリア位相差分技術を用いてユーザの位置情報を決定する。
ステップS102において、盲導請求に応じて、現在の位置情報とユーザが入力した目的地情報に基づいて盲導経路を生成する。
ステップS103において、前記盲導経路に基づいて音声プロンプトをブロードキャストする。
ステップS201において、現在の位置情報に基づいて、予め設定される地図に開始位置を決定する。
ステップS202において、ユーザが入力した音声に対して音声認識を行い、目的地情報を取得し、予め設定される地図に目的地位置を決定する。
ステップS203において、開始位置と目的地位置に基づいて、予め設定される地図に盲導経路を決定する。
ここで、予め設定される地図は、高精度電子地図であってもよい。例えば、交差点などの複雑なシーンにおける盲導経路の精確さを確保するために、車線レベルまでの精度を有する電子地図であってもよい。
ステップS301において、盲導経路に基づいて、ユーザの位置情報が盲導経路から外れた場合、音声プロンプトをブロードキャストする。
例示的に、ステップS101により、ユーザの位置情報をリアルタイム更新し、ユーザの位置情報と盲導経路との間の最小距離を計算し、最小距離が設定値に達すると、ユーザの位置情報が盲導経路から外れたことを判断し、ユーザが既に盲導経路から外れ、ユーザが盲導経路に戻るために盲導経路に向かって移動するという音声プロンプトをブロードキャストする。
なお、ステップS101においてユーザに対するサブメートルレベルの測位について、予め設定される距離は、メートルレベルまたはデシメートルレベルであり得る。例えば、予め設定される距離は、0.5メートルであり得る。その結果、ユーザが盲導経路から少しでも外れる場合に、直ちに音声プロンプトをブロードキャストし、ユーザがナビゲーション経路から大きく外れる場合の事故を回避するため、ユーザを盲導経路に移動するように案内し、移動中のユーザの安全性をさらに向上させることができる。
ステップS401において、盲導経路に基づいて、交差点の位置を決定する。
ステップS402において、ユーザの位置情報から交差点の位置までの距離が予め設定される距離に達した場合に交差点の画像を取得する。
ステップS403において、交差点の画像に対して画像認識を行い、信号灯情報を取得し、音声プロンプトをブロードキャストする。
ここで、交差点の位置とは、ユーザが盲導経路に沿って進むときに通過する1つまたは複数の交差点の位置情報を指す。
例示的に、決定される交差点の位置は交差点の開始位置と終了位置を含む。ステップS101で決定されたユーザのリアルタイム位置情報に基づき、ユーザの位置情報から交差点の開始位置までの距離が予め設定される距離に達した場合に、盲導製品に搭載されたカメラによって交差点のリアルタイム画像を取得し、画像認識技術を用いて交差点の画像中の信号灯情報を認識する。信号灯情報が赤色灯または黄色灯である場合、例えば、「この先は交差点であり、現在の交通信号灯が赤(黄)色灯であるため、現在の位置でお待ちください」という音声プロンプトをブロードキャストして、通行人にその移動を停止するように案内する。信号灯情報が青色灯である場合、例えば、「この先は交差点であり、現在の交通信号灯が青色灯であるため、移動を続行してください」という音声プロンプトをブロードキャストして、通行人が移動を続行するように案内する。
なお、ステップS101により、ユーザの精確な測位を実現するため、予め設定される距離は、メートルレベルまたはデシメートルレベルであり得る。例えば、予め設定される距離は、1メートルであり得る。即ち、ユーザから交差点の開始位置までの距離が1メートルに達する場合、交差点の画像を直ちに取得し、信号灯情報を認識し、停止または前進するようにユーザを案内する。その結果、移動中のユーザが交差点に近づいているか否かを精確に判断し、画像認識技術を用いて、信号灯情報をユーザに知らせることにより、盲人が交差点を安全に通過するように案内することができる。これにより、位置精度が低いために盲人が信号灯情報の音声プロンプトを聞く前に交差点に入ってしまう事態を回避し、タイムリーかつ正確に音声プロンプトをユーザにブロードキャストし、交差点を横断する際のユーザの安全性を高めることができる。
S501において、ユーザのリアルタイム移動方向を取得する。
S502において、盲導経路に基づいて、前記ユーザのリアルタイム移動方向が前記盲導経路から外れた場合、音声プロンプトをブロードキャストする。
例示的に、ステップS501において、地磁気センサにより、ユーザのリアルタイム移動方向を取得することができる。地磁気センサは、地球の磁力を検知するセンサであり、「電子コンパス」とも呼ばれている。地磁気センサは、地球の磁力を検知することで、ユーザの現在の移動方向を検出することができる。また、本開示の他の実施形態では、ジャイロスコープによって、ユーザのリアルタイム移動方向を取得することもできる。
例示的に、ステップS502に、ユーザのリアルタイム移動方向と盲導経路との角度が予め設定される角度に達する場合、ユーザが現在既に盲導経路から外れたと判断し、例えば、「現在の移動方向が盲導経路から外れているため、左(右)に曲がって移動方向を調整してください」などの音声プロンプトをブロードキャストすることで、ユーザが移動方向を調整して盲導経路に従って進むように案内する。
なお、ユーザが特定の道路区間を移動する場合、例えば交差点(交差点の開始位置から終了位置まで)を通過する過程中に、交通状況の複雑さや複数の道路が交差していることなどから、リスクを軽減するためにユーザが厳密に盲導経路に従って進行する必要がある。ユーザの移動方向が盲導経路から外れるか否かを判断することによって、ユーザの実際位置が盲導経路から外れる前にユーザに早期警告を発することで、ユーザが方向を調整して厳密に盲導経路に従って進行するようにプロンプトすることができる。その結果、複雑な道路区間を通過する際のユーザの安全性を高め、危険の発生確率をさらに低減することができる。
ステップS601において、ユーザからの予め設定される範囲内に障害物が検出される場合、音声プロンプトをブロードキャストする。
例示的に、超音波センサにより、プリセット範囲内に障害物があるか否か、つまり、予め設定される範囲内にユーザの障害物となる車両、その他の歩行者、およびその他の物体があるか否かを検出することができる。そして、予め設定される範囲内に障害物を検出する場合、「前方に障害物を検出したので、停止してください(または左右に迂回してください)」などの音声プロンプトをブロードキャストする。また、予め設定される範囲は、実際のニーズに合わせて設定することができ、例えば、2メートルであってもよい。
図7に示すように、該装置は、
北斗衛星データと基地局の差分データを取得し、キャリア位相差分技術を用いてユーザの位置情報を決定する測位モジュール701と、
盲導請求に応じて、現在の位置情報とユーザが入力した目的地情報に基づいて盲導経路を生成する盲導経路生成モジュール702と、
盲導経路に基づいて音声プロンプトをブロードキャストするプロンプトモジュール703と、を備える。
現在の位置情報に応じて、予め設定される地図に開始位置を決定する開始位置決定サブモジュールと、
ユーザが入力した音声に対して音声認識を行い、目的地情報を取得し、予め設定される地図に目的地位置を決定する目的地位置決定サブモジュールと、
開始位置と目的地位置に基づいて、予め設定される地図に盲導経路を決定する盲導経路決定サブモジュールと、を含む。
盲導経路に基づいて、ユーザの位置情報が盲導経路から外れた場合、音声プロンプトをブロードキャストすることにさらに用いる。
盲導経路に基づいて、交差点の位置を決定すること、
ユーザの位置情報から交差点の位置までの距離が予め設定される距離に達した場合に交差点の画像を取得すること、
交差点の画像に対して画像認識を行い、信号灯情報を取得し、音声プロンプトをブロードキャストすることにさらに用いる。
ユーザのリアルタイム移動方向を取得することと、
盲導経路に基づいて、ユーザのリアルタイム移動方向が盲導経路から外れた場合、音声プロンプトをブロードキャストすることにさらに用いる。
ユーザからの予め設定される範囲内に障害物が検出される場合、音声プロンプトをブロードキャストすることにさらに用いる。
本開示は、本開示のいずれか1つの実施形態に記載の盲導装置を備える盲導製品を提供する。
例示的に、本開示の実施形態の盲導製品は、白杖、盲導デバイス、盲導ロボットなどの盲導機能を備える製品であってもよい。
図8に示すように、白杖は、モバイルデータ通信モジュール801、経路計画モジュール802、画像認識モジュール803、RTK測位モジュール804、超音波障害物回避モジュール805、およびインテリジェント音声モジュール806を備える。ここで、モバイルデータ通信モジュール801とRTK測位モジュール804は、前記盲導装置の測位モジュールを構成し、経路計画モジュール802とインテリジェント音声モジュール806は、前記盲導装置の盲導経路生成モジュールを構成し、RTK測位モジュール804、超音波障害物回避モジュール805、画像認識モジュール803及びインテリジェント音声モジュール806は、前記盲導装置のプロンプトモジュールを構成する。
具体的に、白杖は、内部に配置された北斗チップを介して北斗衛星データを受信し、モバイルデータ通信モジュール801を介して同じ時刻における基地局の差分データを受信することができる。そして、北斗衛星データと基地局の差分データをRTK測位モジュール804に同期に送信し、白杖(即ち、ユーザ)の精確な位置情報を得る。
RTK測位モジュール804の精確な位置情報および高精度の地図データに基づいて、開始位置を決定する。インテリジェント音声モジュール806は、盲人による音声を受信、認識して終了位置を取得する。経路計画モジュール802は、開始位置および終了位置に基づいて盲導経路を生成する。
図9は、本開示の実施形態を実施するための例示的な電子デバイス900のブロック図を示す。電子デバイスは、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレードサーバ、大型コンピュータ、および他の適切なコンピュータのような様々な形態のデジタルコンピュータを表すことができる。また、電子デバイスはパーソナルデジタル処理、携帯電話、スマートフォン、装着可能デバイス、およびその他の類似の計算デバイスなどの様々な形態のモバイルデバイスを表すことができる。ここで示した部件、それらの接続と関係、およびそれらの機能は例示的なものに過ぎず、本明細書で説明されたものおよび/または要求される本明細書の実施を制限することは意図されない。
本開示のコンテクストでは、機械可読媒体は、命令実行システム、デバイス、または装置で使用するためのプログラムを含むまたは保存することができる有形媒体であることができる。 機械読み取り可能な媒体は、機械読み取り可能な信号媒体または機械読み取り可能な記憶媒体であってもよい。機械可読媒体には、電子的、磁気的、光学的、電磁的、赤外線的、または半導体的なシステム、デバイス、装置、またはこれらの適切な組み合わせが含まれますが、これらに限定されるものではない。機械読み取り可能な記憶媒体のより具体的な例としては、1つまたは複数のワイヤベースの電気接続、ポータブルコンピュータディスク、ハードディスク、ランダムアクセスメモリ(RAM)、リードオンリーメモリ(ROM)、消去可能なプログラマブルリードオンリーメモリ(EPROMまたはフラッシュメモリ)、光ファイバ、便利なコンパクトディスクリードオンリーメモリ(CD-ROM)、光学メモリ、磁気メモリ、または上記の任意の適切な組み合わせが挙げられる。
上記具体的な実施形態は、本開示の保護範囲に対する限定を構成するものではない。当業者は、設計事項やその他の要因によって、様々な修正、組み合わせ、サブ組み合わせ、および代替が可能であることを理解するべきである。本開示の要旨及び原則内における変更、均等な置換及び改善等は、いずれも本開示の保護範囲に含まれるべきである。
Claims (12)
- 衛星測位データと基地局の差分データを取得し、キャリア位相差分技術を用いてユーザの位置情報を決定することと、
盲導請求に応じて、現在の位置情報とユーザが入力した目的地情報に基づいて盲導経路が生成されることと、
前記盲導経路に基づいて音声プロンプトをブロードキャストすることと、を含み、
現在の位置情報とユーザが入力した目的地情報に基づいて盲導経路を生成することは、
前記現在の位置情報に基づいて、予め設定される地図に開始位置を決定することと、
ユーザが入力した音声に対して音声認識を行い、前記目的地情報を取得し、前記予め設定される地図に目的地位置を決定することと、
パス生成アルゴリズムを用いて、要素間のトポロジ接続関係を通じて前記開始位置と前記目的地位置の間に複数の経路を生成し、前記複数の経路からの最短経路を盲導経路として決定することと、を含み、
前記盲導経路に基づいて音声プロンプトをブロードキャストすることは、
前記盲導経路に基づいて、交差点の位置を決定すること、
前記ユーザの位置情報から前記交差点の位置までの距離が予め設定される距離に達した場合に交差点の画像を取得すること、
前記交差点の画像に対して画像認識を行い、信号灯情報を取得し、音声プロンプトをブロードキャストすることと、を含む
ことを特徴とする盲導方法。 - 前記盲導経路に基づいて音声プロンプトをブロードキャストすることは、
前記盲導経路に基づいて、前記ユーザの位置情報が前記盲導経路から外れた場合、音声プロンプトをブロードキャストすることを含む
ことを特徴とする請求項1に記載の盲導方法。 - 前記盲導経路に基づいて音声プロンプトをブロードキャストすることは、
前記ユーザのリアルタイム移動方向を取得することと、
前記盲導経路に基づいて、前記ユーザのリアルタイム移動方向が前記盲導経路から外れた場合、音声プロンプトをブロードキャストすることと、を含む
ことを特徴とする請求項1に記載の盲導方法。 - 前記ユーザからの予め設定される範囲内に障害物が検出される場合、音声プロンプトをブロードキャストすること、をさらに含む
ことを特徴とする請求項1に記載の盲導方法。 - 衛星測位データと基地局の差分データを取得し、キャリア位相差分技術を用いてユーザの位置情報を決定する測位モジュールと、
盲導請求に応じて、現在の位置情報とユーザが入力した目的地情報に基づいて盲導経路を生成する盲導経路生成モジュールと、
前記盲導経路に基づいて音声プロンプトをブロードキャストするプロンプトモジュールと、を備え、
前記盲導経路生成モジュールは、
前記現在の位置情報に基づいて、予め設定される地図に開始位置を決定する開始位置決定サブモジュールと、
ユーザが入力した音声に対して音声認識を行い、前記目的地情報を取得し、前記予め設定される地図に目的地位置を決定する目的地位置決定サブモジュールと、
パス生成アルゴリズムを用いて、要素間のトポロジ接続関係を通じて前記開始位置と前記目的地位置の間に複数の経路を生成し、前記複数の経路からの最短経路を盲導経路として決定する盲導経路決定サブモジュールと、を備え、
前記プロンプトモジュールは、
前記盲導経路に基づいて、交差点の位置を決定すること、
前記ユーザの位置情報から前記交差点の位置までの距離が予め設定される距離に達した場合に交差点の画像を取得すること、
前記交差点の画像に対して画像認識を行い、信号灯情報を取得し、音声プロンプトをブロードキャストすることにさらに用いる
ことを特徴とする盲導装置。 - 前記プロンプトモジュールは、
前記盲導経路に基づいて、前記ユーザの位置情報が前記盲導経路から外れた場合、音声プロンプトをブロードキャストすることにさらに用いる
ことを特徴とする請求項5に記載の盲導装置。 - 前記プロンプトモジュールは、
前記ユーザのリアルタイム移動方向を取得することと、
前記盲導経路に基づいて、前記ユーザのリアルタイム移動方向が前記盲導経路から外れた場合、音声プロンプトをブロードキャストすることにさらに用いる
ことを特徴とする請求項5に記載の盲導装置。 - 前記プロンプトモジュールは、
前記ユーザからの予め設定される範囲内に障害物が検出される場合、音声プロンプトをブロードキャストすることにさらに用いる
ことを特徴とする請求項5に記載の盲導装置。 - 少なくとも1つのプロセッサと、
前記少なくとも1つのプロセッサに通信接続するメモリとを備え、
前記メモリには、前記少なくとも1つのプロセッサにより実行可能なコマンドが記憶されており、前記コマンドは、前記少なくとも1つのプロセッサに実行されると、前記少なくとも1つのプロセッサに請求項1~請求項4のいずれか1項に記載の盲導方法を実行させる、
ことを特徴とする電子デバイス。 - コンピュータに請求項1~請求項4のいずれか1項に記載の盲導方法を実行させるためのコマンドが記憶される非一時的なコンピュータ可読記憶媒体。
- コンピュータにおいてプロセッサにより実行されると、請求項1~請求項4のいずれか1項に記載の盲導方法を実現することを特徴とするプログラム。
- 請求項5~請求項8のいずれか1項に記載の盲導装置を備えることを特徴とする盲導製品。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110168063.8 | 2021-02-07 | ||
CN202110168063.8A CN112999033A (zh) | 2021-02-07 | 2021-02-07 | 用于导盲的方法、装置、设备、存储介质以及产品 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022006175A JP2022006175A (ja) | 2022-01-12 |
JP7374157B2 true JP7374157B2 (ja) | 2023-11-06 |
Family
ID=76384389
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021166091A Active JP7374157B2 (ja) | 2021-02-07 | 2021-10-08 | 盲導方法、盲導装置、電子デバイス、記憶媒体、プログラム、及び盲導製品 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20220023136A1 (ja) |
JP (1) | JP7374157B2 (ja) |
CN (1) | CN112999033A (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116634377A (zh) | 2020-09-25 | 2023-08-22 | 苹果公司 | 用于跟踪和查找物品的用户界面 |
CN114272090A (zh) * | 2021-12-07 | 2022-04-05 | 浙江时空道宇科技有限公司 | 一种智能导盲眼镜 |
CN114299705B (zh) * | 2021-12-13 | 2023-10-27 | 珠海一微半导体股份有限公司 | 一种导盲机器人的控制方法及导盲机器人 |
CN114608606A (zh) * | 2022-03-22 | 2022-06-10 | 北京瞳新亮科技有限公司 | 基于感知的盲人导航方法和装置 |
CN114875736A (zh) * | 2022-03-31 | 2022-08-09 | 朱世强 | 智能传感提示盲道砖 |
WO2023225129A1 (en) * | 2022-05-17 | 2023-11-23 | Apple Inc. | User interfaces for navigation |
CN118102217A (zh) * | 2024-01-31 | 2024-05-28 | 海南科力千方科技有限公司 | 基于北斗卫星定位和tts框架的人工智能播报系统 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003121193A (ja) | 2001-10-18 | 2003-04-23 | Komatsu Ltd | 移動案内システム、移動案内方法および移動案内プログラム |
JP2003121528A (ja) | 2001-10-10 | 2003-04-23 | Keisoku Joho System Kk | Gps測位装置及び測位方法 |
JP2009288179A (ja) | 2008-05-30 | 2009-12-10 | Pioneer Electronic Corp | 情報案内装置、情報案内方法、情報案内プログラムおよび記録媒体 |
JP2014238349A (ja) | 2013-06-10 | 2014-12-18 | 古野電気株式会社 | 測位装置、情報機器端末、測位システム、測位方法、および測位プログラム |
JP3200734U (ja) | 2015-03-23 | 2015-11-05 | 英男 石原 | 視覚障害者のための携帯ナビゲーションシステム |
JP2016102666A (ja) | 2014-11-27 | 2016-06-02 | 凸版印刷株式会社 | 案内システム及び案内方法 |
CN111308528A (zh) | 2019-12-10 | 2020-06-19 | 哈尔滨工程大学 | 一种北斗/gps紧组合虚拟参考站定位方法 |
CN111743740A (zh) | 2020-06-30 | 2020-10-09 | 平安国际智慧城市科技股份有限公司 | 导盲方法、装置、导盲设备及存储介质 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2914424B2 (ja) * | 1994-08-29 | 1999-06-28 | ソニー株式会社 | 誘導システム |
US20180185232A1 (en) * | 2015-06-19 | 2018-07-05 | Ashkon Namdar | Wearable navigation system for blind or visually impaired persons with wireless assistance |
CN105167967B (zh) * | 2015-09-14 | 2018-04-03 | 深圳市冠旭电子股份有限公司 | 一种导盲方法及系统 |
CN106960601A (zh) * | 2016-01-19 | 2017-07-18 | 法拉第未来公司 | 自动化车辆对进行十字路口穿越的协商系统和方法 |
CN108871340A (zh) * | 2018-06-29 | 2018-11-23 | 合肥信亚达智能科技有限公司 | 一种基于实时路况信息优化导盲方法及系统 |
CN111221017A (zh) * | 2020-02-18 | 2020-06-02 | 神华包神铁路有限责任公司 | 铁鞋的北斗定位方法 |
-
2021
- 2021-02-07 CN CN202110168063.8A patent/CN112999033A/zh active Pending
- 2021-10-03 US US17/492,650 patent/US20220023136A1/en not_active Abandoned
- 2021-10-08 JP JP2021166091A patent/JP7374157B2/ja active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003121528A (ja) | 2001-10-10 | 2003-04-23 | Keisoku Joho System Kk | Gps測位装置及び測位方法 |
JP2003121193A (ja) | 2001-10-18 | 2003-04-23 | Komatsu Ltd | 移動案内システム、移動案内方法および移動案内プログラム |
JP2009288179A (ja) | 2008-05-30 | 2009-12-10 | Pioneer Electronic Corp | 情報案内装置、情報案内方法、情報案内プログラムおよび記録媒体 |
JP2014238349A (ja) | 2013-06-10 | 2014-12-18 | 古野電気株式会社 | 測位装置、情報機器端末、測位システム、測位方法、および測位プログラム |
JP2016102666A (ja) | 2014-11-27 | 2016-06-02 | 凸版印刷株式会社 | 案内システム及び案内方法 |
JP3200734U (ja) | 2015-03-23 | 2015-11-05 | 英男 石原 | 視覚障害者のための携帯ナビゲーションシステム |
CN111308528A (zh) | 2019-12-10 | 2020-06-19 | 哈尔滨工程大学 | 一种北斗/gps紧组合虚拟参考站定位方法 |
CN111743740A (zh) | 2020-06-30 | 2020-10-09 | 平安国际智慧城市科技股份有限公司 | 导盲方法、装置、导盲设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP2022006175A (ja) | 2022-01-12 |
CN112999033A (zh) | 2021-06-22 |
US20220023136A1 (en) | 2022-01-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7374157B2 (ja) | 盲導方法、盲導装置、電子デバイス、記憶媒体、プログラム、及び盲導製品 | |
US20230029160A1 (en) | Apparatus and Methods of Displaying Navigation Instructions | |
US11320836B2 (en) | Algorithm and infrastructure for robust and efficient vehicle localization | |
US12031824B2 (en) | Augmentation of global navigation satellite system based data | |
US20200239023A1 (en) | Operator assistance for autonomous vehicles | |
EP2881710B1 (en) | Camera parameter computation device, navigation system, and camera parameter computation method | |
US20190187715A1 (en) | Non-linear reference line optimization method using piecewise quintic polynomial spiral paths for operating autonomous driving vehicles | |
KR20180088149A (ko) | 차량 경로 가이드 방법 및 장치 | |
US12071156B2 (en) | Planning for occlusions with surfel maps | |
JP2005202678A (ja) | 走行支援装置 | |
WO2022111235A1 (zh) | 导航处理方法、装置及服务侧设备、智能终端、存储介质 | |
RU2763452C1 (ru) | Способ помощи при вождении и устройство помощи при вождении | |
CN103278172B (zh) | 一种路口诱导方法及定位导航设备 | |
Scalvini et al. | Outdoor navigation assistive system based on robust and real-time visual–auditory substitution approach | |
JP2009204392A (ja) | ナビゲーション装置 | |
JP2011174748A (ja) | 地図表示装置、方法およびプログラム | |
Saranya et al. | Campus Navigation and Identifying Current Location through Android Device to Guide Blind People | |
WO2019014852A1 (zh) | 一种导航方法、装置及电子设备 | |
CN112985438A (zh) | 智能导盲杖的定位方法、装置、电子设备及存储介质 | |
KR101343550B1 (ko) | 시각 장애인을 위한 3차원 오디오 렌더링 기반 네비게이션 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211008 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20221019 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20221025 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230119 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20230516 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230915 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20230928 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231017 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231024 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7374157 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |