[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2004109995A - Mount type information presentation device and method, and storage medium - Google Patents

Mount type information presentation device and method, and storage medium Download PDF

Info

Publication number
JP2004109995A
JP2004109995A JP2003292332A JP2003292332A JP2004109995A JP 2004109995 A JP2004109995 A JP 2004109995A JP 2003292332 A JP2003292332 A JP 2003292332A JP 2003292332 A JP2003292332 A JP 2003292332A JP 2004109995 A JP2004109995 A JP 2004109995A
Authority
JP
Japan
Prior art keywords
information
reproduction
user
wearable
presentation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003292332A
Other languages
Japanese (ja)
Inventor
Miwako Doi
土井 美和子
Genso Matsushita
松下 玄宗
Kazuo Sumita
住田 一男
Hideki Hirakawa
平川 秀樹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2003292332A priority Critical patent/JP2004109995A/en
Publication of JP2004109995A publication Critical patent/JP2004109995A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a mount type information presentation device which disables mount type wearable electronic equipment from being used in a hazardous condition. <P>SOLUTION: This mount type information presentation device has an action measuring sensor 2 which monitors the action of a user and a user can receive the presentation of information only in a quiescent state. As a result, the device can be used safely. Moreover, since the device cannot be used unless the user stands still, it never happens that attention of the user becomes distracted by using the device while performing another action and that the user gives trouble to others. <P>COPYRIGHT: (C)2004,JPO

Description

 本願発明は、装着型の電子機器を危険な状態で使用できないようにする装着型情報呈示装置に関する。 発 明 The present invention relates to a wearable information presenting apparatus that prevents a wearable electronic device from being used in a dangerous state.

 近年パーソナルコンピュータの小型化が進み、ノートブック型コンピュータなどを鞄などに入れて持ち歩いて使うスタイルが出現している。
 このようなモバイルコンピュータは、会議などで机上で会議をしながらの議事録作成、あるいは製品の在庫チェックや納入スケジュールの確認、会議の予定を決定する際の参加者の確認などに使われる。また、客先との打ち合わせ後、次の客先への移動中の電車内あるいは喫茶店などで、打ち合わせ結果を記録するために使われる。
In recent years, personal computers have been miniaturized, and a style in which a notebook computer or the like is used while being carried in a bag or the like has appeared.
Such a mobile computer is used for making minutes of a meeting while holding a meeting at a desk in a meeting or the like, checking inventory of products, checking a delivery schedule, and confirming a participant when deciding a meeting schedule. Also, after the meeting with the customer, it is used for recording the result of the meeting on a train or a coffee shop while traveling to the next customer.

 いずれにしてもモバイルコンピュータを用いるには、机やひざの上などに置いて、ディスプレイを見ながらキーボードを打つ体勢、すなわち座った状態でなければならない。 In any case, in order to use a mobile computer, you must be in a position where you can place it on a desk or on your lap and hit the keyboard while looking at the display, that is, in a sitting position.

 これに対し、ハンドフリーで座った状態でなくても使えるコンピュータ(装着型コンピュータあるいはウェアラブルコンピュータ)が大学などで研究され始めている。ウェアラブルコンピュータでは、フェイスマウントディスプレイ(FMD)あるいはヘッドマウントディスプレイ(HMD)と呼ばれる装着型のモニタを利用者の頭部に装着させ、電源,CPU本体を腹部に装着させることで、座ることなく立ったままのの姿勢でディスプレイを見ることができる。さらにウェアラブルコンピュータでは、立ったままだけでなく、歩行しながらでも使用することが可能である。 On the other hand, computers that can be used without sitting in a hands-free state (wearable computers or wearable computers) are beginning to be studied at universities and other places. In a wearable computer, a wearable monitor called a face mount display (FMD) or a head mount display (HMD) is mounted on the user's head, and a power supply and a CPU main body are mounted on the abdomen, thereby standing up without sitting. You can look at the display as it is. Furthermore, a wearable computer can be used not only while standing, but also while walking.

 しかし、実際にはFMDやHMDに表示されている文字などの情報を見ると、目(視覚)の注意がディスプレイに行ってしまい、外部の状況が全く分からなくなってしまうという問題がある。 However, there is a problem that, when actually looking at information such as characters displayed on the FMD or the HMD, attention of the eyes (visuals) is given to the display, and the external situation cannot be understood at all.

 これに音声出力が加わると、耳(聴覚)の注意もコンピュータにとられ、外界の状況が、使用者に届かなってしまうという問題が起こる。
 また、多くのHMDは通常のビデオ信号(NTSC)を入力信号とし、表示できるようになっている。このため、ゲーム専用のTVモニタの代わりにHMDを用いたり、個人専用のTVモニタとしてHMDを用いることも行われている。
When audio output is added to this, the attention of the ear (hearing) is also taken by the computer, and there is a problem that the situation of the outside world does not reach the user.
In addition, many HMDs can display a normal video signal (NTSC) as an input signal. Therefore, an HMD is used instead of a TV monitor dedicated to a game, or an HMD is used as a TV monitor dedicated to an individual.

 一方、DVDなど映像再生機器の小型化が進み、携帯可能なものも出現している。この携帯型の映像再生機器とHMD,イヤホンを組み合わせることで、移動中にも映像を見ることが可能となる。この場合、HMDを見るために視野の注意は奪われ、イヤホンからの音声を聞くために視覚の注意は奪われ、外界から遮断された状態になってしまう。 On the other hand, the size of video playback devices such as DVDs has been reduced, and portable devices have appeared. By combining this portable video playback device with an HMD and earphones, it is possible to watch videos while moving. In this case, the attention of the visual field is deprived to see the HMD, and the visual attention is deprived to hear the sound from the earphone, so that the user is cut off from the outside world.

 また、HMDを用いて横になってTVや映像を見る場合、HMDを装着したまま眠ってしまう可能性もある。 場合 In addition, when watching a TV or an image while lying down using the HMD, there is a possibility that the user sleeps while wearing the HMD.

 装着型のウェアラブルコンピュータなどのように、映像や文字,地図などの情報を呈示する機器においては、歩行中など視野や聴覚を覆うことで、外界から遮断され危険な状態が発生する。つまり、静止状態など安全が確保されているときのみに情報呈示が行われるというような配慮が為されていないという問題がある。 (4) In a device that presents information such as a video, text, and a map, such as a wearable wearable computer, a dangerous state is generated by covering a field of view or hearing while walking, etc., thereby blocking the user from the outside world. That is, there is a problem in that consideration has not been given to information presentation only when safety is ensured, such as in a stationary state.

 また、HMDを装着したまま眠り込んでしまうと、視聴していないのに再生が続き、電力を無駄に消費してしまうという問題が発生する。 Also, if the user falls asleep while wearing the HMD, there is a problem that the reproduction is continued even though the user is not watching and the power is wasted.

 以上のような問題点を解決するために、本願発明は、文字,映像,あるいは音声などの記録されたあるいは受信した再生すべき情報を再生するための再生手段と、利用者が装着可能で、前記再生手段によって再生された情報を呈示するための装着型呈示手段と、この装着型呈示手段を装着している前記使用者の静止,歩行,走行などの身体の活動状態をセンサにより計測し、このセンサの計測結果から前記使用者の危険状態を計測するための危険計測手段と、この危険計測手段の計測結果に基づいて、前記再生手段での再生および前記装着型呈示手段での呈示を制御するための再生呈示制御手段とを有することを特徴とする In order to solve the above problems, the present invention provides a reproducing means for reproducing recorded or received information to be reproduced, such as text, video, or audio, and a user-wearable means. A wearable presentation means for presenting information reproduced by the reproduction means, and a sensor measuring a physical activity state of the user wearing the wearable presentation means, such as resting, walking, or running, Danger measurement means for measuring the danger state of the user from the measurement results of the sensor, and control of reproduction by the reproduction means and presentation by the wearable presentation means based on the measurement results of the danger measurement means. Playback presentation control means for performing

 好ましくは、前記センサは、使用者が覚醒しているかどうかを計測するための覚醒検出手段を有することを特徴とする。
 また、前記危険計測手段は、前記装着型呈示手段を装着している使用者の環境を計測する環境計測手段を有することを特徴とする請求項11記載の装着型情報呈示装置。
Preferably, the sensor has an awakening detection unit for measuring whether or not the user is awake.
The wearable information presenting apparatus according to claim 11, wherein the danger measuring means includes an environment measuring means for measuring an environment of a user wearing the wearable presenting means.

 また、前記環境計測手段は、周囲から使用者への聴覚あるいは視覚への働きかけを検出することを特徴とする。
 また、前記再生呈示制御手段は、前記危険計測手段の計測結果に応じて、視覚野や聴覚野などの確保のため、前記再生手段での再生の停止、前記装着型呈示手段での呈示の停止を行うことを特徴とする。
Further, the environment measuring means detects an action on hearing or vision from the surroundings to the user.
Further, the reproduction presentation control means stops the reproduction by the reproduction means and stops the presentation by the wearable presentation means in order to secure a visual area or an auditory area according to the measurement result of the danger measurement means. Is performed.

 また、前記再生呈示制御手段は、前記危険計測手段の計測結果に応じて、前記再生手段での情報の再生を停止するとき、前記停止箇所を記録し、前記再生手段での情報の再生を再開するとき、記録した前記停止箇所から情報の再生を再開することを特徴とする。 Further, the reproduction presenting control means, when stopping the reproduction of the information by the reproducing means, according to the measurement result of the danger measuring means, records the stop location and restarts the reproduction of the information by the reproducing means. In this case, the reproduction of information is restarted from the recorded stop point.

 本願発明によれば、装着型情報呈示装置において、静止状態など安全が確保されているときのみに情報呈示が行われるというような配慮を施すことができる。
また、周囲の情報をも的確に知ることができる。
ADVANTAGE OF THE INVENTION According to this invention, in a wearable information presentation apparatus, consideration can be given that information presentation is performed only when safety is ensured, such as a stationary state.
In addition, the surrounding information can be accurately known.

 [実施例1]
 図1に第1の実施例の概略構成図を示す。装着型呈示部3は、文字や地図あるいは映像などの視覚情報を表示するために、HMDやFMDのように利用者の頭部に装着あるいは腕時計のように腕に装着する装着型のディスプレイと、音楽や音声などの聴覚情報を出力するためのイヤホンから構成される。
[Example 1]
FIG. 1 shows a schematic configuration diagram of the first embodiment. The wearable presentation unit 3 is mounted on a user's head like an HMD or an FMD or worn on an arm like a wristwatch to display visual information such as a character, a map, or a video, and a wearable display. It is composed of earphones for outputting auditory information such as music and voice.

 記憶部5は、この装着型呈示部3で呈示する文字や地図あるいは映像などの視覚情報や、音楽や音声などの聴覚情報を格納している記憶媒体(例えば、DVDやCD−ROMのように映像や音楽などの記憶媒体)を挿入するためのものである。再生部6は、記憶部5にセットされた記憶媒体から情報を再生する。 The storage unit 5 is a storage medium (for example, a DVD or a CD-ROM such as a DVD or a CD-ROM) that stores visual information such as characters, maps, and videos presented by the wearable presentation unit 3 and auditory information such as music and voice. Storage media such as video and music). The reproducing unit 6 reproduces information from the storage medium set in the storage unit 5.

 行動計測センサ2は、使用者が安全に情報提供を受けられる状態(電車に乗っている,ホームやバス停に立っているなどの歩行せずに停止している状態)であることを検出するための加速度センサ,接触センサなどで構成される。入力部1は、電源のON/OFFなどの指示を行うためのボタン、あるいは音声入力で指示を行うためのマイクなどで構成される。 The behavior measurement sensor 2 detects that the user is in a state where the user can safely receive information (a state where the user is stopped without walking, such as being on a train, standing at a platform or a bus stop). It consists of an acceleration sensor and a contact sensor. The input unit 1 includes a button for instructing ON / OFF of the power supply, a microphone for instructing by voice input, and the like.

 再生呈示制御部4は、行動計測センサ2の計測結果に応じて、静止状態でないときはこの再生部6の再生を停止したり、装着型呈示部3での呈示を中止などを行う。
 図2は、装着型呈示部3としてFMD20とイヤホン21、入力部1としてマイク22、再生部6や記憶部5,行動計測センサ2,再生呈示制御部4が一体になった筐体23を胸ポケットに装着した状態を示す図である。
The reproduction presentation control unit 4 stops the reproduction of the reproduction unit 6 when it is not in a stationary state and stops the presentation by the wearable presentation unit 3 according to the measurement result of the behavior measurement sensor 2.
FIG. 2 shows a case 23 in which an FMD 20 and an earphone 21 as a wearable presentation unit 3, a microphone 22 as an input unit 1, a reproduction unit 6, a storage unit 5, a behavior measurement sensor 2, and a reproduction presentation control unit 4 are integrated. It is a figure showing the state attached to a pocket.

 同様に図3は、FMD20の代わりに腕時計型のディスプレイ24を装着した状態を示す図である。
 図4は、DVDやCD−ROMなどの記憶媒体から情報を得る代わりに、無線などの通信手段により外部と情報の送受信を行う場合の構成図である。図1の記憶部5の代わりに送受信部7を有している点が異なり、あとは図1と同じ構成である。
Similarly, FIG. 3 is a diagram showing a state in which a wristwatch-type display 24 is mounted instead of the FMD 20.
FIG. 4 is a configuration diagram in the case of transmitting and receiving information to and from the outside by a communication means such as wireless instead of obtaining information from a storage medium such as a DVD or a CD-ROM. The difference is that a transmission / reception unit 7 is provided instead of the storage unit 5 in FIG.

 図5は、再生呈示制御部4での処理の流れを示す図である。以下、この流れ図に沿って説明する。まず、再生呈示部4は、行動計測センサ2が取得したデータを読み取る(ステップS501)。行動計測センサ2は、例えば靴の裏に設置された接触センサのデータを用いて、 FIG. 5 is a diagram showing a flow of processing in the reproduction presentation control unit 4. Hereinafter, description will be given along this flowchart. First, the reproduction presenting unit 4 reads data acquired by the behavior measurement sensor 2 (step S501). The behavior measurement sensor 2 uses, for example, data of a contact sensor installed on the back of a shoe,

「if 接触と非接触状態が周期的
 then 歩行/走行
 else 静止」
のような規則に従って、静止か否かを計測する。
 または、衣服の袖の部分やズボンの裾の部分、あるいは靴に装着された加速度センサのデータを用いて、
「if 加速度が変化
 then 歩行/走行
 else 静止」
のような規則に従い、静止状態と歩行、走行状態を計測することができる。
 さらに、精度を高めるためには接触と非接触状態が周期的に続く時間や、加速度の変化の度合いや変化時間など、パラメータを増すことも可能である。一定時間静止が続かない場合静止状態と見なさないようにすることで、単にちょっと立ち止まっただけで、急に再生が始まったりする危険性を防ぐことができる。
"If contact and non-contact state are periodic then walking / running else stationary"
According to the rule as described above, whether or not the vehicle is stationary is measured.
Or, using the data of the acceleration sensor attached to the sleeve part of the clothes, the hem part of the pants, or the shoes,
"If acceleration changes then walking / running else stop"
According to such a rule, the stationary state, the walking state, and the running state can be measured.
Further, in order to increase the accuracy, it is also possible to increase parameters such as the time during which the contact and non-contact states are periodically maintained, the degree of change in acceleration, and the change time. If the stationary state is not maintained for a certain period of time, it is not regarded as a stationary state, so that the risk of suddenly starting reproduction by simply stopping a little can be prevented.

 再生制御部4は、行動計測センサ2が取得したデータが静止状態か否か判別する(ステップS502)。静止していなければ、次に情報が再生中か否か判別する(ステップS503)。歩行や走行の状態でも情報が再生されていなければ問題ないので、そのまま行動計測センサ2によるデータ取得を続行する(S501)。 The reproduction control unit 4 determines whether the data acquired by the behavior measurement sensor 2 is in a stationary state (Step S502). If it is not stationary, it is next determined whether or not information is being reproduced (step S503). There is no problem if the information is not reproduced even in the state of walking or running, so the data acquisition by the behavior measurement sensor 2 is continued as it is (S501).

 情報の再生中であれば、歩行や走行状態での情報呈示は危険であるので情報の再生を中止する。のちに、利用者が停止した個所から抜け落ちがなく情報を再生できるように、この停止個所を記録しておく(ステップS504)。 で あ れ ば If the information is being reproduced, stop the reproduction of the information because it is dangerous to present the information while walking or running. Thereafter, the stop point is recorded so that the user can reproduce the information without dropping out of the stop point (step S504).

 図4の構成のように、DVDやCD−ROMのような記憶媒体から情報を読み出し再生するのではなく、送受信部7が受信した情報を再生する場合、停止個所だけでなく該当情報も記録する。これにより、再度情報を使用者の自宅あるいはサービスセンターや情報プロバイダより読み出すときに、該当情報を容易に識別し、停止個所より再開することが可能となる。 As in the configuration shown in FIG. 4, instead of reading and reproducing information from a storage medium such as a DVD or a CD-ROM, when reproducing the information received by the transmission / reception unit 7, the corresponding information is recorded in addition to the stop point. . Thus, when the information is read again from the user's home, a service center, or an information provider, the information can be easily identified and the information can be restarted from the stop point.

 次に、イヤホンから流れる音声,音楽を停止し、図2のような頭部への装着型の表示手段を用いている場合には、それらHMDやFMDなどの呈示を停止するとともに、表示画面を見やすくするため非透過モードであるHMDやFMDを、透過モードに変更して外界が見えるようにする(ステップS505)。また、図3のように腕部に装着型の表示手段の場合には、単に表示を停止するだけでよい。 Next, the sound and music flowing from the earphones are stopped, and when the head-mounted display means as shown in FIG. 2 is used, the presentation of the HMD or FMD is stopped, and the display screen is displayed. The HMD or FMD, which is in the non-transmissive mode, is changed to the transmissive mode so that the outside world can be seen for easy viewing (step S505). Further, in the case of the display means mounted on the arm as shown in FIG. 3, the display may be simply stopped.

 その後、再度行動計測センサ2からのデータの読み出しを続ける(ステップS501)。利用者の状態が静止に戻ったときには、再生が可能なので、再生を開始する。そのときには、再生中であるかを判断し(ステップS506)、再生中でない場合はステップS504で記録した停止個所があるか否かを判別し(ステップS507)、停止個所があればその個所から再生する(ステップS508)再生時には、イヤホンから音声や音楽を流し、さらにHMDやFMDは表示される情報を見やすくするために、非透過モードに変更する。 (4) Thereafter, the reading of data from the behavior measurement sensor 2 is continued again (step S501). When the state of the user returns to the stationary state, the reproduction is possible, and the reproduction is started. At this time, it is determined whether or not the reproduction is being performed (step S506). If the reproduction is not being performed, it is determined whether or not there is a stop position recorded in step S504 (step S507). (Step S508) At the time of reproduction, sound or music is played from the earphone, and the HMD or FMD is changed to the non-transparent mode in order to make the displayed information easier to see.

 図4の構成のように、DVDやCD−ROMのような記憶媒体から情報を読み出し再生するのではなく、送受信部7が受信した情報を再生する構成では、再生時に送受信部7から再生すべき情報の識別記号と停止個所を、使用者の自宅あるいはサービスセンターや情報プロバイダに送り、該当情報を該当個所より受信し再生するものである。 In the configuration in which the information received and received by the transmission / reception unit 7 is not reproduced and read out from a storage medium such as a DVD or a CD-ROM as in the configuration of FIG. The identification code of the information and the stop point are sent to the user's home, service center, or information provider, and the corresponding information is received from the corresponding point and reproduced.

 ステップS508で再生を開始するときには、使用者に再生を開始するか否かの確認を音声にて知らせることも可能である。所定時間経っても、ユーザから再生不可の指示がなければ、そのまま再生を開始する。再生不可の指示がユーザからあれば、再生をしないようにする。これにより、単に立ち止まっただけの時に、むやみに情報を再生し始めることを防ぐことができる。 When the reproduction is started in step S508, it is also possible to notify the user by voice of confirmation of whether to start the reproduction. If the user does not give an instruction to disable reproduction even after the predetermined time has elapsed, the reproduction is started as it is. If there is an instruction from the user to disable reproduction, the reproduction is not performed. Thus, it is possible to prevent the information from being unnecessarily started to be reproduced when the user simply stops.

 また、DVDやCD−ROMなどの記憶媒体から読み出して再生を行っている場合では、記憶されている情報の最後で(ステップS509)終了する。続けて再生するリピート機能になっている場合、情報の再生を続行し、行動計測センサからのデータ取得を続ける(ステップS501)。 {Circle around (4)} When reading from a storage medium such as a DVD or CD-ROM for reproduction, the process ends at the end of the stored information (step S509). When the repeat function for continuous reproduction is set, reproduction of information is continued, and data acquisition from the behavior measurement sensor is continued (step S501).

 また、新規の再生であれば(ステップS507)、新規に再生を行う(ステップS510)。このとき、頭部装着型の表示手段(HMDなど)を用いている場合には、ディスプレイの透過モードから非透過モードにするなどの制御を行うことはステップS508と同様である。 If it is a new reproduction (step S507), a new reproduction is performed (step S510). At this time, when a head-mounted display unit (such as an HMD) is used, control such as changing the display from the transmission mode to the non-transmission mode is performed in the same manner as in step S508.

 図6は実施例1の変形例の処理の流れ図を示す。図5とは、ステップS503とS505の代わりに、ステップS511があり、ステップS507の代わりにステップS513、ステップS508の代わりにステップS514がある点で異なっている。 FIG. 6 is a flowchart of a process according to a modification of the first embodiment. 5 is different from FIG. 5 in that step S511 is provided instead of steps S503 and S505, step S513 is provided instead of step S507, and step S514 is provided instead of step S508.

 図6の変形例は、図2のような頭部装着型の表示手段(HMDやFMDなど)を用いて静止状態でないときに、単に表示を停止する代わりに表示位置をユーザが周囲の状況を認識するのに邪魔にならない位置つまり注視野から周辺視野に移動することで対処する。 In the modification of FIG. 6, when the user is not in a stationary state using a head-mounted display device (HMD, FMD, or the like) as shown in FIG. 2, the user can change the display position instead of simply stopping the display. The problem is dealt with by moving from a position out of the way of recognition, that is, from the gaze field to the peripheral field.

 ステップS503では、静止状態でなければ情報の再生を停止し、ステップS505でHMDやFMDなどの表示装置への表示を取りやめる処理を行っていたが、変形例におけるステップS511では、表示を取りやめるのではなく、ユーザが物体を注視する際の注視野(視野角,約20度)への表示をやめ、その代わりに注視の邪魔にならない周辺視野に表示を移動するものである。このとき外界が見えるように非透過モードから透過モードへの切替えも行う。 In step S503, the reproduction of the information is stopped if it is not in the stationary state, and the process of canceling the display on the display device such as the HMD or the FMD in step S505 is performed. Instead, the display in the field of view (viewing angle, about 20 degrees) when the user gazes at the object is stopped, and instead, the display is moved to a peripheral field of view that does not disturb the gaze. At this time, switching from the non-transmissive mode to the transmissive mode is also performed so that the outside world can be seen.

 また、逆に静止状態になって再生を再開するときは、周辺視野に表示されているか否か判別する(ステップS513)。周辺視野に表示されていれば再生中か否か判別し(ステップS506)、注視野に表示位置を移動する(ステップS514)。 {Circle around (5)} On the other hand, when the reproduction is resumed after the stationary state, it is determined whether or not it is displayed in the peripheral visual field (step S513). If it is displayed in the peripheral field of view, it is determined whether or not reproduction is being performed (step S506), and the display position is moved to the gazing field (step S514).

 図7は、他の変形例の処理の流れ図である。図5のステップS502の静止状態か否か判別する処理の代わりに、ステップS512として、覚醒しているか否かを判別する処理が入っている。ここでの行動計測センサ2は加速度センサや接触センサの代わりにHMDやFMDに取り付けられた赤外センサを用いて、ユーザの目の動きを計測する。単純には赤外センサにより、目玉が検出でなければ目をつぶっている、つまり眠っている(非覚醒状態)と判断する(ステップS512)。 FIG. 7 is a flowchart of a process according to another modification. Instead of the process of determining whether or not the vehicle is in the stationary state in step S502 of FIG. 5, a process of determining whether or not the user is awake is included as step S512. The action measurement sensor 2 here uses an infrared sensor attached to the HMD or FMD instead of the acceleration sensor or the contact sensor to measure the movement of the user's eyes. If the eyeball is simply not detected by the infrared sensor, it is determined that the eyes are closed, that is, the subject is sleeping (non-awake state) (step S512).

 非覚醒状態であれば眠っているので、情報を呈示するのは電力消費の点でも無駄が多いので、図5の静止状態と同様に再生を停止する処理を行う。
 [実施例1の効果]
 以上のように本願発明によれば、ユーザは静止状態でのみ情報の呈示を受けることができるので、装着型情報呈示装置を安全に使用することができる。また、静止しないと使えないので、他の動作をしながら使用することで注意が散漫になり、他者に迷惑を及ぼすこともないので、社会的にも装着型情報呈示装置の利用を容認してもらうのに、大きな効果を発揮する。
In the non-awakening state, the user is asleep, and presenting information is wasteful in terms of power consumption. Therefore, a process of stopping reproduction is performed in the same manner as in the stationary state in FIG.
[Effect of Embodiment 1]
As described above, according to the present invention, since the user can receive the information only in the stationary state, the wearable information presenting device can be used safely. Also, since it cannot be used unless it is stationary, using it while performing other operations will be distracting and will not bother others, so socially accept the use of the wearable information presentation device. It has a great effect on having it.

 [実施例2]
実施例1では、ユーザの行動を計測してその状態に応じて、情報の再生,呈示の制御を行うことで、ユーザが危険か状態で装着型情報呈示装置を使用することを防いでいた。
[Example 2]
In the first embodiment, by measuring the behavior of the user and controlling the reproduction and presentation of the information in accordance with the state, the user is prevented from using the wearable information presentation device in a dangerous state.

 しかし、実際にはユーザが歩行や走行せずに静止していたとしても、必ずしも安全ではない。例えば、街頭で静止していても、そばを車が猛スピードで通り過ぎようとしているのを気づかなければ危険である。 However, even if the user is actually stationary without walking or running, it is not always safe. For example, even if you are stationary on the street, it is dangerous if you do not notice a car passing by at a very high speed.

 この実施例2ではこのような問題点を解決するものである。実施例1ではユーザ自身の状態を検知する行動計測センサ2を用いていたが、ユーザの環境を検知するセンサなどを用いて環境を検知し、ユーザに注意を促すような手段は具備していなかった。実施例2では、このようなユーザの環境を検知する手段を有するものである。 In the second embodiment, such a problem is solved. In the first embodiment, the behavior measurement sensor 2 that detects the state of the user himself is used. However, there is no means for detecting the environment using a sensor or the like that detects the environment of the user and calling the user's attention. Was. In the second embodiment, a means for detecting such a user environment is provided.

 図8は、この実施例2の概略構成図である。実施例1の入力部1に代わってユーザの音声だけでなく、外界の音情報の入力を行うための音情報入力部10と、ユーザの表情や外界の映像情報を入力を行うための映像情報入力部9とを有している。 FIG. 8 is a schematic configuration diagram of the second embodiment. A sound information input unit 10 for inputting not only user's voice but also external sound information in place of the input unit 1 of the first embodiment, and video information for inputting a user's facial expression and external video information. And an input unit 9.

 音情報入力部10は、例えば図2や図3の使用イメージ図のように、マイクのヘッドセットから音声認識のための入力と、周囲の音情報を入力する。映像入力部9は、CCDなどの小型カメラで例えば図2のFMDのフレーム部の前面と後面に実装し、ユーザの前面と後面を撮像する。小型カメラが撮像する画像は、静止画や動画の両方が可能である。 The sound information input unit 10 inputs an input for voice recognition from a headset of a microphone and surrounding sound information, for example, as shown in a usage image diagram of FIGS. 2 and 3. The image input unit 9 is mounted on the front and rear surfaces of the frame unit of the FMD in FIG. 2 by a small camera such as a CCD, and captures images of the front and rear surfaces of the user. Images captured by the small camera can be both still images and moving images.

 ただし、動画の場合には環境情報分析部8において、解析の対象となる動画像を保存しておくために容量の大きなフレームメモリが必要となる。しかし、大きなフレームメモリをもつことは消費電力の増大につながる。消費電力の増大を防ぐために、動画のほかに10秒に1枚の速度で撮像された静止画を用いることも可能である。 However, in the case of a moving image, a large-capacity frame memory is required in the environment information analysis unit 8 to store a moving image to be analyzed. However, having a large frame memory leads to an increase in power consumption. In order to prevent an increase in power consumption, it is also possible to use a still image captured at one speed per 10 seconds in addition to a moving image.

 環境情報分析部8は、音情報入力部10と映像入力部9から入力された音情報や映像情報を解析し、危険な状態にあるか否か分析するものである。
 図10は、実施例2の変形例の概略構成図である。図8に示す実施例2の構成に、ユーザ自身の行動状態を検知するための行動計測センサ2を追加したものである。このような構成にすることで、ユーザには環境情報分析部8と行動計測センサ2の双方からの状態を知らせることができるので、二重に安全機構が働くようになっている。
The environment information analysis unit 8 analyzes the sound information and the video information input from the sound information input unit 10 and the video input unit 9 and analyzes whether or not there is a dangerous state.
FIG. 10 is a schematic configuration diagram of a modification of the second embodiment. The behavior measurement sensor 2 for detecting the behavior state of the user himself is added to the configuration of the second embodiment shown in FIG. With such a configuration, the user can be informed of the state from both the environmental information analysis unit 8 and the behavior measurement sensor 2, so that the safety mechanism works double.

 図9は、図8での構成における環境情報分析部8と再生呈示制御部4の処理の流れのうち、実施例1と異なる部分を記載したものである。まず、再生が中断されたか否かを示す再生中断フラグIを初期化(I=0)する(ステップS901)。続いて、映像情報入力部9と音情報入力部10からの入力情報を読み取る(ステップS902)。 FIG. 9 illustrates a part of the processing flow of the environment information analysis unit 8 and the reproduction / presentation control unit 4 in the configuration of FIG. 8 which is different from that of the first embodiment. First, a reproduction interruption flag I indicating whether or not reproduction has been interrupted is initialized (I = 0) (step S901). Subsequently, input information from the video information input unit 9 and the sound information input unit 10 is read (step S902).

 次に、環境情報分析部8ではこの入力情報の分析を行う。入力情報の分析は、危険を察知すること、ユーザに外部からの接触を知らせることを目的とするものである。危険を察知するためには、情報再生中にユーザの周囲で、車の急ブレーキなどの大きな音や車が急接近しているなどの音を検知し、情報の再生を中止し危険として検知した音や映像をユーザに知らせることが必要となる。 Next, the environmental information analysis unit 8 analyzes the input information. The analysis of the input information is intended to detect danger and to notify the user of external contact. In order to detect the danger, a loud noise such as a sudden braking of a car or a sound such as a sudden approach of a car was detected around the user during the information reproduction, and the reproduction of the information was stopped and detected as danger. It is necessary to notify the user of sound and video.

 一方、外部からの接触とは、例えば「XX駅」で下車予定の車中において、情報を再生していて「XX駅」に到着したことを知りたい場合、「XX駅」という車中あるいは駅でのアナウンスを認識して知らせるようなことを想定している。 On the other hand, the contact from the outside means, for example, in a car scheduled to get off at "XX station", when information is being reproduced and it is desired to know that the user has arrived at "XX station". It is supposed to recognize and announce the announcement in.

あるいは、情報再生中に知人が近づいてきたら、その顔を認識してユーザに知らせることも外部からの接触の検知に相当する。
 ステップS903までは、以上のような危険や外部からの接触検知の有無を探るために、入力された音情報と映像情報に関しての解析を行う。とりあえず図9は、危険を察知するための解析処理を当てた流れ図になっている。ここでは簡単のために、騒音量(dB値)の大きさなどをまとめて音情報変化値Dsとしている。
Alternatively, when an acquaintance approaches during information reproduction, recognizing the face and informing the user of the information also corresponds to detection of contact from outside.
Until step S903, analysis is performed on the input sound information and video information in order to search for the dangers as described above and the presence or absence of external contact detection. FIG. 9 is a flowchart to which an analysis process for detecting danger has been applied. Here, for simplicity, the magnitude of the noise amount (dB value) and the like are collectively referred to as a sound information change value Ds.

 つまり、非常に大きな音がして危険が迫っているというときには、騒音値の変化Dsがある閾値αを越えたか否かを判定する。
 また、急速に車が接近している場合を検知するには、例えば動きの変化を示すオプティカルフローのベクトルの長さを求める。これが一つの映像情報変化値Diとなる。つまり、所定の速さ以上で近づく物体があるか否かを映像情報変化値Diがある閾値βを越えたか否かで判定する。
That is, when it is determined that the danger is imminent due to a very loud sound, it is determined whether or not the change Ds in the noise value exceeds a certain threshold α.
In order to detect the case where a car is approaching rapidly, for example, the length of an optical flow vector indicating a change in motion is obtained. This is one video information change value Di. That is, it is determined whether or not there is an object approaching at a predetermined speed or more based on whether or not the video information change value Di exceeds a certain threshold β.

 ステップS904からS906では、ステップS903で算出した変化値DsとDiに基づいた判定を行う。ステップS904では、音情報変化値Dsも映像情報変化値Diもともに閾値αとβを越えていないかどうかを判定する。変化値DsとDiが閾値α,βともに越えていなければ、ステップS907で再生中断フラグIをみて、何かの危険を感知して再生が中断されたものであるか否かを判定する。 In steps S904 to S906, a determination is made based on the change values Ds and Di calculated in step S903. In step S904, it is determined whether both the sound information change value Ds and the video information change value Di do not exceed the threshold values α and β. If the change values Ds and Di do not exceed the thresholds α and β, the reproduction interruption flag I is checked in step S907 to determine whether or not the reproduction has been interrupted by detecting some danger.

 再生が中断されているのでなければ、そのままの状態をつづければよいので、そのままステップS902に戻り、外部情報の読み出しを続ける。再生が中断されたのであれば、再生を再開し(ステップS908)、再生中断フラグを戻すために初期化のステップ(S901)に戻る。 If the reproduction is not interrupted, the state may be kept as it is, and the process returns to step S902 to continue reading external information. If the reproduction has been interrupted, the reproduction is restarted (step S908), and the process returns to the initialization step (S901) to return the reproduction interruption flag.

 音情報変化値Dsも映像情報変化値Diもともに閾値α,βを越えていれば、大変な危険が迫っている状態である(ステップS905)。従って、ステップS909では即座に再生と表示を停止する。ここで、再生中断フラグIを1にする(ステップS909)。 If both the sound information change value Ds and the video information change value Di exceed the threshold values α and β, it is a state in which a great danger is imminent (step S905). Therefore, the reproduction and display are immediately stopped in step S909. Here, the reproduction interruption flag I is set to 1 (step S909).

 また、検知した音をユーザにイヤホンで知らせるとともに、危険が迫っていることを知らせるように例えば、警報を鳴らし、イヤホンを通じて知らせる。
 ステップS906では、音情報変化値Dsのみが閾値αを越え、映像情報変化値Diが閾値βを越えていない場合、つまり、近くで大きな音はしているが、車が高速で近づくなどの映像としての危険は検知されていないことを判定する。この場合は、再生と表示を停止し、再生中断フラグIを2にセットする(ステップS910)。また、注意音を出してユーザに注意を喚起し、近くで発生している音を聞かせる。
In addition, the detected sound is notified to the user through an earphone, and an alarm is sounded to notify that the danger is imminent, and the user is notified through the earphone.
In step S906, when only the sound information change value Ds exceeds the threshold value α and the video information change value Di does not exceed the threshold value β, that is, an image such as a loud sound nearby but a car approaching at high speed. It is determined that no danger has been detected. In this case, the reproduction and display are stopped, and the reproduction interruption flag I is set to 2 (step S910). In addition, a warning sound is issued to call attention to the user, and a sound generated nearby is heard.

 ステップS911では、音としての危険はないが、映像としての危険があるか否かを判断する。この場合は、再生中断フラグIを3にセットし、ユーザに映像として危険が迫っていることを示す注意音を呈示する。 In step S911, it is determined whether there is no danger as a sound but there is a danger as a video. In this case, the reproduction interruption flag I is set to 3 and the user is presented with a cautionary sound indicating that the danger is imminent.

 図9が危険を検知し、警告するための処理の流れであったが、図11は外部からの接触を検知し、ユーザに呈示するための処理の流れ図である。認識したい音情報としては、例えば図12に示すように、電車から降りる降車駅名や、他人から呼ばれる自分の名前などがある。認識したい映像情報としては、例えば知人の顔などがある。 FIG. 9 shows the flow of processing for detecting danger and issuing a warning, whereas FIG. 11 shows the flow of processing for detecting external contact and presenting it to the user. As the sound information to be recognized, for example, as shown in FIG. 12, there are a name of a getting-off station getting off from a train and a name of oneself called by others. The video information to be recognized includes, for example, the face of an acquaintance.

 ステップS912では、図12にあるような認識すべき対象の情報とマッチするか否かを解析する。ここでは簡単のため認識した対象の個数をカウントし、それに応じた処理を行う。 ステップS912で算出した音情報認識度Rsと映像情報認識度Riに基づいた判定を行う。ステップS913では、音情報認識度Rsも映像情報認識度Riもともに閾値γとδを越えていないかどうかを判定する。認識度RsとRiが閾値γ,δともに越えていなければ、ステップS907で再生中断フラグIをみて、認識対象を感知して再生が中断されたものであるか否かを判定する。 In step S912, it is analyzed whether or not the information matches the information of the target to be recognized as shown in FIG. Here, for the sake of simplicity, the number of recognized objects is counted, and processing corresponding to the number is performed.判定 A determination is made based on the sound information recognition degree Rs and the video information recognition degree Ri calculated in step S912. In step S913, it is determined whether both the sound information recognition degree Rs and the video information recognition degree Ri do not exceed the thresholds γ and δ. If the recognition degrees Rs and Ri do not exceed the threshold values γ and δ, the reproduction interruption flag I is checked in step S907 to determine whether or not the recognition target has been detected and reproduction has been interrupted.

 再生が中断されているのでなければ、そのままの状態をつづければよいので、そのままステップS902に戻り、外部情報の読み出しを続ける。再生が中断されたのであれば、再生を再開し(ステップS908)、再生中断フラグを戻すために初期化のステップ(S901)に戻る。 If the reproduction is not interrupted, the state may be kept as it is, and the process returns to step S902 to continue reading external information. If the reproduction has been interrupted, the reproduction is restarted (step S908), and the process returns to the initialization step (S901) to return the reproduction interruption flag.

 音情報認識度Rsも映像情報認識度Riもともに閾値γ,δを越えていれば、音と映像ともに認識した状態である(ステップS914)。従って、ステップS916では即座に再生と表示を停止する。ここで、再生中断フラグIを1にする(ステップS916)。 も If both the sound information recognition degree Rs and the video information recognition degree Ri exceed the threshold values γ and δ, both the sound and the image are recognized (step S914). Therefore, the reproduction and display are immediately stopped in step S916. Here, the reproduction interruption flag I is set to 1 (step S916).

 また、検知した音をユーザにイヤホンで知らせるとともに、危険が迫っていることを知らせるように例えば、警報を鳴らし、イヤホンを通じて知らせる。
 ステップS915では、音情報認識度Rsのみが閾値γを越え、映像情報認識度Riが閾値δを越えていない場合、つまり、近くで認識すべき音はしているが、映像としては認識されていないことを判定する。この場合は、再生と表示を停止し、再生中断フラグIを2にセットする(ステップS917)。また、注意音を出してユーザに注意を喚起し、近くで発生している音を聞かせる。
In addition, the detected sound is notified to the user through an earphone, and an alarm is sounded to notify that the danger is imminent, and the user is notified through the earphone.
In step S915, when only the sound information recognition degree Rs exceeds the threshold value γ and the video information recognition degree Ri does not exceed the threshold value δ, that is, a sound to be recognized nearby is present, but is recognized as a video. It is determined that there is not. In this case, the reproduction and display are stopped, and the reproduction interruption flag I is set to 2 (step S917). In addition, a warning sound is issued to call attention to the user, and a sound generated nearby is heard.

 判定結果がそうであれば、ユーザに注意を促して認識した音(この場合は車掌による車内放送など)をユーザに聞かせる。これにより、ユーザは目的の駅に着いたことを知ることができるので、情報の再生に夢中になって乗り過ごすことを防げる。 (4) If the result of the determination is yes, the user is alerted and the recognized sound (in this case, the in-vehicle broadcast by the conductor) is heard to the user. This allows the user to know that he or she has arrived at the target station, thereby preventing the user from being absorbed in reproducing the information and passing by.

 また、ここでは駅名のアナウンスの認識により、目的の駅をユーザに通知することを示しているが、例えば記憶部5に記憶されたユーザのスケジュール(PIM:personal information manager)の情報を用いて、さらに正確な通知を行うことも可能である。 ステップS917では、音としての認識はないが、対象の映像を認識したか否かを判断する。この場合は、再生中断フラグIを3にセットし、ユーザに対象の映像を認識したことを示す注意音を呈示する。 Here, it is shown that the user is notified of the target station by recognizing the announcement of the station name. For example, using the information of the user's schedule (PIM: personal information manager) stored in the storage unit 5, It is also possible to give a more accurate notification.で は In step S917, it is determined whether or not the target video has been recognized although there is no recognition as sound. In this case, the reproduction interruption flag I is set to 3 and the user is presented with a caution sound indicating that the target video has been recognized.

 [実施例2の効果]
 実施例2によれば、ユーザは周囲の音や映像情報を的確に知ることができるので、環境に融合した使い勝手を得ることができる。
 [記憶媒体による本願発明の実現]
 また、本願発明の実施例における処理をコンピュータで実行可能なプログラムで実現し、このプログラムをコンピュータで読み取り可能な記憶媒体として実現することも可能である。
[Effect of Embodiment 2]
According to the second embodiment, since the user can accurately know the surrounding sound and video information, it is possible to obtain usability integrated with the environment.
[Realization of the present invention by a storage medium]
Further, the processing in the embodiment of the present invention can be realized by a computer-executable program, and the program can be realized as a computer-readable storage medium.

 なお、本願発明における記憶媒体としては、磁気ディスク、フロッピー(登録商標)、ハードディスク、光ディスク(CD−ROM,CD−R,DVD等)、光磁気ディスク(MO等)、半導体メモリ等、プログラムを記憶でき、かつコンピュータが読み取り可能な記憶媒体であれば、その記憶形式は何れの形態であってもよい。 The storage medium in the present invention stores a program such as a magnetic disk, a floppy (registered trademark), a hard disk, an optical disk (CD-ROM, CD-R, DVD, etc.), a magneto-optical disk (MO, etc.), a semiconductor memory, etc. Any storage medium that can be read by a computer and that can be read by a computer may be used.

 また、記憶媒体からコンピュータにインストールされたプログラムの指示に基づきコンピュータ上で稼動しているOS(オペレーションシステム)や、データベース管理ソフト、ネットワーク等のMW(ミドルウェア)等が本実施形態を実現するための各処理の一部を実行してもよい。 An OS (operation system) running on the computer based on instructions of a program installed in the computer from a storage medium, database management software, MW (middleware) such as a network, etc., for realizing the present embodiment. A part of each process may be executed.

 さらに、本願発明における記憶媒体は、コンピュータと独立した媒体に限らず、LANやインターネット等により伝送されたプログラムをダウンロードして記憶または一時記憶した記憶媒体も含まれる。 The storage medium according to the present invention is not limited to a medium independent of a computer, but also includes a storage medium in which a program transmitted via a LAN or the Internet is downloaded and stored or temporarily stored.

 また、記憶媒体は1つに限らず、複数の媒体から本実施形態における処理が実行される場合も、本発明における記憶媒体に含まれ、媒体の構成は何れの構成であってもよい。 In addition, the number of storage media is not limited to one, and a case where the processing in the present embodiment is executed from a plurality of media is also included in the storage medium of the present invention, and the configuration of the medium may be any configuration.

 なお、本願発明におけるコンピュータは、記憶媒体に記憶されたプログラムに基づき、本実施形態における各処理を実行するものであって、パソコン等の1つからなる装置、複数の装置がネットワーク接続されたシステム等の何れの構成であってもよい。 Note that the computer according to the present invention executes each process in the present embodiment based on a program stored in a storage medium, and includes a device such as a personal computer or a system in which a plurality of devices are connected to a network. Or any other configuration.

 また、本願発明におけるコンピュータとは、パソコンに限らず、情報処理機器に含まれる演算処理装置、マイコン等も含み、プログラムによって本願発明の機能を実現することが可能な機器、装置を総称している。 Further, the computer in the present invention is not limited to a personal computer, but also includes an arithmetic processing unit, a microcomputer, and the like included in an information processing device, and is a general term for devices and devices capable of realizing the functions of the present invention by a program. .

本願発明の実施例1の概略構成図。1 is a schematic configuration diagram of a first embodiment of the present invention. 本願発明の実施例1の使用イメージの一例。4 is an example of a usage image of Embodiment 1 of the present invention. 本願発明の実施例1の使用イメージの一例。4 is an example of a usage image of Embodiment 1 of the present invention. 本願発明の実施例1の変形例の概略構成図。FIG. 7 is a schematic configuration diagram of a modification of the first embodiment of the present invention. 本願発明の実施例1の処理の流れ図。3 is a flowchart of a process according to the first embodiment of the present invention. 本願発明の実施例1の変形例の処理の流れの図。The figure of the flow of the processing of the modification of Example 1 of this invention. 本願発明の実施例1の変形例の処理の流れの図。The figure of the flow of the processing of the modification of Example 1 of this invention. 本願発明の実施例2の概略構成図。FIG. 4 is a schematic configuration diagram of a second embodiment of the present invention. 本願発明の実施例2の処理の流れ図。9 is a flowchart of a process according to a second embodiment of the present invention. 本願発明の実施例2の変形例の概略構成図。FIG. 9 is a schematic configuration diagram of a modification of the second embodiment of the present invention. 本願発明の実施例2の変形例の処理の流れの図。FIG. 11 is a flowchart of a process according to a modification of the second embodiment of the present invention. 本願発明の実施例2の変形例の認識対象の例。14 shows an example of a recognition target of a modification of the second embodiment of the present invention.

符号の説明Explanation of reference numerals

1…入力部
2…行動計測センサ
3…装着型呈示部
4…再生呈示制御部
5…記憶部
6…再生部
7…送受信部
8…環境情報分析部
9…映像情報入力部
10…音情報入力部
DESCRIPTION OF SYMBOLS 1 ... Input part 2 ... Behavior measurement sensor 3 ... Wearable presentation part 4 ... Reproduction presentation control part 5 ... Storage part 6 ... Reproduction part 7 ... Transmission / reception part 8 ... Environmental information analysis part 9 ... Video information input part 10 ... Sound information input Department

Claims (8)

 文字,映像,あるいは音声などの記録されたあるいは受信した再生すべき情報を再生するための再生手段と、
 利用者が装着可能で、前記再生手段によって再生された情報を呈示するための装着型呈示手段と、
 この装着型呈示手段を装着している前記使用者の静止,歩行,走行などの身体の活動状態をセンサにより計測し、このセンサの計測結果から前記使用者の危険状態を計測するための危険計測手段と、
 この危険計測手段の計測結果に基づいて、前記再生手段での再生および前記装着型呈示手段での呈示を制御するための再生呈示制御手段とを有することを特徴とする装着型情報呈示装置。
Reproducing means for reproducing recorded or received information to be reproduced, such as text, video, or audio;
Wearable presentation means that can be worn by a user and presents information reproduced by the reproduction means;
A danger measurement for measuring the danger state of the user wearing the wearing-type presenting means by measuring a physical activity state of the user wearing the presenting means, such as resting, walking, and running, from the measurement result of the sensor. Means,
A wearable information presenting apparatus comprising: a play presenting control means for controlling reproduction by the reproducing means and presentation by the wearable presenting means based on the measurement result of the risk measuring means.
 前記センサは、使用者が覚醒しているかどうかを計測するための覚醒検出手段を有することを特徴とする請求項11記載の装着型情報呈示装置。 12. The wearable information presenting device according to claim 11, wherein the sensor has a wakeup detecting unit for measuring whether the user is awake.  前記危険計測手段は、前記装着型呈示手段を装着している使用者の環境を計測する環境計測手段を有することを特徴とする請求項11記載の装着型情報呈示装置。 12. The wearable information presentation device according to claim 11, wherein the danger measurement means includes environment measurement means for measuring an environment of a user wearing the wearable presentation means.  前記環境計測手段は、周囲から使用者への聴覚あるいは視覚への働きかけを検出することを特徴とする請求項13記載の装着型情報呈示装置。 14. The wearable information presenting apparatus according to claim 13, wherein the environment measuring means detects a hearing or a visual effect on the user from the surroundings.  前記再生呈示制御手段は、前記危険計測手段の計測結果に応じて、視覚野や聴覚野などの確保のため、前記再生手段での再生の停止、前記装着型呈示手段での呈示の停止を行うことを特徴とする請求項11記載の装着型情報呈示装置。 The reproduction presentation control means stops reproduction by the reproduction means and stops presentation by the wearable presentation means in order to secure a visual cortex or an auditory cortex in accordance with the measurement result of the danger measurement means. The wearable information presenting device according to claim 11, wherein:  前記再生呈示制御手段は、前記危険計測手段の計測結果に応じて、前記再生手段での情報の再生を停止するとき、前記停止箇所を記録し、前記再生手段での情報の再生を再開するとき、記録した前記停止箇所から情報の再生を再開することを特徴とする請求項11記載の装着型情報呈示装置。 The reproduction presenting control unit, when stopping the reproduction of the information by the reproduction unit, records the stop point, and restarts the reproduction of the information by the reproduction unit, according to the measurement result of the danger measurement unit. 12. The wearable information presentation device according to claim 11, wherein reproduction of information is restarted from the recorded stop point.  文字,映像,あるいは音声などの記録されたあるいは受信した再生すべき情報を、利用者が装着可能な装着型呈示手段によって呈示し、
 この装着型呈示手段を装着している前記使用者の静止,歩行,走行などの身体の活動状態をセンサにて計測し、このセンサの計測結果から前記使用者の危険状態を計測し、
この危険状態の計測結果に基づいて、情報の再生および前記装着型呈示手段での呈示を注視野から周辺視野に移行する制御をすることを特徴とする装着型情報呈示方法。
The recorded or received information to be reproduced, such as text, video, or audio, is presented by a wearable presentation means that can be worn by the user,
A body activity state of the user wearing the wearing type presenting means such as rest, walking, and running is measured by a sensor, and a danger state of the user is measured from a measurement result of the sensor.
A method for presenting wearable information, wherein the reproduction of information and the presentation by the wearable presenting means are shifted from a gazing point of view to a peripheral field of view based on the measurement result of the dangerous state.
 装着型の電子機器を制御するためのプログラムをコンピュータ実行可能なように記憶させた記憶媒体であって、
 文字,映像,あるいは音声などの記録されたあるいは受信した再生すべき情報を再生させ、
 利用者が装着可能な装着型呈示手段によって、再生された前記情報を呈示させ、
 この装着型呈示手段を装着している前記使用者の静止,歩行,走行などの身体の活動状態をセンサにて計測し、このセンサの計測結果から前記使用者の危険状態を計測させ、
 この危険状態の計測結果に基づいて、情報の再生および前記装着型呈示手段での呈示を注視野から周辺視野に移行する制御をさせるプログラムを記憶したコンピュータ読取り可能な記憶媒体。
A storage medium storing a computer-executable program for controlling a wearable electronic device,
Reproduce recorded or received information to be reproduced, such as text, video, or audio,
By the wearable presentation means that can be worn by the user, the reproduced information is presented,
The state of the body, such as stationary, walking, or running, of the user wearing the wearing-type presenting means is measured by a sensor, and the danger state of the user is measured from the measurement result of the sensor.
A computer-readable storage medium storing a program for controlling reproduction of information and transition of presentation by the wearable presentation means from a gazing point of view to a peripheral field of view based on the measurement result of the dangerous state.
JP2003292332A 2003-08-12 2003-08-12 Mount type information presentation device and method, and storage medium Pending JP2004109995A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003292332A JP2004109995A (en) 2003-08-12 2003-08-12 Mount type information presentation device and method, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003292332A JP2004109995A (en) 2003-08-12 2003-08-12 Mount type information presentation device and method, and storage medium

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP18464699A Division JP3492942B2 (en) 1999-06-30 1999-06-30 Wearable information presenting apparatus and method, and storage medium

Publications (1)

Publication Number Publication Date
JP2004109995A true JP2004109995A (en) 2004-04-08

Family

ID=32290696

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003292332A Pending JP2004109995A (en) 2003-08-12 2003-08-12 Mount type information presentation device and method, and storage medium

Country Status (1)

Country Link
JP (1) JP2004109995A (en)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005315802A (en) * 2004-04-30 2005-11-10 Olympus Corp User support device
JP2006146871A (en) * 2004-10-20 2006-06-08 Fuji Xerox Co Ltd Attention calling apparatus and method and information processing system
JP2010187132A (en) * 2009-02-10 2010-08-26 Brother Ind Ltd Head mounted display
JP2013210643A (en) * 2013-04-26 2013-10-10 Sony Corp Display device and display method
JP2015028654A (en) * 2014-09-24 2015-02-12 ソニー株式会社 Head-mounted type display device and display method
JP2015118332A (en) * 2013-12-19 2015-06-25 ソニー株式会社 Image display device and image display method
JP2015150064A (en) * 2014-02-12 2015-08-24 株式会社バンダイナムコエンターテインメント Program, game device, and game system
JP2015191124A (en) * 2014-03-28 2015-11-02 ソフトバンクBb株式会社 Non-transmission type head-mounted display and program
WO2016017997A1 (en) * 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Wearable glasses and method of providing content using the same
US9261956B2 (en) 2006-09-08 2016-02-16 Sony Corporation Display device and display method that determines intention or status of a user
JPWO2015125626A1 (en) * 2014-02-20 2017-03-30 ソニー株式会社 Display control apparatus, display control method, and computer program
KR101748557B1 (en) * 2015-10-13 2017-06-20 천지민 Smart phone

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005315802A (en) * 2004-04-30 2005-11-10 Olympus Corp User support device
JP2006146871A (en) * 2004-10-20 2006-06-08 Fuji Xerox Co Ltd Attention calling apparatus and method and information processing system
JP4687266B2 (en) * 2004-10-20 2011-05-25 富士ゼロックス株式会社 Alerting device and method, and information processing system
US8305420B2 (en) 2004-10-20 2012-11-06 Fuji Xerox Co., Ltd. Attention calling apparatus and method and information processing system
US9261956B2 (en) 2006-09-08 2016-02-16 Sony Corporation Display device and display method that determines intention or status of a user
US10466773B2 (en) 2006-09-08 2019-11-05 Sony Corporation Display device and display method that determines intention or status of a user
US9733701B2 (en) 2006-09-08 2017-08-15 Sony Corporation Display device and display method that determines intention or status of a user
JP2010187132A (en) * 2009-02-10 2010-08-26 Brother Ind Ltd Head mounted display
JP2013210643A (en) * 2013-04-26 2013-10-10 Sony Corp Display device and display method
CN105474302A (en) * 2013-12-19 2016-04-06 索尼公司 Head-mounted display device and image display method
JP2015118332A (en) * 2013-12-19 2015-06-25 ソニー株式会社 Image display device and image display method
US9964766B2 (en) 2013-12-19 2018-05-08 Sony Corporation Controlling reproduction of content in a head-mounted display
JP2015150064A (en) * 2014-02-12 2015-08-24 株式会社バンダイナムコエンターテインメント Program, game device, and game system
JPWO2015125626A1 (en) * 2014-02-20 2017-03-30 ソニー株式会社 Display control apparatus, display control method, and computer program
US10324294B2 (en) 2014-02-20 2019-06-18 Sony Corporation Display control device, display control method, and computer program
US10437069B2 (en) 2014-02-20 2019-10-08 Sony Corporation Display control device, display control method, and computer program
JP2015191124A (en) * 2014-03-28 2015-11-02 ソフトバンクBb株式会社 Non-transmission type head-mounted display and program
WO2016017997A1 (en) * 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Wearable glasses and method of providing content using the same
JP2015028654A (en) * 2014-09-24 2015-02-12 ソニー株式会社 Head-mounted type display device and display method
KR101748557B1 (en) * 2015-10-13 2017-06-20 천지민 Smart phone

Similar Documents

Publication Publication Date Title
JP3492942B2 (en) Wearable information presenting apparatus and method, and storage medium
US11150738B2 (en) Wearable glasses and method of providing content using the same
EP2862049B1 (en) Reactive user interface for head-mounted display
US9848796B2 (en) Method and apparatus for controlling media play device
WO2017071059A1 (en) Communication method, apparatus and system for wearable device
EP2981070A1 (en) Information processing device, notification state control method, and program
KR20160016540A (en) Method and wearable glasses for providing a content
KR20160074408A (en) Device and method for rearranging contents displayed on the screen
JP2004109995A (en) Mount type information presentation device and method, and storage medium
JP6402718B2 (en) Information processing apparatus, control method, and program
US20200041803A1 (en) Systems, devices, and methods for notification management
KR20150037251A (en) Wearable computing device and user interface method
US11016723B2 (en) Multi-application control of augmented reality audio
JP6904352B2 (en) Content output system, terminal device, content output method, and program
US20240194219A1 (en) Information processing system, information processing method, and recording medium
KR20160149100A (en) Method and wearable device for providing information on exercise
JP2022184841A (en) Head mounted information processing device
KR20200120105A (en) Electronic device and method for providing information to relieve stress thereof
JP2017080382A (en) Portable information terminal and automatic imaging device equipped with the same
US20230038025A1 (en) Apparatus and method for providing a wireless, portable, and/or handheld, device with safety features
JP5982674B1 (en) Automatic imaging device
CN104808781A (en) Device and method for determining validity of operation of head-wearing intelligent device
KR101689713B1 (en) Mobile terminal and operation method thereof
KR101871660B1 (en) Wearable based personal auto recording device operation method
JP7252313B2 (en) Head-mounted information processing device

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20050415

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20050606

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060214

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060417

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20070306