[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP4899108B2 - Wristwatch type electronic memo device - Google Patents

Wristwatch type electronic memo device Download PDF

Info

Publication number
JP4899108B2
JP4899108B2 JP2008214745A JP2008214745A JP4899108B2 JP 4899108 B2 JP4899108 B2 JP 4899108B2 JP 2008214745 A JP2008214745 A JP 2008214745A JP 2008214745 A JP2008214745 A JP 2008214745A JP 4899108 B2 JP4899108 B2 JP 4899108B2
Authority
JP
Japan
Prior art keywords
fingertip
wristwatch
type electronic
hand
memo device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008214745A
Other languages
Japanese (ja)
Other versions
JP2010049583A5 (en
JP2010049583A (en
Inventor
照彦 矢上
Original Assignee
照彦 矢上
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 照彦 矢上 filed Critical 照彦 矢上
Priority to JP2008214745A priority Critical patent/JP4899108B2/en
Publication of JP2010049583A publication Critical patent/JP2010049583A/en
Publication of JP2010049583A5 publication Critical patent/JP2010049583A5/ja
Application granted granted Critical
Publication of JP4899108B2 publication Critical patent/JP4899108B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Position Input By Displaying (AREA)

Description

本発明は、腕時計や腕時計型の小型携帯情報機器に、電子ペン等の用具を必要とせず、いつでもどこでもすぐに、手首に装着した側の手の甲または手のひらに、もう一方の手の指先を使って文字や図形などのメモ情報や音楽プレーヤー等の電子機器操作情報を手書き入力することが可能な腕時計型の電子メモ装置に関するものである。
The present invention does not require a device such as an electronic pen for a wristwatch or a wristwatch-type small portable information device, and uses the fingertip of the other hand immediately on the back or palm of the hand on the wrist, anytime and anywhere. The present invention relates to a wristwatch-type electronic memo device capable of handwritten input of memo information such as characters and figures and electronic device operation information such as a music player.

従来、このような手書き入力が可能な電子メモ装置は、タッチスクリーンを利用した、電子手帳やPDA(Personal Digital Assistants)などがあった。これらは、タッチスクリーンに表示されたキャラクターをペンや指先で押圧指示することによりキーボードの役割を果たしたり、また、ペンや指先で文字や絵を描くと、それを画像として認識して2値データとして取り込んだりするようにしたものである。 一般に、タッチスクリーンは、ペンや指先による入力画像を認識するために、画面への押圧を検出する透明な感圧型タブレットと、その下に重ねられた表示用の液晶からなる。
Conventionally, such electronic memo devices capable of handwritten input include electronic notebooks and PDAs (Personal Digital Assistants) using a touch screen. These play the role of a keyboard by instructing the character displayed on the touch screen to be pressed with a pen or fingertip, and when characters or pictures are drawn with the pen or fingertip, they are recognized as images and binary data. It is something that is taken in as. In general, a touch screen is composed of a transparent pressure-sensitive tablet that detects a pressure on the screen and a liquid crystal for display superimposed thereunder in order to recognize an input image with a pen or a fingertip.

上述の電子手帳やPDAなどは、ユーザの手またはポケットにフィットするまでに小型化されてきている。小さいサイズの入力装置は、数の少ないキーと小さくなったタッチスクリーンを操作するために、メモ情報を入力できる速度をかなり遅くしている。 また、メモのたびにポケットや鞄から取り出したり、入れたりする煩わしさがある。
常時身に着けているウェアラブル装置として腕時計型電子メモ装置を使えば、メモのたびにポケットや鞄から出し入れする必要がなくなり、すぐに使えるので優れているが、電子手帳やPDAに比べて更に小型化されているために小型のタッチスクリーンを使ってメモ情報をすばやく入力することは非常に困難である。
この入力問題を解決するために、メモ入力の際に特殊なペンや用具を必要としない入力手段で、装置本体のサイズによる操作範囲の制限を受けずに、だれもが単純で直感的な操作によってすばやくメモ入力を可能とすることである。
The above-mentioned electronic notebook, PDA, and the like have been downsized to fit in the user's hand or pocket. The small size input device operates a small number of keys and a small touch screen, so that the speed at which memo information can be input is considerably slowed down. In addition, there is a hassle of taking out and putting it out of the pocket or bag for each memo.
If you use a wristwatch-type electronic memo device as a wearable device that you wear at all times, you don't have to put it in and out of your pocket or bag every time you take a memo and it's easy to use immediately, but it's even smaller than an electronic notebook or PDA. Therefore, it is very difficult to quickly input memo information using a small touch screen.
In order to solve this input problem, it is an input means that does not require a special pen or tool when inputting memos, and anyone can perform simple and intuitive operations without being restricted by the operating range depending on the size of the main unit. Is to enable quick memo input.

本発明は上述のような課題を解決するためになされたもので、腕時計型電子メモ装置に対して、手の甲または手のひら表面に筆記中の指先の方位と距離を検出するための、赤外線レーザービームを腕時計型メモ装置の側面から手の甲または手のひらの表面に向かって扇状に走査する手段と、指先からの反射光を腕時計型メモ装置の側面から受光し指先の位置を計測する手段、指先による手の甲または手のひらへの筆記状態を検出するための皮膚接触音検知手段と筆記したメモデータを表示する表示手段、操作者に適切に応答するための振動発生手段から構成される。
The present invention has been made to solve the above-described problems. An infrared laser beam for detecting the orientation and distance of the fingertip being written on the back of the hand or the palm surface of the wristwatch-type electronic memo device is provided. Means for fan-shaped scanning from the side of the wristwatch-type memo device toward the back of the hand or the surface of the palm; means for receiving the reflected light from the fingertip from the side of the wristwatch-type memo device; and measuring the position of the fingertip; It comprises a skin contact sound detecting means for detecting the writing state of the head, a display means for displaying the written memo data, and a vibration generating means for appropriately responding to the operator.

本発明の腕時計型電子メモ装置にあっては、手の甲または手のひらをパッドとすることによって、指先の操作範囲を腕時計型電子メモ装置本体の表示部面積の約10倍に拡大し、指先を電子ペンとして使うことができるので、道具の準備の必要がなく、直ぐにメモ筆記することが出来る。また表示部と操作部が分離しているので小さい表示部でも操作中の指先が邪魔しないので画面が見やすい。 また手や指の触覚を使うことが出来るので、例えば表示画面を見なくても精度良く手書き入力することが可能となる。
In the wristwatch-type electronic memo device of the present invention, by using the back of the hand or the palm as a pad, the operation range of the fingertip is expanded to about 10 times the display area of the wristwatch-type electronic memo device body, and the fingertip is moved to the electronic pen. As it can be used as a memo, it is not necessary to prepare tools and can write notes immediately. Further, since the display unit and the operation unit are separated, the fingertip during operation is not disturbed even in a small display unit, so that the screen is easy to see. In addition, since the sense of touch of the hand or finger can be used, for example, it is possible to input with high accuracy without looking at the display screen.

以下、本発明を実施するための最良の形態について説明する。
図1において、10は、左手首に装着した腕時計型電子メモ装置の本体で、この本体の表面に、メモデータまたは時間表示用の表示器11を備えている。 表示器の隅には操作スイッチ12が設けられている。側面には赤外線レーザービームを射出すると共に、指先からの反射光のみを取り込み、外乱ノイズとなる可視光線をカットする目的で可視光カットフィルタ窓13が設けられている。本体10の裏面には皮膚タッチ音、皮膚摩擦音を検知する、シリコン基板上にMEMS(Micro Electro Mechanical Systems)技術により音圧で振動するシリコン系振動板を形成したシリコンマイクロフォン14と、操作者へ振動で応答するための振動発生器15が設けられている。
Hereinafter, the best mode for carrying out the present invention will be described.
In FIG. 1, reference numeral 10 denotes a main body of a wristwatch type electronic memo device attached to the left wrist, and a display 11 for displaying memo data or time is provided on the surface of the main body. An operation switch 12 is provided at the corner of the display. A visible light cut filter window 13 is provided on the side surface for the purpose of emitting an infrared laser beam and capturing only reflected light from the fingertip and cutting visible light that becomes disturbance noise. A silicon microphone 14 that detects a skin touch sound and a skin friction sound on the back surface of the main body 10, and a silicon-based diaphragm that vibrates with sound pressure by MEMS (Micro Electro Mechanical Systems) technology on a silicon substrate, and vibration to the operator. A vibration generator 15 is provided for responding.

腕時計型電子メモ装置を側面から見た図2において、20は腕時計型電子メモ装置の本体で、上面に表示器21を備えている。 表示器の隅には操作スイッチ22が設けられ、側面にはレーザービームを射出すると共に指先からの反射光を取り込む可視光カットフィルタ窓23が設けられている。本体の底面に皮膚タッチ音、皮膚摩擦音を検知するシリコンマイクロフォン24と、操作者へ振動で応答するための振動発生器25が設けられている。
腕時計型電子メモ装置から手の甲表面に対して垂直方向に、照射位置と照射タイミングが異なる複数の赤外線レーザービームPa(26A),Pb(26B),Pc(26C)を平行走査することによって、手の甲の表面に対して垂直方向の指先の動きも検出している。
In FIG. 2 when the wristwatch type electronic memo device is viewed from the side, 20 is a main body of the wristwatch type electronic memo device, and has a display 21 on the upper surface. An operation switch 22 is provided at the corner of the display, and a visible light cut filter window 23 for emitting a laser beam and capturing reflected light from the fingertip is provided on the side surface. A silicon microphone 24 for detecting skin touch sound and skin friction sound and a vibration generator 25 for responding to the operator by vibration are provided on the bottom surface of the main body.
By parallel scanning a plurality of infrared laser beams Pa (26A), Pb (26B), and Pc (26C) having different irradiation positions and irradiation timings in a direction perpendicular to the back surface of the hand from the wristwatch-type electronic memo device, The movement of the fingertip perpendicular to the surface is also detected.

図3は手のひらに指先を使って筆記する場合を示している。 30は腕時計型電子メモ装置の本体で、上面に表示器31を備えている。表示器の隅には操作スイッチ32が設けられ、側面にはレーザービームを走査射出すると共に指先からの反射光を取り込む可視光カットフィルタ窓33が設けられている。 本体の底面に皮膚タッチ音、皮膚摩擦音を検知するシリコンマイクロフォン34と、操作者へ振動で応答するための振動発生器35が設けられている。腕時計型電子メモ装置から手のひら表面に対して垂直方向に複数の赤外線レーザービームPa(36A),Pb(36B),Pc(36C)を平行走査することによって、手のひらの表面に対して垂直方向の指先の動きも検出している。 手のひらの指先39が赤外線レーザービーム照射側に曲がっていると、手のひらに指先で筆記していない時も曲がった指先からの反射光が検出されてしまい、筆記情報が正しく入力出来ない場合があるので、筆記中の指先以外からの反射が検出されたと判断された場合には振動発生器35の振動で操作者に注意を促すようにする。 FIG. 3 shows a case where writing is performed using a fingertip on the palm. Reference numeral 30 denotes a main body of a wristwatch type electronic memo device, which has a display 31 on the upper surface. An operation switch 32 is provided at the corner of the display, and a visible light cut filter window 33 that scans and emits a laser beam and captures reflected light from the fingertip is provided on the side surface. A silicon microphone 34 for detecting skin touch sound and skin friction sound and a vibration generator 35 for responding to the operator by vibration are provided on the bottom surface of the main body. A fingertip in a direction perpendicular to the surface of the palm is obtained by parallel scanning a plurality of infrared laser beams Pa (36A), Pb (36B), and Pc (36C) in a direction perpendicular to the palm surface from the wristwatch type electronic memo device. It also detects movements. If the fingertip 39 of the palm is bent toward the infrared laser beam irradiation side, the reflected light from the bent fingertip is detected even when the palm is not writing with the fingertip, and writing information may not be input correctly. When it is determined that reflection from other than the fingertip during writing is detected, the operator is alerted by the vibration of the vibration generator 35.

図4はレーザービーム走査光学系の模式図を示している。赤外線マルチレーザービーム発光素子40から照射された赤外線レーザービームはコリメーションレンズ41で平行光線にされてハーフミラー42を透過して、レーザービーム走査用のMEMS(Micro Electro Mechanical Systems)ミラー43で反射され、可視光カットフィルタ窓44を通って手の甲の表面上部を周期的に走査される。 手の甲に指先で接触しているか又は少なくともレーザービームが当たるほど表面に近くに指先がある場合にレーザービームの向きが指先の方向と一致すると、レーザービームで照射された指先からの反射光は照射ビームと同じ光路を経てハーフミラーに戻り、ハーフミラー42で反射されて集光レンズ48で集光されてから受光素子49で電気信号に変換される。 FIG. 4 is a schematic diagram of a laser beam scanning optical system. The infrared laser beam emitted from the infrared multi-laser beam light emitting element 40 is collimated by a collimation lens 41, passes through a half mirror 42, and is reflected by a MEMS (Micro Electro Mechanical Systems) mirror 43 for laser beam scanning. The upper surface of the back of the hand is periodically scanned through the visible light cut filter window 44. When the fingertip is in contact with the back of the hand or at least the fingertip is close to the surface so that the laser beam hits, if the direction of the laser beam matches the direction of the fingertip, the reflected light from the fingertip irradiated with the laser beam will be reflected by the irradiation beam Is returned to the half mirror through the same optical path, reflected by the half mirror 42, collected by the condenser lens 48, and then converted into an electric signal by the light receiving element 49.

図5(a)はパルスレーザーの照射タイミングの一例を示すタイムチャートである。
具体的な数値例を示すと、パルス幅(Tw)=75nS パルス間隔(Td)=250nS
パルス周期(T1)=750nS、 周波数(f1)=1.333MHz となる。
手の甲の表面に対して、垂直方向に位置が異なる 赤外線レーザービームパルス Pa,Pb,Pcは干渉を避けるために照射タイミングをTd遅延させて、信号が重ならないようにして照射している。照射パルスPa,Pb,Pcに対応する受光パルスをPra,Prb,Prcとすると、指先が手の甲に垂直方向から近づく場合はPra,Prb,Prcの順に受光パルスが検出され、指先が手の甲から垂直方向に離れる場合はPrc,Prb,Praの順に受光パルスが検出されなくなるので、指先の手の甲または手のひら対する垂直方向の動きも検出することが出来る。受光パルス(Pra,Prb,Prc)の振幅またはパルス幅の変化を計測することによって指先の垂直方向の動きの検出確度を上げることが出来る。
FIG. 5A is a time chart showing an example of pulse laser irradiation timing.
As a specific numerical example, pulse width (Tw) = 75 nS pulse interval (Td) = 250 nS
Pulse period (T1) = 750 nS, frequency (f1) = 1.333 MHz.
Infrared laser beam pulses Pa, Pb, and Pc whose positions are different in the vertical direction with respect to the surface of the back of the hand are irradiated so that the signals do not overlap by delaying the irradiation timing by Td in order to avoid interference. If the received light pulses corresponding to the irradiation pulses Pa, Pb, and Pc are Pra, Prb, and Prc, when the fingertip approaches the back of the hand from the vertical direction, the received light pulses are detected in the order of Pra, Prb, and Prc, and the fingertip is in the vertical direction from the back of the hand. Since the received light pulses are not detected in the order of Prc, Prb, and Pra, the movement in the vertical direction with respect to the back or palm of the fingertip can also be detected. By measuring the change in amplitude or pulse width of the received light pulses (Pra, Prb, Prc), the detection accuracy of the vertical movement of the fingertip can be increased.

図5(b)はMEMSミラーの角走査の方向+30度〜−30度の周期的変化の波形の一例を示している。共振周波数(fo)=320Hzで使うとTo=3.15mS で一往復の角走査が完了する。 位相は3μS毎に計測可能なので一往復の角走査の時間 (3.15mS) に、1050回 計測することが出来る。 FIG. 5B shows an example of a waveform of a periodic change of +30 degrees to −30 degrees in the angular scanning direction of the MEMS mirror. When used at a resonance frequency (fo) = 320 Hz, one round-trip angular scan is completed at To = 3.15 mS. Since the phase can be measured every 3 μS, it can be measured 1050 times in one round-trip angular scanning time (3.15 mS).

図5(c)は、指先の二次元位置座標(Xp,Yp)をMEMSミラー(O)と指先(P)間の距離(Rp)と指先の方位(θp)を使って
Xp=Rp・cos(θp)、Yp=Rp・sin(θp) と算出することが出来ることを示している。
FIG. 5C shows the two-dimensional position coordinates (Xp, Yp) of the fingertip using the distance (Rp) between the MEMS mirror (O) and the fingertip (P) and the orientation (θp) of the fingertip.
It can be calculated that Xp = Rp · cos (θp), Yp = Rp · sin (θp).

図5(d)は指先の方位(θp)を受光パルス振幅の変化から求める方法を示している。
受光パルスの振幅(Vp)が閾値(Vr)以上(Vp≧Vr)である方位 (θ1〜θ2) の中心 (θ2−θ1)/2 を θp としている。
FIG. 5 (d) shows a method for obtaining the orientation (θp) of the fingertip from the change in the received light pulse amplitude.
The center (θ2−θ1) / 2 of the azimuth (θ1 to θ2) in which the amplitude (Vp) of the received light pulse is equal to or greater than the threshold value (Vr) (Vp ≧ Vr) is defined as θp.

図6は腕時計型メモ装置のシステム構成図を示している。
600はシステム全体を制御するマイクロプロセッサ、601はタイミング発生部を示している。周波数(f1)1.333MHzで発光部602を、MEMSミラーの共振周波数(fo)320HzでMEMSミラー制御部603を、周波数(f3) 333.33KHzで 位置検出部620の基準位相のタイミングを生成している。
FIG. 6 shows a system configuration diagram of the wristwatch type memo device.
Reference numeral 600 denotes a microprocessor that controls the entire system, and reference numeral 601 denotes a timing generator. The timing of the reference phase of the position detection unit 620 is generated at the frequency (f1) 1.333 MHz, the light emitting unit 602 at the MEMS mirror resonance frequency (fo) 320 Hz, the MEMS mirror control unit 603 at the frequency (f3) 333.33 KHz. ing.

MEMSミラー604はMEMSミラー制御部603によって、周波数320Hzで発光部602からの赤外線レーザービーム606を角度走査する。指先605から反射した赤外線607は受光部608で電気信号に変換され、位置検出部620でMEMSミラーによる角走査の原点Oと指先の位置P間の距離Rpと、指先が検出された方位θp が計測され、更にマイクロプロセッサ600の演算処理によって二次元座標(Xp,Yp)に変換される。 The MEMS mirror 604 angularly scans the infrared laser beam 606 from the light emitting unit 602 at a frequency of 320 Hz by the MEMS mirror control unit 603. The infrared ray 607 reflected from the fingertip 605 is converted into an electric signal by the light receiving unit 608, and the position detection unit 620 determines the distance Rp between the origin O of the angular scanning by the MEMS mirror and the position P of the fingertip and the direction θp where the fingertip is detected. It is measured and further converted into two-dimensional coordinates (Xp, Yp) by the arithmetic processing of the microprocessor 600.

指先のよる皮膚タッチ音や皮膚擦れ音はシリコンマイクロフォン609によって検知されマイクロプロセッサに入力される。マイクロプロセッサではタッチ音、擦れ音を識別して筆記状態を認識して、マルチレーザービームによる指先の垂直方向の動き検出と共に、筆記データの開始点、終了点の検出や指先の軌跡データに線幅や濃淡データとして反映させ、指先による筆記パターンとして液晶ディスプレイ等の表示部611に画像として表示する。 A skin touch sound and a skin rubbing sound by a fingertip are detected by the silicon microphone 609 and input to the microprocessor. The microprocessor recognizes the writing sound by recognizing the touch sound and rubbing sound, detects the fingertip vertical movement with the multi-laser beam, detects the start and end points of the writing data, and the line width to the fingertip trajectory data. Or reflected as grayscale data and displayed as an image on a display unit 611 such as a liquid crystal display as a writing pattern by a fingertip.

マイクロプロセッサから操作者への応答は振動発生部610によって行われる、振動パターンを変えることによって複数の情報を操作者へ伝えることが出来る。 A response from the microprocessor to the operator is performed by the vibration generating unit 610. A plurality of information can be transmitted to the operator by changing the vibration pattern.

時計表示、メモデータ表示、操作入力などの動作モードの切り替え等は、操作スイッチ部612からマイクロプロセッサに入力される。 Operation mode switching such as clock display, memo data display, and operation input is input from the operation switch unit 612 to the microprocessor.

音声入出力部613は音声によるメモ情報の入力や音声によるメモデータの出力や操作者への指示応答などに使われる。 The voice input / output unit 613 is used to input voice memo information, output voice memo data, and respond to instructions to an operator.

通信制御部614は、Bluetooth無線通信によって、腕時計型電子メモ装置に入力した メモデータや電子機器操作情報を、携帯電話、音楽プレーヤー、パソコン、等へデータ転送すると共に、携帯電話、音楽プレーヤー、パソコン、等 からのデータ入力を行う。 The communication control unit 614 transfers memo data and electronic device operation information input to the wristwatch-type electronic memo device to the mobile phone, music player, personal computer, etc. by Bluetooth wireless communication, and the mobile phone, music player, personal computer. Input data from, etc.

指先までの距離(Rp)を計測するためには赤外線パルスが指先で反射して戻って来るまでのピコ秒オーダーの微小時間を計測しなければならない。
時間計測方法としては TDC(Time to Digital Converter)や TAC(Time to Amplitude Converter)等の方式が知られているが、図7に示す位置検出部の計測方式は、受光パルスの立ち上がりと立下りをフェーズロック回路によって位相情報に変換してパルス中心の位相を計測することにより、受光レベルが変動しても高精度で時間計測が可能なフェーズロック方式を採用している。
特開2007−003355号広報
In order to measure the distance (Rp) to the fingertip, it is necessary to measure a minute time on the order of picoseconds until the infrared pulse is reflected by the fingertip and returns.
As time measurement methods, methods such as TDC (Time to Digital Converter) and TAC (Time to Amplitude Converter) are known, but the measurement method of the position detection unit shown in FIG. A phase-lock method is employed in which the phase is converted into phase information by a phase-lock circuit and the phase at the center of the pulse is measured, so that time measurement can be performed with high accuracy even if the received light level varies.
JP 2007-003355 PR

受光パルスの立ち上がりと立下りをフェーズロック回路に入力して 高周波(f2)360MHzの位相情報に変換し、パルス中心に相当する位相を計測して伝播時間を求める方式を、図7の位置検出部のブロック構成図を使って数値例を挙げて詳述する。 The position detection unit shown in FIG. 7 is a method for calculating the propagation time by inputting the rising and falling edges of the received light pulse to the phase lock circuit to convert it to phase information of high frequency (f2) 360 MHz and measuring the phase corresponding to the pulse center. A detailed numerical example will be described with reference to the block diagram of FIG.

発光部から周波数(f1) 1.333MHzで発光され、発光タイミングが遅延時間 (Td) 250nSずつ異なる、3種類のパルス(Pa,Pb,Pc)は手の甲に対して垂直方向に異なった位置で放射される。赤外線レーザービームの放射方向に指先があると、指先で反射して戻ってきた受光パルスは受光部で電気信号に変換され伝播時間計測パルス選択回路701、方位検出回路702、振幅検出回路703、パルス幅計測回路704、に入力される。受光された3種類のパルス(Pra,Prb,Prc)の中で指先の位置検出に最適なパルスが、振幅またはパルス幅によって選択される。 例えば振幅とパルス幅が基準値(振幅Vpr、パルス幅Twr)に近いパルスを選択する。 Three types of pulses (Pa, Pb, Pc) emitted from the light emitting part at a frequency (f1) of 1.333 MHz and the light emission timings differ by delay time (Td) by 250 nS are emitted at different positions in the vertical direction with respect to the back of the hand. Is done. When there is a fingertip in the radiation direction of the infrared laser beam, the received light pulse reflected and returned by the fingertip is converted into an electric signal by the light receiving unit, and the propagation time measurement pulse selection circuit 701, the azimuth detection circuit 702, the amplitude detection circuit 703, the pulse Input to the width measuring circuit 704. Of the three received pulses (Pra, Prb, Prc), the optimum pulse for fingertip position detection is selected according to the amplitude or pulse width. For example, a pulse whose amplitude and pulse width are close to reference values (amplitude Vpr, pulse width Twr) is selected.

伝播時間計測パルス選択回路701で選択された、パルスの立ち上がりと立下りをフェーズロックループ(PLL)705A,705Bに入力し、パルスの立ち上がりと立下りの時間情報(Tu,Td)を周波数(f2)360MHzの位相情報(θu,θd)に変換する。 指先の移動による距離Rpの変位を△R,周波数(f2)360MHzでのパルス中心に相当する位相変化を△θとすると、△θ=(2・360)・△R/λ と表すことができる。
λは周波数360MHzでの波長833.3mmなので、△θ=0.864・△R となる。指先の移動による距離Rpが10mm変化すると位相は8.64度変化する。
The rise and fall of the pulse selected by the propagation time measurement pulse selection circuit 701 are input to phase-locked loops (PLL) 705A and 705B, and time information (Tu, Td) of the rise and fall of the pulse is set to the frequency (f2 ) Convert to 360 MHz phase information (θu, θd). If the displacement of the distance Rp due to the movement of the fingertip is ΔR and the phase change corresponding to the pulse center at the frequency (f2) 360 MHz is Δθ, it can be expressed as Δθ = (2 · 360) · ΔR / λ. .
Since λ is a wavelength of 833.3 mm at a frequency of 360 MHz, Δθ = 0.864 · ΔR. When the distance Rp due to the movement of the fingertip changes by 10 mm, the phase changes by 8.64 degrees.

周波数変換回路706A,706Bでは周波数(f2)360MHzでの位相情報を保持したままで低周波(f3)333.33KHzに変換してから位相差検出707A,707Bで位相差を周期(T3=1/f3) 3μSで計測している。 In the frequency conversion circuits 706A and 706B, the phase information at the frequency (f2) 360 MHz is maintained and converted into the low frequency (f3) 333.33 KHz, and then the phase difference is detected by the phase difference detection 707A and 707B (T3 = 1 / f3) Measurement is performed at 3 μS.

受光パルス中心に相当する位相は受光パルスの立ち上がりの位相θuと立下りの位相θd の平均値θa=(θu+θd)/2を平均値算出709で計算することによりパルス中心の位相θaが求められる。△R=1.157・△θ と表わされるのでRp=0に相当するパルス中心の位相をθoとすると指先までの距離Rpは
Rp=1.157・(θa−θo) と求めることができる。
位相は1度程度の分解能で計測可能なので、距離は約1mmの分解能で計測することが可能である。
The phase corresponding to the center of the received light pulse is obtained by calculating the average value θa = (θu + θd) / 2 of the rising phase θu and the falling phase θd of the received light pulse by the average value calculation 709. Since ΔR = 1.157 · Δθ, the distance Rp to the fingertip can be obtained as Rp = 1.157 · (θa−θo) when the phase of the pulse center corresponding to Rp = 0 is θo.
Since the phase can be measured with a resolution of about 1 degree, the distance can be measured with a resolution of about 1 mm.

指先の方位(θp)は振幅変化またはパルス幅変化によって求めることが出来る。
図5(d)で示すように、受光パルスの振幅が閾値(Vr)より大きい方位角の範囲
θ1〜θ2 の中心 θp=(θ2−θ1)/2 を指先の検出方位(θp)とする。
指先の二次元位置情報 (Xp,Yp) は 距離Rp と方位θp を使って、
Xp=Rp・cosθp , Yp=Rp・sinθp と算出することが出来る。
The orientation (θp) of the fingertip can be obtained by changing the amplitude or changing the pulse width.
As shown in FIG. 5 (d), the center θp = (θ2−θ1) / 2 of the azimuth angle range θ1 to θ2 in which the amplitude of the received light pulse is larger than the threshold value (Vr) is set as the detection direction (θp) of the fingertip.
The two-dimensional position information (Xp, Yp) of the fingertip uses the distance Rp and the direction θp,
Xp = Rp · cos θp and Yp = Rp · sin θp can be calculated.

図8は腕時計型電子メモ装置を机上に置いた状態でボールペンや鉛筆などの通常の筆記用具を使って文字の入力を行う実施例を示している。
腕時計型電子メモ装置は手首に装着していなくても使用することが可能である。
FIG. 8 shows an embodiment in which characters are input using a normal writing instrument such as a ballpoint pen or pencil while the wristwatch type electronic memo device is placed on a desk.
The wristwatch-type electronic memo device can be used without being worn on the wrist.

図9は従来技術による電子メモ装置の一例である。
指先または電子ペン92を使って手書きメモデータを入力表示するタッチパネル 91と、手書き入力された文字列を手書き文字認識機能によってコードデータに変換して、対応するフォントパターンとして表示される認識結果表示部93、キー入力が可能な操作スイッチ部94より構成されている。
FIG. 9 shows an example of a conventional electronic memo device.
A touch panel 91 for inputting and displaying handwritten memo data using a fingertip or an electronic pen 92, and a recognition result display unit for converting a character string input by handwriting into code data by a handwritten character recognition function and displaying it as a corresponding font pattern 93, an operation switch unit 94 capable of key input.


手の甲に指先で筆記している状態を上から見た図。The figure which looked at the state currently writing with the fingertip on the back of the hand. 手の甲に指先で筆記している状態を横から見た図。The figure which looked at the state which is writing with the fingertip on the back of the hand from the side. 手のひらに指先で筆記している状態を横から見た図。The figure which looked at the state which is writing with the fingertip on the palm from the side. レーザービーム走査光学系の模式図。The schematic diagram of a laser beam scanning optical system. (a) レーザーパルスの照射タイミングを示す図。 (b) MEMSミラー角走査波形を示す図。 (c) 指先の二次元座標と走査角の関係を示す図。 (d) 指先の方位を受光パルスの振幅の変化から求める方法を示す図。(A) The figure which shows the irradiation timing of a laser pulse. (B) The figure which shows a MEMS mirror angle | corner scanning waveform. (C) The figure which shows the relationship between the two-dimensional coordinate of a fingertip, and a scanning angle. (D) The figure which shows the method of calculating | requiring the direction of a fingertip from the change of the amplitude of a received light pulse. 腕時計型電子メモ装置のシステム構成を示す図。The figure which shows the system configuration | structure of a wristwatch-type electronic memo apparatus. 位置検出部のブロック構成を示す図。The figure which shows the block structure of a position detection part. 腕時計型電子メモ装置を机上に置いて筆記具で入力する方法を示す図。The figure which shows the method of putting a wristwatch-type electronic memo apparatus on a desk, and inputting with a writing instrument. 従来技術による電子メモ装置の一例を示す図。The figure which shows an example of the electronic memo apparatus by a prior art.

符号の説明Explanation of symbols

10、20、30、80 腕時計型電子メモ装置本体、
11、21、31、81 表示器、
12、22、32、82 操作スイッチ、
13、23、33、83 可視光カットフィルタ窓、
14、24、34、84 シリコンマイクロフォン、
15、25、35、85 振動発生器、
16、86 赤外線マルチレーザービーム、
17、87 赤外線反射光
18A、18B 赤外線レーザービーム走査角範囲、
19 手の甲に筆記中の指先、
26A、36A 赤外線マルチレーザービーム(上)、
26B、36B 赤外線マルチレーザービーム(中)、
26C、36C 赤外線マルチレーザービーム(下)、
27 手の甲に筆記中の指先、
28、88 バンド、
37 手のひら、
38 手のひらに筆記中の指先、
39 手のひら側に曲がった指先、
40 赤外線マルチレーザービーム発光素子、
41 コリメーションレンズ、
42 ハーフミラー、
43 MEMSミラー、
44 可視光カットフィルタ、
45 指先、
46 角走査上限(+30度)、
47 角走査下限(−30度)、
48 集光レンズ、
49 受光素子、
89 筆記具(鉛筆)、
600 マイクロプロセッサ、
601 タイミング発生部、
602 発光部、
603 MEMSミラー制御部、
604 MEMSミラー、
605 指先、
606 赤外線レーザービーム、
607 赤外線反射光、
608 受光部、
609 シリコンマイクロフォン、
610 振動発生部、
611 表示部、
612 操作スイッチ部、
613 音声入出力部、
614 通信制御部、
620、700 位置検出部、
701 伝播時間計測パルス選択回路、
702 方位検出回路、
703 振幅検出回路、
704 パルス幅計測回路、
705A、705B PLL回路、
706A、706B 周波数変換回路、
707A、707B 位相差検出回路、
708 基準信号発生回路、
709 平均値算出、
710 距離算出、
711 位置算出、
90 電子メモ装置本体、
91 タッチパネル、
92 電子ペン、
93 認識結果表示部、
94 操作スイッチ部、

10, 20, 30, 80 Wristwatch type electronic memo device body,
11, 21, 31, 81 display,
12, 22, 32, 82 Operation switch,
13, 23, 33, 83 Visible light cut filter window,
14, 24, 34, 84 Silicon microphone,
15, 25, 35, 85 vibration generator,
16, 86 Infrared multi-laser beam,
17, 87 Infrared reflected light 18A, 18B Infrared laser beam scanning angle range,
19 Fingertips being written on the back of the hand,
26A, 36A Infrared multi-laser beam (top),
26B, 36B Infrared multi-laser beam (middle),
26C, 36C Infrared multi-laser beam (bottom),
27 Fingertips being written on the back of the hand,
28, 88 bands,
37 Palm,
38 Fingertips being written on the palm
39 Fingertip bent on the palm side,
40 Infrared multi-laser beam light emitting element,
41 collimation lens,
42 half mirror,
43 MEMS mirror,
44 Visible light cut filter,
45 fingertips,
46 Angle scanning upper limit (+30 degrees),
47 Angular scanning lower limit (-30 degrees),
48 condenser lens,
49 light receiving element,
89 Writing instruments (pencils),
600 microprocessor,
601 timing generator,
602 light emitting unit,
603 MEMS mirror control unit,
604 MEMS mirror,
605 fingertips,
606 infrared laser beam,
607 infrared reflected light,
608 light receiving unit,
609 Silicon microphone,
610 vibration generator,
611 display,
612 operation switch part,
613 voice input / output unit,
614 communication control unit,
620, 700 position detector,
701 Propagation time measurement pulse selection circuit,
702 orientation detection circuit,
703 amplitude detection circuit,
704 pulse width measurement circuit,
705A, 705B PLL circuit,
706A, 706B frequency conversion circuit,
707A, 707B phase difference detection circuit,
708 reference signal generation circuit,
709 Average calculation,
710 Distance calculation,
711 Position calculation,
90 Electronic memo device body,
91 touch panel,
92 Electronic pen,
93 recognition result display section,
94 Operation switch section,

Claims (5)

腕時計型電子メモ装置の側面から手の甲または手のひらの表面に向かって扇状に赤外線レーザービームを走査する手段と、指先からの反射光を受光し指先の位置を検出する手段を備えたことを特徴とする、手の甲または手のひらの表面に指先による手書き情報入力が可能な腕時計型電子メモ装置。 It comprises means for scanning an infrared laser beam in a fan shape from the side of a wristwatch-type electronic memo device toward the back of the hand or the surface of the palm, and means for receiving the reflected light from the fingertip and detecting the position of the fingertip. A wristwatch-type electronic memo device that can input handwritten information on the back of the hand or palm. 指先の手の甲または手のひらへのタッチ音、指先による筆記状態での皮膚との擦れ音をマイクロフォンによって検出し、指先の圧力等の筆記情報を検知する手段を備えたことを特徴とする請求項1記載の腕時計型電子メモ装置。 2. A means for detecting writing information such as fingertip pressure by detecting a touch sound of the back of the fingertip or the palm of the hand, or a rubbing sound with the skin in the writing state by the fingertip, with a microphone. Wristwatch type electronic memo device. 腕時計型電子メモ装置から手の甲または手のひらの表面に対して垂直方向に複数の赤外線レーザービームを平行走査することによって、手の甲または手のひらの表面に対して垂直方向の指先の動きも検出するとともに、手の曲げ角の状態も検知することを特徴とする請求項1記載の腕時計型電子メモ装置。 By parallel scanning a plurality of infrared laser beams perpendicularly to the back of the hand or the surface of the palm from the wristwatch-type electronic memo device, the movement of the fingertip perpendicular to the back of the hand or the surface of the palm is also detected. 2. The wristwatch-type electronic memo device according to claim 1, wherein a state of a bending angle is also detected. 腕時計型電子メモ装置の液晶表示部に表示する筆記パターンの軌跡の線幅や線の濃淡を、マイクロフォンで検知した皮膚との擦れ音に基づいて発生させることを特徴とする請求項1記載の腕時計型電子メモ装置。 2. The wristwatch according to claim 1, wherein the line width and the line shading of the locus of the writing pattern displayed on the liquid crystal display unit of the wristwatch-type electronic memo device are generated based on a rubbing sound with the skin detected by the microphone. Type electronic memo device. 手の曲げ角の状態や複数の指先を検知したときなどに、適切に操作者へ応答するために、振動発生器による触覚フィードバック手段を備えたことを特徴とする請求項1記載の腕時計型電子メモ装置。












2. The wristwatch-type electronic device according to claim 1, further comprising tactile feedback means using a vibration generator in order to appropriately respond to the operator when a hand bending angle state or a plurality of fingertips are detected. Memo device.












JP2008214745A 2008-08-24 2008-08-24 Wristwatch type electronic memo device Expired - Fee Related JP4899108B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008214745A JP4899108B2 (en) 2008-08-24 2008-08-24 Wristwatch type electronic memo device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008214745A JP4899108B2 (en) 2008-08-24 2008-08-24 Wristwatch type electronic memo device

Publications (3)

Publication Number Publication Date
JP2010049583A JP2010049583A (en) 2010-03-04
JP2010049583A5 JP2010049583A5 (en) 2011-10-06
JP4899108B2 true JP4899108B2 (en) 2012-03-21

Family

ID=42066596

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008214745A Expired - Fee Related JP4899108B2 (en) 2008-08-24 2008-08-24 Wristwatch type electronic memo device

Country Status (1)

Country Link
JP (1) JP4899108B2 (en)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101497829B1 (en) * 2013-09-30 2015-03-04 현대엠엔소프트 주식회사 Watch type device utilizing motion input
WO2015053471A1 (en) * 2013-10-08 2015-04-16 재단법인대구경북과학기술원 Virtual remote control apparatus and method
KR200485654Y1 (en) * 2016-08-02 2018-02-05 이승환 Wearable device track pad using infrared light
US10185416B2 (en) 2012-11-20 2019-01-22 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving movement of device
US10194060B2 (en) 2012-11-20 2019-01-29 Samsung Electronics Company, Ltd. Wearable electronic device
US10423214B2 (en) 2012-11-20 2019-09-24 Samsung Electronics Company, Ltd Delegating processing from wearable electronic device
US10551928B2 (en) 2012-11-20 2020-02-04 Samsung Electronics Company, Ltd. GUI transitions on wearable electronic device
US10691332B2 (en) 2014-02-28 2020-06-23 Samsung Electronics Company, Ltd. Text input on an interactive display
US11086422B2 (en) 2016-03-01 2021-08-10 Maxell, Ltd. Wearable information terminal
US11157436B2 (en) 2012-11-20 2021-10-26 Samsung Electronics Company, Ltd. Services associated with wearable electronic device
US11237719B2 (en) 2012-11-20 2022-02-01 Samsung Electronics Company, Ltd. Controlling remote electronic device with wearable electronic device
US11372536B2 (en) 2012-11-20 2022-06-28 Samsung Electronics Company, Ltd. Transition and interaction model for wearable electronic device

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102184011B (en) * 2011-05-06 2013-03-27 中国科学院计算技术研究所 Human-computer interaction equipment
US20130285942A1 (en) * 2012-04-26 2013-10-31 Acer Incorporated Touch detection method and touch control device using the same
US9575560B2 (en) 2014-06-03 2017-02-21 Google Inc. Radar-based gesture-recognition through a wearable device
US9778749B2 (en) 2014-08-22 2017-10-03 Google Inc. Occluded gesture recognition
US11169988B2 (en) 2014-08-22 2021-11-09 Google Llc Radar recognition-aided search
KR101524576B1 (en) * 2014-09-03 2015-06-03 박준호 Wearable device
US9600080B2 (en) 2014-10-02 2017-03-21 Google Inc. Non-line-of-sight radar-based gesture recognition
JP6317699B2 (en) * 2015-03-27 2018-04-25 株式会社Nttドコモ Position detection apparatus and position detection method
CN107430443B (en) 2015-04-30 2020-07-10 谷歌有限责任公司 Gesture recognition based on wide field radar
US10310620B2 (en) 2015-04-30 2019-06-04 Google Llc Type-agnostic RF signal representations
KR102328589B1 (en) 2015-04-30 2021-11-17 구글 엘엘씨 Rf-based micro-motion tracking for gesture tracking and recognition
US10088908B1 (en) 2015-05-27 2018-10-02 Google Llc Gesture detection and interactions
US10817065B1 (en) 2015-10-06 2020-10-27 Google Llc Gesture recognition using multiple antenna
US10492302B2 (en) 2016-05-03 2019-11-26 Google Llc Connecting an electronic component to an interactive textile
CN106959098A (en) * 2017-05-22 2017-07-18 李良杰 Laser measurement wrist-watch

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3131859B2 (en) * 1993-04-02 2001-02-05 カシオ計算機株式会社 Information recognition device
JPH08179873A (en) * 1994-12-26 1996-07-12 Sharp Corp Input device for computer
FI990676A (en) * 1999-03-26 2000-09-27 Nokia Mobile Phones Ltd Hand-held entry system for data entry and mobile phone
JP2006010489A (en) * 2004-06-25 2006-01-12 Matsushita Electric Ind Co Ltd Information device, information input method, and program

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10185416B2 (en) 2012-11-20 2019-01-22 Samsung Electronics Co., Ltd. User gesture input to wearable electronic device involving movement of device
US10194060B2 (en) 2012-11-20 2019-01-29 Samsung Electronics Company, Ltd. Wearable electronic device
US10423214B2 (en) 2012-11-20 2019-09-24 Samsung Electronics Company, Ltd Delegating processing from wearable electronic device
US10551928B2 (en) 2012-11-20 2020-02-04 Samsung Electronics Company, Ltd. GUI transitions on wearable electronic device
US11157436B2 (en) 2012-11-20 2021-10-26 Samsung Electronics Company, Ltd. Services associated with wearable electronic device
US11237719B2 (en) 2012-11-20 2022-02-01 Samsung Electronics Company, Ltd. Controlling remote electronic device with wearable electronic device
US11372536B2 (en) 2012-11-20 2022-06-28 Samsung Electronics Company, Ltd. Transition and interaction model for wearable electronic device
KR101497829B1 (en) * 2013-09-30 2015-03-04 현대엠엔소프트 주식회사 Watch type device utilizing motion input
WO2015053471A1 (en) * 2013-10-08 2015-04-16 재단법인대구경북과학기술원 Virtual remote control apparatus and method
US10691332B2 (en) 2014-02-28 2020-06-23 Samsung Electronics Company, Ltd. Text input on an interactive display
US11086422B2 (en) 2016-03-01 2021-08-10 Maxell, Ltd. Wearable information terminal
KR200485654Y1 (en) * 2016-08-02 2018-02-05 이승환 Wearable device track pad using infrared light

Also Published As

Publication number Publication date
JP2010049583A (en) 2010-03-04

Similar Documents

Publication Publication Date Title
JP4899108B2 (en) Wristwatch type electronic memo device
JP4590114B2 (en) Coordinate input device, control method therefor, and recording medium
Chen et al. Your table can be an input panel: Acoustic-based device-free interaction recognition
EP1332488B1 (en) Method and apparatus for entering data using a virtual input device
US6067080A (en) Retrofittable apparatus for converting a substantially planar surface into an electronic data capture device
US10444908B2 (en) Virtual touchpads for wearable and portable devices
US5308936A (en) Ultrasonic pen-type data input device
KR100893114B1 (en) Ultrasonic length measuring apparatus and method for coordinate input
US20120120014A1 (en) Method and device for locating at least one touch on a touch-sensitive surface of an object
US20070130547A1 (en) Method and system for touchless user interface control
KR20150010702A (en) Gesture recognition devices and methods
US8456648B2 (en) Optical detection device, electronic apparatus, and optical detection method
KR20160120298A (en) Decimation strategies for input event processing
WO2015112744A1 (en) Dynamic assignment of possible channels in a touch sensor
WO2019019606A1 (en) Ultrasonic touch apparatus and method, and display apparatus
CN106468780A (en) Portable device able and related vibrations method for detecting
US7573467B2 (en) Graphic input device and method
KR101153977B1 (en) Input system for a handheld electronic device
JP2017016567A (en) Electronic pen, touch panel device, and control method of electronic pen
JP2002351605A (en) Coordinate input device
US12026317B2 (en) Electronic devices with air input sensors
JP2008250581A (en) Handwriting input device
JP2003029917A (en) Coordinate input device
KR100899650B1 (en) Control method of wireless optical mouse
Kyung et al. A motion-based handheld haptic interface

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110813

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110815

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20110818

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110822

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20110829

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20111206

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111212

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150113

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees