[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2011118683A - Cooking assisting terminal and program - Google Patents

Cooking assisting terminal and program Download PDF

Info

Publication number
JP2011118683A
JP2011118683A JP2009275712A JP2009275712A JP2011118683A JP 2011118683 A JP2011118683 A JP 2011118683A JP 2009275712 A JP2009275712 A JP 2009275712A JP 2009275712 A JP2009275712 A JP 2009275712A JP 2011118683 A JP2011118683 A JP 2011118683A
Authority
JP
Japan
Prior art keywords
display
order
procedure
cooking
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2009275712A
Other languages
Japanese (ja)
Other versions
JP5193988B2 (en
Inventor
Hirohiko Mochida
裕彦 持田
Noriyuki Marumo
宣之 丸茂
Nobuo Watanabe
伸夫 渡辺
Hitoshi Iizaka
仁志 飯坂
Katsuyuki Suzuki
克行 鈴木
Shin Yoshimune
晋 吉宗
Morihito Natsume
守人 夏目
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba TEC Corp
Original Assignee
Toshiba TEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba TEC Corp filed Critical Toshiba TEC Corp
Priority to JP2009275712A priority Critical patent/JP5193988B2/en
Publication of JP2011118683A publication Critical patent/JP2011118683A/en
Application granted granted Critical
Publication of JP5193988B2 publication Critical patent/JP5193988B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • User Interface Of Digital Computer (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To display procedures for efficiently carrying out work by a cook regarding a cooking method for each ordered item for which an order has been received. <P>SOLUTION: A wearable cooking assisting terminal 1 displays procedures for the cooking method of a plurality of ordered items included in order information from a customer per ordered item in a cooking order set in advance on a head-mounted display 10. A controlling section 121 receives a display instruction for switching the displayed procedure to the next procedure and displays the next procedure according to the display instruction. When waiting time during which the cook carries out the other work concurrently is set in advance, regarding the procedure displayed upon receiving the display instruction, the controlling section 121 displays a procedure of another ordered item different from the ordered item for which the procedure is being displayed. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、調理補助端末及びプログラムに関する。   The present invention relates to a cooking assistance terminal and a program.

従来から客から注文を受けた注文品目の調理法(レシピ)を出力する調理補助端末が知られている。この調理補助端末を使用する調理人は、出力された調理法を確認することで、注文品目の調理を行うことが可能となる。この注文を受けた注文品目の調理法を出力する従来技術としては、特許文献1がある。特許文献1には、客からの注文情報を受信して、調理指示情報及び料理提供指示情報を印刷する注文管理システムが開示されている。   2. Description of the Related Art Conventionally, there is known a cooking assistance terminal that outputs a cooking method (recipe) of an ordered item received from a customer. The cook using this cooking assistance terminal can cook the ordered item by checking the output cooking method. As a conventional technique for outputting a cooking method of an ordered item that has received this order, there is Patent Literature 1. Patent Document 1 discloses an order management system that receives order information from a customer and prints cooking instruction information and cooking provision instruction information.

しかしながら、上記従来技術では、注文を受けた複数の注文品目の調理法を、注文品目ごとに出力するだけであり、その出力から調理人が効率的な作業手順を知ることはできなかった。例えば、実際の調理では、食材の準備や加工を行うために調理人が作業に専念しなければならない場面と、食材に味を染み込ませるための煮込み期間などの、他の作業を並行して行うことが可能な場面とがある。他の作業を並行して行うことが可能な場面では別の注文品目の手順を進めた方が効率的であるが、上記従来技術では、そのような場面において別の注文品目の手順を調理人が確認することができなかった。   However, in the above prior art, the cooking method of a plurality of ordered items that have been ordered is only output for each ordered item, and the cook cannot know an efficient work procedure from the output. For example, in actual cooking, other work is performed in parallel, such as when the cook must concentrate on the work to prepare and process the ingredients, and the cooking period to soak the taste in the ingredients. There are scenes where it is possible. It is more efficient to proceed with a procedure for another order item in a scene where other work can be performed in parallel. Could not be confirmed.

本発明は、上記に鑑みてなされたものであって、注文を受けた各注文品目の調理法について、調理人が効率的に作業を進める手順を表示することを可能とする調理補助端末及びプログラムを提供することを目的とする。   This invention was made in view of the above, Comprising: The cooking assistance terminal and program which enable a cook to display the procedure which advances a work | work efficiently about the cooking method of each order item which received the order The purpose is to provide.

上述した課題を解決し、目的を達成するために、本発明の調理補助端末は、客からの注文情報に含まれる複数の注文品目の調理法について、予め設定された調理順で注文品目ごとに、当該注文品目の手順を記憶手段から順次読み出して表示する表示手段と、前記表示されている手順を、次の手順に切り替えるための表示指示を受け付ける受付手段と、前記表示指示に応じて前記次の手順を前記表示手段に表示させる表示制御手段と、を備え、前記表示制御手段は、前記表示指示があった際に前記表示されている手順について、調理人が他の作業を並行して行う待ち時間が予め設定されている場合に、前記表示されている手順の注文品目とは異なる他の注文品目の手順を、前記記憶手段から読み出して前記表示手段に表示させることを特徴とする。   In order to solve the above-described problems and achieve the object, the cooking assistance terminal of the present invention provides a cooking method for a plurality of order items included in order information from a customer for each order item in a preset cooking order. Display means for sequentially reading out and displaying the procedure of the order item from the storage means, receiving means for receiving a display instruction for switching the displayed procedure to the next procedure, and the next according to the display instruction Display control means for causing the display means to display the procedure described above, and the display control means performs the other work in parallel on the displayed procedure when the display instruction is given. When a waiting time is set in advance, a procedure of another order item different from the order item of the displayed procedure is read from the storage unit and displayed on the display unit. .

また、本発明は、調理補助端末のコンピュータに、客からの注文情報に含まれる複数の注文品目の調理法について、予め設定された調理順で注文品目ごとに、当該注文品目の手順を記憶手段から順次読み出して表示手段に表示するステップと、前記表示されている手順を、次の手順に切り替えるための表示指示を受け付けるステップと、前記表示指示に応じて前記次の手順を前記表示手段に表示させるステップと、前記表示指示があった際に前記表示されている手順について、調理人が他の作業を並行して行う待ち時間が予め設定されている場合に、前記表示されている手順の注文品目とは異なる他の注文品目の手順を、前記記憶手段から読み出して前記表示手段に表示させるステップと、を実行させるためのプログラムである。   Further, according to the present invention, the ordering item procedure is stored in the computer of the cooking assistance terminal for each order item in the cooking order set in advance for the cooking method of the plurality of order items included in the order information from the customer. Sequentially reading from and displaying on the display means, receiving a display instruction for switching the displayed procedure to the next procedure, and displaying the next procedure on the display means in response to the display instruction The order of the displayed procedure when a waiting time for the cook to perform other work in parallel is preset for the displayed procedure when the display instruction is given A program for reading out a procedure of another order item different from the item from the storage unit and causing the display unit to display the procedure.

本発明は、注文を受けた各注文品目の調理法について、調理人が効率的に作業を進める手順を表示することを可能とする、という効果を奏する。   The present invention has an effect of allowing a cook to display a procedure for efficiently performing work on a cooking method for each ordered item that has been ordered.

図1は、本実施形態にかかる注文システムの一例を示す図である。FIG. 1 is a diagram illustrating an example of an ordering system according to the present embodiment. 図2は、本実施形態にかかるヘッドマウントディスプレイの一例を示す図である。FIG. 2 is a diagram illustrating an example of a head mounted display according to the present embodiment. 図3は、本実施形態にかかる注文システムの動作の一例を示すラダーチャートである。FIG. 3 is a ladder chart showing an example of the operation of the ordering system according to the present embodiment. 図4は、モニタ表示部の表示例を示す図である。FIG. 4 is a diagram illustrating a display example of the monitor display unit. 図5は、調理法データを例示する図である。FIG. 5 is a diagram illustrating cooking method data. 図6は、モニタ表示部の表示例を示す図である。FIG. 6 is a diagram illustrating a display example of the monitor display unit. 図7は、モニタ表示部の表示例を示す図である。FIG. 7 is a diagram illustrating a display example of the monitor display unit. 図8は、モニタ表示部の表示例を示す図である。FIG. 8 is a diagram illustrating a display example of the monitor display unit. 図9は、本実施形態にかかるウエアラブル調理補助端末の処理を示すフローチャートである。FIG. 9 is a flowchart showing the processing of the wearable cooking assistance terminal according to the present embodiment. 図10は、本実施形態にかかるウエアラブル調理補助端末の処理を示すフローチャートである。FIG. 10 is a flowchart showing the processing of the wearable cooking assistance terminal according to the present embodiment.

以下に添付図面を参照して、この発明にかかる調理補助端末及びプログラムの最良な実施の形態を詳細に説明する。本実施形態では、レストランなどの注文システムにおいて、各調理人が使用するユーザインタフェースにウエアラブル調理補助端末を適用する場合について例示する。   Exemplary embodiments of a cooking assistance terminal and a program according to the present invention will be explained below in detail with reference to the accompanying drawings. In the present embodiment, a case where a wearable cooking assistance terminal is applied to a user interface used by each cook in an ordering system such as a restaurant is illustrated.

図1は、本実施形態にかかる注文システムの一例を示す図である。図1に示すように、注文システムは、調理人(使用者)である装着者2が装着して使用するユーザインタフェースであるウエアラブル調理補助端末1、注文端末35からの注文を管理する注文管理サーバ30、各種帳票(例えば注文伝票)などを印刷するためのプリンタ31を制御するプリンタサーバ32、ウエアラブル調理補助端末1とデータの送受信を行うための送受信装置34、ウエイターやウエイトレスなどの店員が客から注文を受け付ける際に使用するための注文端末35を備え、それらがネットワークNTを介して接続されている。ネットワークNTは、LAN(Local Area Network)、イントラネット、イーサネット(登録商標)などである。   FIG. 1 is a diagram illustrating an example of an ordering system according to the present embodiment. As shown in FIG. 1, the order system includes an order management server that manages orders from the wearable cooking auxiliary terminal 1 and the order terminal 35 that are user interfaces worn and used by a wearer 2 that is a cook (user). 30, a printer server 32 for controlling a printer 31 for printing various forms (for example, order slips), a transmission / reception device 34 for transmitting / receiving data to / from the wearable cooking assistant terminal 1, and store staff such as waiters and waitresses from customers An order terminal 35 for use in receiving an order is provided, which are connected via a network NT. The network NT is a LAN (Local Area Network), an intranet, Ethernet (registered trademark), or the like.

送受信装置34とウエアラブル調理補助端末1との間のデータの送受信は、電波、光、赤外線、超音波などであってよく、本実施形態では通信範囲が数m程度である近接無線通信(例えばBluetooth(登録商標)など)を用いて行うものとする。なお、送受信装置34は、店舗内の全ての領域(例えば、精算カウンター近傍、客卓が設けられたフロア、バックヤード等)をカバーするように複数設けられている。なお、送受信装置34は注文端末35ともデータの送受信を行ってよく、注文端末35は有線でネットワークNTと接続する必要はない。   Transmission / reception of data between the transmission / reception device 34 and the wearable cooking assistance terminal 1 may be radio waves, light, infrared rays, ultrasonic waves, and the like. In the present embodiment, close proximity wireless communication (for example, Bluetooth) having a communication range of about several meters. (Registered trademark) etc.). A plurality of transmission / reception devices 34 are provided so as to cover all the areas in the store (for example, the vicinity of the payment counter, the floor on which the customer table is provided, the backyard, etc.). The transmitting / receiving device 34 may transmit / receive data to / from the order terminal 35, and the order terminal 35 does not need to be connected to the network NT by wire.

注文管理サーバ30は、店員が注文端末35に入力した料理の注文を管理する。具体的には、注文管理サーバ30は、注文端末35から通知された注文情報にユニークな注文番号を割り当てて内部のストレージ等に記憶し、注文情報を登録する。注文情報には、注文を受けた客卓、客数、注文品目、その注文数などが含まれる。注文管理サーバ30に登録された注文情報は、注文番号とともにプリンタ31より注文伝票として印刷される。この注文伝票は、POS端末33での精算時に使用するものとして、例えば料理提供後の客に渡されるものである。また、注文管理サーバ30は、登録された注文情報のウエアラブル調理補助端末1への通知や、各種情報の注文端末35への配信などを行う。   The order management server 30 manages food orders input by the clerk to the order terminal 35. Specifically, the order management server 30 assigns a unique order number to the order information notified from the order terminal 35, stores it in an internal storage, etc., and registers the order information. The order information includes the customer table that received the order, the number of customers, the order item, the number of orders. The order information registered in the order management server 30 is printed as an order slip from the printer 31 together with the order number. This order slip is used for payment at the POS terminal 33, for example, to be delivered to a customer after serving food. In addition, the order management server 30 performs notification of the registered order information to the wearable cooking assistance terminal 1 and distribution of various information to the order terminal 35.

POS端末33は、ドロア、キー入力部、スキャナ、カードリーダ、ディスプレイ、レシート/ジャーナル用プリンタなどを備え(いずれも図示しない)、現金やクレジットカードを用いて商取引を行うもので、例えば精算カウンター等に設けられる。例えば、POS端末33は、キー入力やスキャナ読み取りなどにより、注文伝票に印刷された注文番号を受け付け、その注文番号に対応する注文情報を注文管理サーバ30から取得する。POS端末33は、料理品目(メニュー)ごとの識別コードや価格がプリセットされたマスタファイルを、内部ROM(Read Only Memory)やデータサーバ(特に図示しない)から読み出し、取得した注文情報にかかる注文の精算を行う。   The POS terminal 33 includes a drawer, a key input unit, a scanner, a card reader, a display, a receipt / journal printer, etc. (all not shown), and performs business transactions using cash or a credit card. Is provided. For example, the POS terminal 33 receives an order number printed on the order slip by key input or scanner reading, and acquires order information corresponding to the order number from the order management server 30. The POS terminal 33 reads a master file in which an identification code and a price for each cooking item (menu) are preset from an internal ROM (Read Only Memory) or a data server (not particularly shown), and stores an order related to the acquired order information. Check out.

注文端末35は、店員が使用するための情報端末である。注文端末35は、LCD(Liquid Crystal Display)等のディスプレイ、操作入力を受け付けるためのタッチパネル等の操作入力部などを備える。注文端末35は、操作入力部による客からの注文受付や、注文管理サーバ30から配信された情報のディスプレイへの表示を行う。   The order terminal 35 is an information terminal for use by a store clerk. The order terminal 35 includes a display such as an LCD (Liquid Crystal Display), an operation input unit such as a touch panel for receiving an operation input, and the like. The order terminal 35 receives an order from a customer through the operation input unit and displays information distributed from the order management server 30 on the display.

ウエアラブル調理補助端末1は、装着者2(調理人)が装着して使用する情報端末であり、ヘッドマウントディスプレイ10と、撮像装置としてのデジタルカメラ11と、インタフェースボックス12と、マイク15とを備える。図2に示すように、ヘッドマウントディスプレイ10は、モニタ表示部17を備えた光透過性部材16を保持するためのフレーム13と、このフレーム13を装着者2の左目前に配置するためのヘッドホン型の装着用アーム14とを備える。すなわち、ヘッドマウントディスプレイ10は、装着用アーム14によって装着者2の頭部2aに装着可能であり、装着した状態ではフレーム13が装着者2の左目前に配置されることとなる。   The wearable cooking assistance terminal 1 is an information terminal worn and used by a wearer 2 (cooker), and includes a head-mounted display 10, a digital camera 11 as an imaging device, an interface box 12, and a microphone 15. . As shown in FIG. 2, the head mounted display 10 includes a frame 13 for holding a light transmissive member 16 having a monitor display unit 17 and headphones for disposing the frame 13 in front of the left eye of the wearer 2. And a mold mounting arm 14. That is, the head mounted display 10 can be mounted on the head 2 a of the wearer 2 by the mounting arm 14, and the frame 13 is arranged in front of the left eye of the wearer 2 in the mounted state.

フレーム13は、装着者2の左目に合わせた大きさの形状に形成されている。フレーム13の枠外の上部には、撮像方向可変機構18を介してデジタルカメラ11が設けられている。また、フレーム13の枠外には、装着者2の瞳を撮像して視線2b(視線位置)の検出を行うための視線認識用カメラ19が設けられている。また、フレーム13の下部には、装着者2やその周囲の音声を集音するためのマイク15が設けられている。フレーム13の枠内には、例えばフレーム枠の形状に合わせて形成された板状の光透過性部材16が保持されている。この光透過性部材16は、ヘッドマウントディスプレイ10を装着者2の頭部2aに装着した場合であっても、装着者2の目から周辺環境を観察可能である。この光透過性部材16は、例えば無色透明又は予め決められた色を有していてもよい。   The frame 13 is formed in a shape matching the left eye of the wearer 2. A digital camera 11 is provided above the frame 13 via an imaging direction variable mechanism 18. In addition, a gaze recognition camera 19 is provided outside the frame 13 for capturing the pupil of the wearer 2 and detecting the gaze 2b (gaze position). A microphone 15 for collecting the wearer 2 and surrounding sounds is provided at the lower part of the frame 13. In the frame 13, for example, a plate-like light transmissive member 16 formed in accordance with the shape of the frame is held. The light transmissive member 16 can observe the surrounding environment from the eyes of the wearer 2 even when the head mounted display 10 is worn on the head 2 a of the wearer 2. The light transmissive member 16 may be, for example, colorless and transparent or have a predetermined color.

光透過性部材16内の一部分には、モニタ表示部17が形成されている。このモニタ表示部17は、例えばデジタルカメラ11の撮像により取得される動画の画像データや各種情報等をリアルタイムにモニタ表示する。したがって、ヘッドマウントディスプレイ10を装着した状態で装着者2の左目へのモニタ表示を行うことが可能である。なお、モニタ表示部17は、光透過性の状態でモニタ表示する。しかるに、モニタ表示部17は、リアルタイムにモニタ表示している状態でも周辺環境を観察可能とすることができる。例えば、ウエアラブル調理補助端末1では、調理人が調理をしている最中であっても、調理をしながらモニタ表示を確認することができる。   A monitor display unit 17 is formed in a part of the light transmissive member 16. For example, the monitor display unit 17 displays, in real time, image data of a moving image acquired by imaging of the digital camera 11, various information, and the like. Therefore, it is possible to perform monitor display on the left eye of the wearer 2 with the head mounted display 10 being worn. The monitor display unit 17 displays the monitor in a light transmissive state. However, the monitor display unit 17 can observe the surrounding environment even when the monitor display is in real time. For example, the wearable cooking assistance terminal 1 can confirm the monitor display while cooking even when the cook is cooking.

なお、本実施形態では、フレーム13を装着者2の左目前に配置し、装着者2の左目へのモニタ表示を行う構成を例示した。しかしながら、装着者2へのモニタ表示は、右目又は両目に行うものであってよい。例えば、フレーム13を装着者2の右目前に配置することで、装着者2の右目へのモニタ表示を行うことが可能である。   In the present embodiment, the configuration in which the frame 13 is arranged in front of the left eye of the wearer 2 and the monitor display to the left eye of the wearer 2 is illustrated. However, the monitor display to the wearer 2 may be performed on the right eye or both eyes. For example, by arranging the frame 13 in front of the right eye of the wearer 2, it is possible to perform monitor display on the right eye of the wearer 2.

デジタルカメラ11は、撮像動作を行って動画の画像データを出力する。このデジタルカメラ11は、光透過性部材16を通した装着者2の視線2b方向に焦点が合うように撮像範囲を設定した状態でヘッドマウントディスプレイ10のフレーム13上に取り付けられている。撮像方向可変機構18は、例えばデジタルカメラ11を首振り可能に支持し、デジタルカメラ11の撮像方向を任意の方向、ここでは上記の如くデジタルカメラ11の撮像範囲を装着者2の視線2b方向に焦点が合うように設定する。   The digital camera 11 performs an imaging operation and outputs moving image data. The digital camera 11 is mounted on the frame 13 of the head mounted display 10 in a state where an imaging range is set so as to be focused in the direction of the line of sight 2b of the wearer 2 through the light transmissive member 16. The imaging direction variable mechanism 18 supports, for example, the digital camera 11 so as to be able to swing, and the imaging direction of the digital camera 11 is set to an arbitrary direction, here, the imaging range of the digital camera 11 is set in the direction of the line of sight 2b of the wearer 2 as described above. Set to focus.

インタフェースボックス12は、送受信装置34との間のデータの送受信を行うとともに、ヘッドマウントディスプレイ10にかかる各種処理を行う。具体的には、インタフェースボックス12は、制御部121、音声処理部122、送受信部123、情報表示部124、画像処理部125を備え、装着者2が携帯可能なボックスである。制御部121は、CPU(Central Processing Unit)、RAM(Random Access Memory)、RTC(Real Time Clock)などの計時機能、ROM、HDD(Hard Disk Drive)等のストレージなどを有するコンピュータであり、ウエアラブル調理補助端末1の動作を制御する。ROMやストレージには、プログラムやそのプログラムを実行する際に参照される各種設定情報などが予め格納されている。例えば、注文品目に対応した調理法に関する調理法データ(詳細は後述する)などが予め格納されている。CPUは、ROMやストレージに記憶されたプログラムをRAMの作業領域に展開して順実行することで、ウエアラブル調理補助端末1の動作を中央制御する。なお、インタフェースボックス12における画像処理部125、情報表示部124、送受信部123、音声処理部122などの各部が有する機能は、制御部121がROMやストレージに予め格納されたプログラムを実行することで実現してもよい。   The interface box 12 transmits / receives data to / from the transmitting / receiving device 34 and performs various processes related to the head mounted display 10. Specifically, the interface box 12 includes a control unit 121, an audio processing unit 122, a transmission / reception unit 123, an information display unit 124, and an image processing unit 125, and is a box that can be carried by the wearer 2. The control unit 121 is a computer having a clocking function such as a CPU (Central Processing Unit), a RAM (Random Access Memory), and an RTC (Real Time Clock), and a storage such as a ROM and an HDD (Hard Disk Drive). The operation of the auxiliary terminal 1 is controlled. The ROM and storage store in advance a program and various setting information referred to when the program is executed. For example, cooking method data (details will be described later) relating to the cooking method corresponding to the ordered item are stored in advance. The CPU centrally controls the operation of the wearable cooking assistance terminal 1 by developing the programs stored in the ROM and the storage in the work area of the RAM and sequentially executing the programs. Note that the functions of each unit such as the image processing unit 125, the information display unit 124, the transmission / reception unit 123, and the audio processing unit 122 in the interface box 12 are executed by the control unit 121 executing a program stored in advance in a ROM or storage. It may be realized.

音声処理部122は、マイク15により入力された音声の認識などの処理を行う。具体的には、音声処理部122は、予め設定された辞書データに含まれる音声データと、マイク15からの音声データとを照合して所定の音声コマンドを認識し、認識した音声コマンドを制御部121へ通知する。音声コマンドには、所定の単語や複数の単語を組み合わせた語句又は文章などがある。例えば料理品目の名称と、調理完了を示す語句との組み合わせを検出することで、その料理品目の調理が完了したことを示す音声コマンドを認識する。   The voice processing unit 122 performs processing such as recognition of voice input from the microphone 15. Specifically, the voice processing unit 122 recognizes a predetermined voice command by collating voice data included in preset dictionary data with voice data from the microphone 15, and controls the recognized voice command. 121 is notified. The voice command includes a predetermined word or a phrase or a sentence combining a plurality of words. For example, a voice command indicating that cooking of the cooking item has been completed is recognized by detecting a combination of the name of the cooking item and a word indicating completion of cooking.

制御部121は、通知された音声コマンドに応じた処理を行う。これにより、ウエアラブル調理補助端末1は、装着者2が発声する音声コマンドによる操作が可能である。以後、上述した音声コマンドによるウエアラブル調理補助端末1の操作を音声操作と呼ぶ。ウエアラブル調理補助端末1は、装着者2の音声操作を受け付けることで、装着者2の手入力による手間を省くことができる、特に装着者2が調理中などの場合はこの音声操作が効果的である。なお、予め設定された辞書データは、一つの言語だけでなく、複数の言語に対応可能であってよい。この場合は、対応可能な言語分の音声コマンドを識別可能となる。また、予め設定された辞書データは仮名文字や所定の単語などの語句にかかる音声データを含み、音声処理部122は、辞書の音声データと、マイク15からの音声データとを照合して所定の語句を認識してもよい。   The control unit 121 performs processing according to the notified voice command. Thereby, the wearable cooking assistance terminal 1 can be operated by a voice command uttered by the wearer 2. Hereinafter, the operation of the wearable cooking assistance terminal 1 by the above-described voice command is referred to as voice operation. The wearable cooking assistance terminal 1 can accept the voice operation of the wearer 2 to save time and effort of the wearer 2 by manual input. This voice operation is effective particularly when the wearer 2 is cooking. is there. Note that preset dictionary data may be compatible with a plurality of languages in addition to a single language. In this case, it is possible to identify voice commands for languages that can be handled. The preset dictionary data includes voice data relating to phrases such as kana characters and predetermined words, and the voice processing unit 122 compares the voice data in the dictionary with the voice data from the microphone 15 to obtain a predetermined data. Words may be recognized.

情報表示部124は、制御部121などから入力された画像データをヘッドマウントディスプレイ10のモニタ表示部17へ表示する。また、情報表示部124は、制御部121の制御の下、情報ウインドウやアイコンなどの各種画像を、モニタ表示部17の所定の座標へ表示する。   The information display unit 124 displays the image data input from the control unit 121 or the like on the monitor display unit 17 of the head mounted display 10. In addition, the information display unit 124 displays various images such as an information window and an icon at predetermined coordinates on the monitor display unit 17 under the control of the control unit 121.

画像処理部125は、デジタルカメラ11の撮像により取得された画像データの画像処理や、視線認識用カメラ19で撮像された画像データを解析して装着者2の視線2bの検出を行う。具体的には、画像処理部125は、視線認識用カメラ19で撮像された画像データから装着者2の瞳を検出し、その検出された瞳の位置に応じて視線2bの検出を行う。なお、視線2bの検出結果は情報表示部124へ出力される。情報表示部124は、画像処理部125から出力される視線2bの検出結果に対応するモニタ表示部17の座標に注文表示ウインドウを表示する。   The image processing unit 125 detects image line 2b of the wearer 2 by performing image processing of image data acquired by image capturing by the digital camera 11 and analyzing image data captured by the line-of-sight recognition camera 19. Specifically, the image processing unit 125 detects the eyes of the wearer 2 from the image data captured by the line-of-sight recognition camera 19, and detects the line of sight 2b according to the position of the detected pupils. Note that the detection result of the line of sight 2 b is output to the information display unit 124. The information display unit 124 displays an order display window at the coordinates of the monitor display unit 17 corresponding to the detection result of the line of sight 2b output from the image processing unit 125.

なお、ウエアラブル調理補助端末1における入力操作は、制御部121の制御の下、視線認識用カメラ19の画像を元に画像処理部125により検出された視線2bに応じて行われてもよい。具体的には、情報表示部124がモニタ表示部17に表示した操作入力用のアイコン画像を装着者2が見つめた際の視線2bを検出することで、ウエアラブル調理補助端末1における入力操作を行う。例えば、モニタ表示部17の所定の座標に表示したアイコン画像と、視線2bの検出結果により注文表示ウインドウとが重複する場合に、そのアイコン画像に対応する入力操作を受け付ける。以後、上述した視線2bに応じたウエアラブル調理補助端末1の入力操作を視線操作と呼ぶ。ウエアラブル調理補助端末1は、装着者2の視線操作を受け付けることで、装着者2の手入力による手間を省くことができる。特に装着者2が調理中などの場合はこの視線操作が効果的である。   The input operation in the wearable cooking assistance terminal 1 may be performed in accordance with the line of sight 2b detected by the image processing unit 125 based on the image of the line-of-sight recognition camera 19 under the control of the control unit 121. Specifically, the wearable cooking assistance terminal 1 performs an input operation by detecting the line of sight 2b when the wearer 2 looks at the icon image for operation input displayed on the monitor display unit 17 by the information display unit 124. . For example, when an icon image displayed at a predetermined coordinate on the monitor display unit 17 and an order display window overlap due to the detection result of the line of sight 2b, an input operation corresponding to the icon image is accepted. Hereinafter, the input operation of the wearable cooking assistance terminal 1 corresponding to the line of sight 2b described above is referred to as a line-of-sight operation. The wearable cooking assistance terminal 1 can save the labor by the manual input of the wearer 2 by receiving the line-of-sight operation of the wearer 2. This line-of-sight operation is particularly effective when the wearer 2 is cooking.

次に、本実施形態にかかる注文システムの動作について説明する。図3は、本実施形態にかかる注文システムの動作の一例を示すラダーチャートである。   Next, the operation of the order system according to this embodiment will be described. FIG. 3 is a ladder chart showing an example of the operation of the ordering system according to the present embodiment.

図3に示すように、注文端末35は、注文を受けた客卓、客数、注文品目、その注文数などの注文入力を受け付け(S1)、受け付けた注文を注文情報として注文管理サーバ30へ通知する(S2)。   As shown in FIG. 3, the order terminal 35 accepts an order input such as a customer table that has received an order, the number of customers, order items, and the number of orders (S1), and notifies the order management server 30 of the accepted order as order information. (S2).

注文管理サーバ30は、ウエアラブル調理補助端末1から通知された注文情報を登録し(S3)、登録された注文情報とその注文番号とをウエアラブル調理補助端末1に通知する(S4)。ウエアラブル調理補助端末1は、注文管理サーバ30から通知された注文情報に含まれる注文品目の一覧をモニタ表示部17に表示する(S5)。   The order management server 30 registers the order information notified from the wearable cooking assistance terminal 1 (S3), and notifies the wearable cooking assistance terminal 1 of the registered order information and its order number (S4). The wearable cooking assistance terminal 1 displays a list of order items included in the order information notified from the order management server 30 on the monitor display unit 17 (S5).

図4は、モニタ表示部17の表示例を示す図であり、より具体的には注文管理サーバ30から通知された注文情報の表示例を示す図である。図4において、視線マーカーG1は、視線2bの検出結果に応じてモニタ表示部17に表示されるマーカーである。注文表示ウインドウG2は、通知された注文情報を表示するための表示ウインドウである。注文アイコンG21〜G23は、注文情報に含まれる各注文品目に対応したアイコンである。調理法表示アイコンG24は、調理法の表示指示を視線操作で受け付けるためのアイコンである。調理順設定アイコンG25は、注文表示ウインドウG2に表示された各注文品目の調理順を設定する設定指示を視線操作で受け付けるためのアイコンである。   FIG. 4 is a diagram showing a display example of the monitor display unit 17, more specifically a diagram showing a display example of order information notified from the order management server 30. In FIG. 4, the line-of-sight marker G1 is a marker displayed on the monitor display unit 17 in accordance with the detection result of the line of sight 2b. The order display window G2 is a display window for displaying the notified order information. The order icons G21 to G23 are icons corresponding to each order item included in the order information. The cooking method display icon G24 is an icon for receiving a cooking method display instruction by a line-of-sight operation. The cooking order setting icon G25 is an icon for accepting a setting instruction for setting the cooking order of each order item displayed in the order display window G2 by a line-of-sight operation.

図4に示すように、S5では、注文管理サーバ30から通知された注文情報が注文表示ウインドウG2に表示される。具体的には、注文表示ウインドウG2には、注文情報に含まれる各注文品目に対応する注文アイコンG21〜G23が表示される。これにより、調理人は、注文情報に含まれる各注文品目を確認することができる。   As shown in FIG. 4, in S5, the order information notified from the order management server 30 is displayed in the order display window G2. Specifically, order icons G21 to G23 corresponding to each order item included in the order information are displayed in the order display window G2. Thereby, the cook can check each order item included in the order information.

また、S5において注文情報に含まれる各注文品目を注文表示ウインドウG2に表示している際には、その各注文品目の調理の手順を解説した調理法の表示指示を、音声操作又は視線操作により受け付ける。具体的には、音声操作の場合は、音声入力から辞書データに該当する所定の単語を識別することで、調理法の表示指示を特定する。例えば、「調理手順表示」、「調理法表示」などの音声入力から、調理法の表示指示を受け付ける。視線操作の場合は、装着者2が調理法表示アイコンG24を見つめて、視線マーカーG1が調理法表示アイコンG24に所定の時間重複することを検出するなどした場合に、調理法の表示指示を受け付ける。   Further, when each order item included in the order information is displayed in the order display window G2 in S5, a cooking method display instruction that explains the cooking procedure of each order item is performed by voice operation or line-of-sight operation. Accept. Specifically, in the case of voice operation, a cooking instruction display instruction is specified by identifying a predetermined word corresponding to dictionary data from voice input. For example, a cooking instruction display instruction is received from a voice input such as “cooking procedure display” or “cooking method display”. In the case of the line-of-sight operation, when the wearer 2 looks at the cooking method display icon G24 and detects that the line-of-sight marker G1 overlaps the cooking method display icon G24 for a predetermined time, the display instruction of the cooking method is received. .

また、S5において注文情報に含まれる各注文品目を注文表示ウインドウG2に表示している際であり、上述した調理法の表示指示の前には、その各注文品目の調理順を設定する設定指示を、調理法の表示指示と同様、音声操作又は視線操作により受け付ける。具体的には、音声操作の場合は、「調理順設定」などの音声入力から、調理順を設定する動作モード(以後、調理順設定モードという)に切り替え、次いで音声入力される「注文1」、「注文2」、「注文3」…などの注文品目の順序から調理順の設定を行う。視線操作の場合は、装着者2が調理順設定アイコンG25を見つめて、視線マーカーG1が調理順設定アイコンG25に所定の時間重複することを検出するなどした場合に、調理順設定モードに切り替える。次いで、装着者2が注文アイコンG21〜G23を順次見つめて、視線マーカーG1が注文アイコンG21〜G23に所定の時間重複した順序を検出することで、調理順の設定を行う。なお、上述した調理順の設定指示がない場合には、注文番号の若い順など、予め設定された順序が調理順として適用されるものとする。   Further, when each order item included in the order information is displayed in the order display window G2 in S5, a setting instruction for setting the cooking order of each order item before the above-described cooking method display instruction. Is received by a voice operation or a line-of-sight operation in the same manner as the display instruction of the cooking method. Specifically, in the case of voice operation, “order 1” is switched from voice input such as “cooking order setting” to an operation mode for setting the cooking order (hereinafter referred to as cooking order setting mode), and then voice input. , “Order 2”, “Order 3”, etc., the order of cooking is set from the order of the ordered items. In the case of the line-of-sight operation, when the wearer 2 looks at the cooking order setting icon G25 and detects that the line-of-sight marker G1 overlaps the cooking order setting icon G25 for a predetermined time, the mode is switched to the cooking order setting mode. Next, the wearer 2 looks at the order icons G21 to G23 sequentially, and detects the order in which the line-of-sight marker G1 overlaps the order icons G21 to G23 for a predetermined time, thereby setting the cooking order. In addition, when there is no instruction | indication of the setting of the cooking order mentioned above, the order set beforehand, such as an order with a young order number shall be applied as a cooking order.

図3に示すように、ウエアラブル調理補助端末1は、S5において各注文品目の調理法の表示指示を音声操作又は視線操作により受け付けた場合は、ROMやストレージなどに記憶された調理法データを参照し、各注文品目の調理法を、設定された調理順で順次モニタ表示部17に表示する(S6)。   As shown in FIG. 3, the wearable cooking assistance terminal 1 refers to the cooking method data stored in the ROM, the storage, or the like when the instruction to display the cooking method of each order item is received by voice operation or line-of-sight operation in S5. Then, the cooking method of each order item is sequentially displayed on the monitor display unit 17 in the set cooking order (S6).

図5は、調理法データD1を例示する図である。図5に示すように、ROMやストレージなどに記憶された各料理品目の調理法データD1には、調理の手順ごとに、出力用データ、作業時間、待ち時間が設定されている。出力用データは、画面に表示出力するなどして、手順の詳細な内容を調理人へ示すためのデータである。具体的には、調理手順の内容が記載されたテキストデータ、静止画像データ、動画像データ、又は上述したデータの格納先を示すアドレスなどであってよい。   FIG. 5 is a diagram illustrating cooking method data D1. As shown in FIG. 5, in the cooking method data D1 of each cooking item stored in the ROM or storage, output data, work time, and waiting time are set for each cooking procedure. The output data is data for showing the detailed contents of the procedure to the cook by displaying on the screen. Specifically, it may be text data describing the contents of the cooking procedure, still image data, moving image data, or an address indicating the storage location of the above-described data.

作業時間は、各調理の手順において調理人が作業を要する時間を見積もったものである。例えば調理人が行う作業には、食材・調理器具の用意、食材を切る、焼く、味付けを行うなどがある。よって、作業時間では、調理人が作業に専念する必要があり、他の作業を並行して行うことができない。待ち時間は、調理人の作業の後に、手順が完了するのに要する待ち時間を見積もったものである。例えば待ち時間には、調理人の作業により食材を茹で始めてからその食材が茹で上がるまでの時間、調理人の作業により水を入れた鍋を加熱してからその水が沸騰するまでの時間などがある。よって、待ち時間では、調理人が他の作業を並行して行うことができる。   The work time is an estimate of the time required for the cook to work in each cooking procedure. For example, the work performed by the cook includes preparing ingredients and cooking utensils, cutting the ingredients, baking, and seasoning. Therefore, in the working time, the cook needs to concentrate on the work, and other work cannot be performed in parallel. The waiting time is an estimate of the waiting time required for the procedure to be completed after the cook's work. For example, the waiting time includes the time from when the food is boiled by the cook's work until the food is boiled, the time from when the cooker's work heats the pot filled with water until the water boils, etc. is there. Thus, during the waiting time, the cook can perform other operations in parallel.

図5では、鳥サラダ、小龍包、ラーメンの調理法データを例示している。例えば鳥サラダの調理法データでは、最初の手順については作業時間が2分、待ち時間が2分であり、次の手順については作業時間が1分、待ち時間が3分となっている。小龍包の調理法データでは、最初の手順については作業時間が10分、待ち時間がなしとなっている。ラーメンの調理法データでは、最初の手順については作業時間が1分、待ち時間が15分となっている。   FIG. 5 illustrates cooking method data of bird salad, small dragon wrap, and ramen. For example, in the chicken salad cooking method data, the work time is 2 minutes and the waiting time is 2 minutes for the first procedure, and the work time is 1 minute and the waiting time is 3 minutes for the next procedure. In the recipe data of Xiaolongbao, the first procedure has a work time of 10 minutes and no waiting time. In the ramen recipe data, the work time for the first procedure is 1 minute and the waiting time is 15 minutes.

ここで、図5に例示した鳥サラダ、小龍包、ラーメンの調理法データを参照してモニタ表示部17に表示される各注文品目の調理法について、詳細に説明する。なお、各注文品目の調理順は、鳥サラダ、小龍包、ラーメンの順に設定されているものとする。   Here, the cooking method of each order item displayed on the monitor display unit 17 will be described in detail with reference to the cooking method data of the bird salad, small dragon wrap, and ramen illustrated in FIG. In addition, the cooking order of each order item shall be set in the order of bird salad, small dragon wrap, and ramen.

先ずS6では、調理順が最初の鳥サラダについて、調理法データの最初の手順にかかる出力用データを読み出してモニタ表示部17に表示する。図6は、モニタ表示部17の表示例を示す図であり、具体的には注文品目(鳥サラダ)の最初の手順を表示した画面を示す図である。図6において、調理法表示ウインドウG3は、注文品目の調理法を表示するためのウインドウである。調理法表示ウインドウG3は、ステータス表示領域G31と、調理法表示領域G32とを有する。ステータス表示領域G31は、現在調理法を表示している注文品目の名称、その注文品目の何番目の手順であるかを示す情報、待ち時間をカウントしている手順についての情報など、調理法にかかるステータスを表示する領域である。調理法表示領域G32は、読み出した出力用データを表示する領域である。指示アイコンG33は、次の手順の表示指示を視線操作で受け付けるためのアイコンである。   First, in S6, for the bird salad whose cooking order is first, the output data concerning the first procedure of the cooking method data is read and displayed on the monitor display unit 17. FIG. 6 is a diagram showing a display example of the monitor display unit 17, specifically a screen showing a first procedure for order items (bird salad). In FIG. 6, a cooking method display window G3 is a window for displaying the cooking method of the ordered item. The cooking method display window G3 has a status display area G31 and a cooking method display area G32. The status display area G31 shows the name of the order item currently displaying the cooking method, information indicating the order of the order item, information on the procedure counting the waiting time, etc. This is an area for displaying the status. The cooking method display area G32 is an area for displaying the read output data. The instruction icon G33 is an icon for receiving a display instruction for the next procedure through a line-of-sight operation.

図6に示すように、S6では、「鳥サラダ」、「手順1」などの調理法にかかるステータスがステータス表示領域G31に表示され、鳥サラダの最初の手順として読み出された出力用データが調理法表示領域G32に表示される。これにより、ウエアラブル調理補助端末1を用いる調理人は、鳥サラダの最初の手順を確認しながら調理を進めることが可能となる。   As shown in FIG. 6, in S6, the status relating to the cooking method such as “bird salad” and “procedure 1” is displayed in the status display area G31, and the output data read as the first procedure for the bird salad is displayed. It is displayed in the cooking method display area G32. Thereby, the cook using the wearable cooking assistance terminal 1 can advance cooking while confirming the first procedure of the bird salad.

また、S6では、次の手順の表示指示を音声操作又は視線操作により受け付けた場合は、次の手順にかかる出力用データを読み出してモニタ表示部17に表示する。具体的には、音声操作の場合は、「次の手順を表示」などの音声入力から次の手順の表示指示を受け付ける。視線操作の場合は、装着者2が指示アイコンG33を見つめて、視線マーカーG1が指示アイコンG33に所定の時間重複することを検出するなどした場合に、次の手順の表示指示を受け付ける。   In S6, when a display instruction for the next procedure is received by a voice operation or a line-of-sight operation, output data for the next procedure is read and displayed on the monitor display unit 17. Specifically, in the case of a voice operation, a display instruction for the next procedure is received from a voice input such as “display next procedure”. In the case of the line-of-sight operation, when the wearer 2 looks at the instruction icon G33 and detects that the line-of-sight marker G1 overlaps the instruction icon G33 for a predetermined time, the display instruction of the next procedure is accepted.

ここで、現在表示中の手順に対する次の手順の表示は、現在表示中の手順に待ち時間の設定がなければ、鳥サラダの手順1→手順2…小龍包の手順1→手順2…ラーメンの手順1→手順2…などのように、調理順として設定された順序どおりでよい。   Here, the display of the next procedure with respect to the currently displayed procedure is as follows. If there is no waiting time setting in the currently displayed procedure, the procedure 1 → procedure 2 ... the procedure 1 for the small dragon wrapping → the procedure 2 for the ramen The order set as the cooking order, such as Procedure 1 → Procedure 2...

しかしながら、鳥サラダの最初の手順において、調理人が行う作業は、もやしを茹で始めるまでである。そして、作業を終えた後に次の手順の表示指示を受け付けたとしても、もやしが茹で上がるまでの待ち時間である2分間は、並行して他の作業を行うことが可能であるが、鳥サラダの次の手順の作業を行うことはできない。   However, in the first procedure for the bird salad, the work that the chef does is until the bean sprouts are started. And even if it accepts the display instruction of the next procedure after finishing the work, it is possible to perform other work in parallel for 2 minutes which is the waiting time until the bean sprouts, but the bird salad The following procedure cannot be performed.

したがって、現在表示中の手順に待ち時間の設定がある場合は、待ち時間のカウントを開始するとともに、そのカウント中の待ち時間で作業が終了すると見込まれる、他の注文品目の手順を表示する。具体的には、調理順として設定された順序で他の注文品目の作業時間を順次読み出し、カウント中の待ち時間よりも作業時間が短いものを、次の手順として表示する。   Therefore, when there is a waiting time setting in the currently displayed procedure, the waiting time is started to be counted, and the procedure of the other ordered items that are expected to be finished with the waiting time during the counting is displayed. Specifically, the work times of the other ordered items are sequentially read in the order set as the cooking order, and the work time shorter than the waiting time during counting is displayed as the next procedure.

図5の例では、鳥サラダの最初の手順を表示している際に、次の手順の表示指示があった場合は、小龍包→ラーメンの順に最初の手順の作業時間が読み出される。小龍包の最初の手順については、その作業時間が10分であり、カウントが開始された鳥サラダの最初の手順の待ち時間である2分間で作業が終了することが見込めない。ラーメンの最初の手順については、その作業時間が1分であるため、カウントが開始された2分の待ち時間で作業が終了することが見込める。したがって、ラーメンの最初の手順にかかる出力用データが読み出されてモニタ表示部17に表示されることとなる。   In the example of FIG. 5, when the first procedure for the bird salad is displayed and there is a display instruction for the next procedure, the working time of the first procedure is read in the order of small dragon parcel → ramen. For the first procedure of Xiaolongbao, the work time is 10 minutes, and it is not expected that the work will be completed in 2 minutes, which is the waiting time of the first procedure of the bird salad that has started counting. As for the first procedure of ramen, since the work time is 1 minute, it can be expected that the work will be completed in a waiting time of 2 minutes when counting is started. Therefore, the output data relating to the first procedure of the ramen is read and displayed on the monitor display unit 17.

図7は、モニタ表示部17の表示例を示す図であり、具体的には図6で次の手順の表示指示があった場合に表示される、注文品目(ラーメン)の最初の手順の表示画面を示す図である。図6に示すように、ステータス表示領域G31には、「ラーメン」、「手順1」などの他、手順が完了するまで待ち時間をカウントしている注文品目である「鳥サラダ」や、そのカウント中の待ち時間である「1:30」など、調理法にかかるステータスが表示される。調理法表示領域G32には、ラーメンの最初の手順として読み出された出力用データが表示される。これにより、ウエアラブル調理補助端末1を用いる調理人は、いずれかの注文品目を調理している際の待ち時間に、他の注文品目の手順を確認しながら調理を進めることが可能となる。また、調理人は、ステータス表示領域G31を確認することで、待ち時間をカウントしている注文品目や、その待ち時間を認識することができる。   FIG. 7 is a diagram showing a display example of the monitor display unit 17. Specifically, the display of the first procedure of the order item (ramen) displayed when there is an instruction to display the next procedure in FIG. 6. It is a figure which shows a screen. As shown in FIG. 6, in the status display area G31, in addition to “ramen”, “procedure 1”, etc., “bird salad” which is an order item for which the waiting time is counted until the procedure is completed, and the count The status relating to the cooking method is displayed, such as “1:30” which is the waiting time. In the cooking method display area G32, output data read as the first procedure of ramen is displayed. Thereby, the cook using the wearable cooking assistance terminal 1 can proceed cooking while checking the procedure of the other ordered items during the waiting time when any ordered item is being cooked. Further, the cook can recognize the order item counting the waiting time and the waiting time by checking the status display area G31.

ここで、音声操作又は視線操作により次の手順の表示指示があった場合、カウント中の待ち時間で作業が終了すると見込まれる、他の注文品目の手順を表示しようにも、条件を満たす手順が見つからないことがある。このように、カウント中の待ち時間で作業が終了すると見込まれる手順がない場合は、設定された順序どおりに作業が行われて、現在カウント中である手順の次の手順を表示するとともに、そのカウントが終了するまでの間は、次の手順の表示指示を無効とする。なお、次の手順の表示指示を無効とする方法については、その表示指示の音声コマンドを認識しない、指示アイコンG33の表示を行わないなどであってよい。   Here, if there is a display instruction for the next procedure by voice operation or line-of-sight operation, there is a procedure that satisfies the conditions to display the procedure of other ordered items that are expected to be completed in the waiting time during counting. It may not be found. In this way, if there is no procedure that is expected to finish with the waiting time during counting, the work is performed in the set order, the next step of the procedure currently counting is displayed, and Until the count ends, the display instruction of the next procedure is invalidated. As a method of invalidating the display instruction of the next procedure, the voice command of the display instruction may not be recognized, or the instruction icon G33 may not be displayed.

例えば、図5の例では、鳥サラダ、ラーメン以外の他の注文品目が小龍包のみとなり、その作業時間が10分であることから、条件を満たす手順が見つからないこととなる。したがって、図6に例示した表示画面において、次の手順の表示指示があった場合は、現在カウント中である鳥サラダ、手順1の次の手順を表示するとともに、そのカウントが終了するまでの間は、その次の手順の表示指示を無効とする。   For example, in the example of FIG. 5, the order item other than the bird salad and ramen is only small dragon parcel, and the work time is 10 minutes. Therefore, in the display screen illustrated in FIG. 6, when there is an instruction to display the next procedure, the bird salad currently being counted, the procedure following procedure 1 are displayed, and until the count ends. Invalidates the display instruction of the next procedure.

図8は、モニタ表示部17の表示例を示す図であり、具体的には図6で次の手順の表示指示があった場合に表示される、注文品目(鳥サラダ)の手順2の表示画面を示す図である。図8に示すように、ステータス表示領域G31には、「鳥サラダ」、「手順2」などの他、手順が完了するまで待ち時間をカウントしている注文品目である「鳥サラダ」、「ラーメン」や、そのカウント中の待ち時間である「0:15」、「14:50」など、調理法にかかるステータスが表示される。調理法表示領域G32には、鳥サラダの手順2として読み出された出力用データが表示される。   FIG. 8 is a diagram showing a display example of the monitor display unit 17. Specifically, the display of the order item (bird salad) procedure 2 displayed when the display instruction of the next procedure is given in FIG. 6. It is a figure which shows a screen. As shown in FIG. 8, in the status display area G31, in addition to “bird salad”, “procedure 2”, etc., “bird salad”, “ramen” which are the order items for which the waiting time is counted until the procedure is completed are displayed. "And the status related to the cooking method such as" 0:15 "and" 14:50 "which are waiting times during the counting. In the cooking method display area G32, the output data read as the procedure 2 of the bird salad is displayed.

これにより、ウエアラブル調理補助端末1を用いる調理人は、いずれかの注文品目を調理している際の待ち時間に、その待ち時間で作業が終了すると見込まれる手順がない場合は、設定された順序どおりの次の手順を確認し、次の手順を進める際に必要な準備を進めることが可能となる。また、カウントが行われている間は、次の手順の表示指示が無効となっているため、不用意な操作によって作業ができない手順への表示が順次行われてしまうことを防止できる。   Thereby, the cook who uses the wearable cooking assistance terminal 1 sets the order when the waiting time when cooking any order item does not have a procedure expected to end the work at the waiting time. It is possible to confirm the next step as usual and to proceed with the preparations necessary to proceed with the next step. Since the display instruction of the next procedure is invalid while the count is being performed, it is possible to prevent the display to the procedure that cannot be performed due to an inadvertent operation from being sequentially performed.

次に、各注文品目の調理法を設定された調理順でモニタ表示部17に表示する(S6)際に、ウエアラブル調理補助端末1が制御部121の制御の下で行う処理の詳細について、図9、図10を参照して説明する。図9、図10は、本実施形態にかかるウエアラブル調理補助端末1の処理を示すフローチャートである。   Next, when the cooking method of each order item is displayed on the monitor display unit 17 in the set cooking order (S6), the details of the process performed by the wearable cooking assistance terminal 1 under the control of the control unit 121 will be described. 9. Description will be made with reference to FIG. 9 and 10 are flowcharts showing processing of the wearable cooking assistance terminal 1 according to the present embodiment.

図9に示すように、処理が開始されると、制御部121は、調理順として設定された最初の注文品目の最初の手順を、調理法データD1を参照してモニタ表示部17に表示する(S10)。次いで、制御部121は、音声操作又は視線操作による次の手順の表示指示の有無を判定し、現在表示中の手順の次の手順を表示するかを判定する(S11)。ここで、次の手順の表示指示がある場合(S11:YES)はS12へ処理を進め、次の手順の表示指示がない場合(S11:NO)はS18へ処理を進める。   As shown in FIG. 9, when the process is started, the control unit 121 displays the first procedure of the first order item set as the cooking order on the monitor display unit 17 with reference to the cooking method data D1. (S10). Next, the control unit 121 determines whether there is a display instruction for the next procedure by a voice operation or a line-of-sight operation, and determines whether to display the next procedure after the currently displayed procedure (S11). If there is a display instruction for the next procedure (S11: YES), the process proceeds to S12. If there is no display instruction for the next procedure (S11: NO), the process proceeds to S18.

S12において、制御部121は、調理法データD1を参照して、現在表示中の手順に待ち時間の設定があるか否かを判定する。ここで、待ち時間の設定がある場合(S12:YES)はS15へ処理を進める。S15では、その設定された待ち時間のカウントを開始して、S16へ処理を進める。なお、待ち時間の設定がない場合(S12:NO)はS13へ処理を進める。   In S <b> 12, the control unit 121 refers to the cooking method data D <b> 1 and determines whether there is a waiting time setting in the currently displayed procedure. If there is a waiting time setting (S12: YES), the process proceeds to S15. In S15, the set waiting time is started, and the process proceeds to S16. If no waiting time is set (S12: NO), the process proceeds to S13.

S13において、制御部121は、現在待ち時間をカウント中であるか否かを判定する。ここで、現在待ち時間をカウント中でない場合(S13:NO)は、現在表示中の手順に待ち時間がなく、待ち時間をカウント中の手順もないことから、調理順として設定された順序どおりの次の手順を、調理法データD1を参照してモニタ表示部17に表示する(S14)。現在待ち時間をカウント中である場合(S13:YES)は、待ち時間をカウント中の手順があることから、S16へ処理を進める。   In S13, the control unit 121 determines whether or not the current waiting time is being counted. Here, when the current waiting time is not being counted (S13: NO), there is no waiting time in the currently displayed procedure, and there is no procedure that is counting the waiting time. The next procedure is displayed on the monitor display unit 17 with reference to the cooking method data D1 (S14). If the waiting time is currently being counted (S13: YES), the process proceeds to S16 because there is a procedure for counting the waiting time.

S16において、制御部121は、次の手順の表示処理として、図10に例示したサブルーチンを実行する。具体的には、図10に示すように、現在手順を表示している注文品目とは別の注文品目の作業時間を、調理順として設定された順序で順次読み出し、その作業時間がカウント中の待ち時間よりも短いか否かを判定する(S161)。ここで、読み出した作業時間がカウント中の待ち時間よりも短い場合(S161:YES)は、その作業時間が短いと判定された別の注文品目の手順を、調理法データD1を参照してモニタ表示部17に表示する(S162)。なお、順次読み出された作業時間について、カウント中の待ち時間よりも短いものがない場合(S161:NO)は、カウント中の待ち時間で作業が終了すると見込まれる手順がないことから、順序どおりに、現在カウント中である手順の次の手順を、調理法データD1を参照してモニタ表示部17に表示するとともに(S163)、次の手順へ進むための表示指示を無効とする(S164)。   In S16, the control unit 121 executes the subroutine illustrated in FIG. 10 as the display process of the next procedure. Specifically, as shown in FIG. 10, the working time of the order item different from the order item displaying the current procedure is sequentially read out in the order set as the cooking order, and the working time is being counted. It is determined whether it is shorter than the waiting time (S161). Here, when the read work time is shorter than the waiting time during counting (S161: YES), the procedure of another order item determined to be short is monitored with reference to the cooking method data D1. It displays on the display part 17 (S162). If there is no work time that is sequentially read out and shorter than the waiting time during counting (S161: NO), there is no procedure expected to end the work with the waiting time during counting. Next, the procedure next to the procedure currently being counted is displayed on the monitor display unit 17 with reference to the cooking method data D1 (S163), and the display instruction for proceeding to the next procedure is invalidated (S164). .

S14、S16に次ぐS17において、制御部121は、各注文品目の調理法について全ての手順を表示し終えるなどして、調理法の表示を終了するか否かを判定する。調理法の表示を終了する場合(S17:YES)は、調理法表示ウインドウG3を消去して処理を終了する。全ての手順を表示し終えておらず、調理法の表示を継続する場合(S17:NO)は、調理法表示ウインドウG3の表示を継続してS11へ処理を戻す。   In S17 following S14 and S16, the control unit 121 determines whether or not to end the display of the cooking method, for example, by displaying all the procedures for the cooking method of each ordered item. When the display of the cooking method is to be ended (S17: YES), the cooking method display window G3 is deleted and the process is ended. When not displaying all the procedures and continuing the display of the cooking method (S17: NO), the display of the cooking method display window G3 is continued and the process returns to S11.

S18において、制御部121は、次の手順へ進むための表示指示が無効であるか否かを判定する。ここで、無効である場合(S18:YES)は、カウント中の待ち時間で作業が終了すると見込まれる手順がない状態であることから、待ち時間のカウントが終了したか否かを判定する(S19)。そして、カウントが終了している場合(S19:YES)は、次の手順へ進むための指示を有効にして(S20)、S11へ処理を戻す。次の手順の表示指示を有効とする方法については、その表示指示の音声コマンドを認識する、指示アイコンG33を表示するなどであってよい。なお、次の手順へ進むための表示指示が有効である場合(S18:NO)や、待ち時間のカウントが終了していない場合(S19:NO)は、そのままS11へ処理を戻す。   In S18, the control unit 121 determines whether or not the display instruction for proceeding to the next procedure is invalid. Here, when it is invalid (S18: YES), it is in a state where there is no procedure expected to end the work during the counting waiting time, and therefore it is determined whether or not the waiting time counting has ended (S19). ). If the count has ended (S19: YES), the instruction for proceeding to the next procedure is validated (S20), and the process returns to S11. As a method for validating the display instruction of the next procedure, the voice command of the display instruction may be recognized, or the instruction icon G33 may be displayed. If the display instruction for proceeding to the next procedure is valid (S18: NO), or if the waiting time count has not ended (S19: NO), the process returns to S11 as it is.

以上のように、ウエアラブル調理補助端末1は、客からの注文情報に含まれる複数の注文品目の調理法について、予め設定された調理順で注文品目ごとに手順をモニタ表示部17に表示する。制御部121は、表示されている手順を、次の手順に切り替えるための表示指示を受け付け、その表示指示に応じて次の手順を表示させる。制御部121は、表示指示があった際に表示されている手順について、調理人が他の作業を並行して行う待ち時間が予め設定されている場合に、その表示されている手順の注文品目とは異なる他の注文品目の手順を表示させる。したがって、ウエアラブル調理補助端末1は、いずれかの注文品目を調理している際の待ち時間に、他の注文品目の手順を表示することで、調理人が効率的に作業を進める手順を表示することを可能としている。   As described above, the wearable cooking assistance terminal 1 displays the procedure on the monitor display unit 17 for each ordered item in the cooking order set in advance for the cooking method of the plurality of ordered items included in the order information from the customer. The control unit 121 receives a display instruction for switching the displayed procedure to the next procedure, and displays the next procedure according to the display instruction. When the waiting time for the cook to perform other work in parallel is set in advance for the procedure displayed when the display instruction is given, the control unit 121 orders the item in the displayed procedure. Display the order of other order items that are different from. Therefore, the wearable cooking assistance terminal 1 displays the procedure of the cook proceeding efficiently by displaying the procedure of the other ordered items during the waiting time when any ordered item is being cooked. Making it possible.

なお、本実施形態では、装着者2に装着して使用するウエアラブル調理補助端末1を例示した。しかしながら、調理補助端末における表示や操作構成は据え置き型であってよい。すなわち、調理補助端末は、所定の位置に設置されたLCD(Liquid Crystal Display)等のディスプレイやタッチパネルや操作キー等の操作入力部を備えたものであってもよい。例えば、モニタ表示は、ヘッドマウントディスプレイ10ではなく、所定の位置に設置されたディスプレイに表示してもよい。また、使用者の操作入力についても、音声操作又は視線操作ではなく、タッチパネルや操作キーで行ってもよい。より具体的には、(ア)ウエアラブル調理補助端末1において、ヘッドマウントディスプレイ10のモニタ表示部17とは別に据え置き型のディスプレイを用いる場合と、(イ)ウエアラブル調理補助端末1を据え置き型とする場合とがある。(ア)では、注文表示ウインドウG2が据え置き型のディスプレイに表示され、音声操作を受け付ける。(イ)では、注文表示ウインドウG2が据え置き型のディスプレイ(タッチパネル)に表示され、そのディスプレイのタッチ操作を受け付ける。   In the present embodiment, the wearable cooking assistance terminal 1 used by being worn by the wearer 2 is illustrated. However, the display and operation configuration on the cooking assistance terminal may be stationary. That is, the cooking assistance terminal may include a display such as an LCD (Liquid Crystal Display) installed at a predetermined position, or an operation input unit such as a touch panel or operation keys. For example, the monitor display may be displayed not on the head mounted display 10 but on a display installed at a predetermined position. Also, the user's operation input may be performed by a touch panel or operation keys instead of voice operation or line-of-sight operation. More specifically, (a) the wearable cooking assistance terminal 1 uses a stationary display separately from the monitor display unit 17 of the head mounted display 10, and (a) the wearable cooking assistance terminal 1 is stationary. There are cases. In (a), an order display window G2 is displayed on a stationary display and accepts a voice operation. In (a), an order display window G2 is displayed on a stationary display (touch panel) and a touch operation on the display is accepted.

また、本実施形態の制御部121や注文管理サーバ30のCPUが実行するプログラムは、ROM等に予め組み込んで提供するように構成してもよい。また、上記プログラムは、インストール可能な形式又は実行可能な形式のファイルでCD−ROM、フレキシブルディスク(FD)、CD−R、DVD等のコンピュータで読み取り可能な記録媒体に記録されて提供されてもよい。   The program executed by the control unit 121 and the CPU of the order management server 30 according to the present embodiment may be configured to be provided by being incorporated in advance in a ROM or the like. The program may be provided by being recorded in a computer-readable recording medium such as a CD-ROM, a flexible disk (FD), a CD-R, or a DVD in an installable or executable format file. Good.

また、上記プログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成しても良い。また、上記プログラムをインターネット等のネットワーク経由で提供または配布するように構成しても良い。   Further, the program may be provided by being stored on a computer connected to a network such as the Internet and downloaded via the network. The program may be provided or distributed via a network such as the Internet.

また、本発明は、上記実施の形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記実施の形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素からいくつかの構成要素を削除してもよい。さらに、異なる実施の形態にわたる構成要素を適宜組み合わせても良い。   The present invention is not limited to the above-described embodiment as it is, and can be embodied by modifying the constituent elements without departing from the scope of the invention in the implementation stage. In addition, various inventions can be formed by appropriately combining a plurality of constituent elements disclosed in the above embodiments. For example, some components may be deleted from all the components shown in the embodiment. Furthermore, constituent elements over different embodiments may be appropriately combined.

1 ウエアラブル調理補助端末
2 装着者
2a 頭部
2b 視線
10 ヘッドマウントディスプレイ
12 インタフェースボックス
15 マイク
17 モニタ表示部
19 視線認識用カメラ
30 注文管理サーバ
34 送受信装置
35 注文端末
121 制御部
122 音声処理部
123 送受信部
124 情報表示部
125 画像処理部
D1 調理法データ
G1 視線マーカー
G3 調理法表示ウインドウ
G31 ステータス表示領域
G32 調理法表示領域
G33 指示アイコン
NT ネットワーク
DESCRIPTION OF SYMBOLS 1 Wearable cooking assistance terminal 2 Wearer 2a Head 2b Line of sight 10 Head mounted display 12 Interface box 15 Microphone 17 Monitor display part 19 Line-of-sight recognition camera 30 Order management server 34 Transmission / reception apparatus 35 Order terminal 121 Control part 122 Voice processing part 123 Transmission / reception Unit 124 information display unit 125 image processing unit D1 cooking method data G1 line-of-sight marker G3 cooking method display window G31 status display region G32 cooking method display region G33 instruction icon NT network

特開2001−76048公報JP 2001-76048 A

Claims (6)

客からの注文情報に含まれる複数の注文品目の調理法について、予め設定された調理順で注文品目ごとに、当該注文品目の手順を記憶手段から順次読み出して表示する表示手段と、
前記表示されている手順を、次の手順に切り替えるための表示指示を受け付ける受付手段と、
前記表示指示に応じて前記次の手順を前記表示手段に表示させる表示制御手段と、
を備え、
前記表示制御手段は、前記表示指示があった際に前記表示されている手順について、調理人が他の作業を並行して行う待ち時間が予め設定されている場合に、前記表示されている手順の注文品目とは異なる他の注文品目の手順を、前記記憶手段から読み出して前記表示手段に表示させることを特徴とする調理補助端末。
Display means for sequentially reading out and displaying the order of the order items from the storage means for each order item in a preset cooking order for cooking methods of a plurality of order items included in the order information from the customer;
Receiving means for receiving a display instruction for switching the displayed procedure to the next procedure;
Display control means for causing the display means to display the next procedure in response to the display instruction;
With
The display control means is configured to display the displayed procedure when a waiting time for the cook to perform other work in parallel is preset for the displayed procedure when the display instruction is issued. A cooking assistance terminal characterized in that a procedure of another order item different from the order item is read from the storage means and displayed on the display means.
前記表示制御手段は、調理人が作業に専念しなければならない作業時間が前記待ち時間よりも短く設定された前記他の注文品目の手順を、前記記憶手段から読み出して前記表示手段に表示させることを特徴とする請求項1に記載の調理補助端末。   The display control means reads out the procedure of the other order item in which the work time that the cook must concentrate on work is set shorter than the waiting time from the storage means and causes the display means to display the procedure. The cooking assistance terminal according to claim 1. 前記待ち時間のカウントを行う計時手段を更に備え、
前記表示制御手段は、前記表示指示があった際に前記表示されている手順について、前記待ち時間が予め設定されている場合に、当該待ち時間のカウントを開始させるとともに、当該カウントが開始された待ち時間を前記表示手段に表示させることを特徴とする請求項1又は2に記載の調理補助端末。
It further comprises time measuring means for counting the waiting time,
The display control means starts counting the waiting time and starts counting the waiting time when the waiting time is preset for the displayed procedure when the display instruction is issued. The cooking assistance terminal according to claim 1 or 2, wherein a waiting time is displayed on the display means.
前記表示制御手段は、前記作業時間が前記待ち時間よりも短く設定された前記他の注文品目の手順が存在しない場合には、前記次の手順を前記表示手段に表示させることを特徴とする請求項3に記載の調理補助端末。   The display control means causes the display means to display the next procedure when there is no procedure for the other order item in which the work time is set shorter than the waiting time. Item 4. The cooking assistance terminal according to item 3. 前記受付手段は、使用者からの音声コマンドに応じた音声操作、又は、前記使用者の視線位置に応じた視線操作をもとに、前記表示指示を受け付けることを特徴とする請求項1〜4のいずれか一項に記載の調理補助端末。   The said reception means receives the said display instruction | indication based on the voice operation according to the voice command from a user, or the gaze operation according to the said user's gaze position. The cooking assistance terminal as described in any one of. 調理補助端末のコンピュータに、
客からの注文情報に含まれる複数の注文品目の調理法について、予め設定された調理順で注文品目ごとに、当該注文品目の手順を記憶手段から順次読み出して表示手段に表示するステップと、
前記表示されている手順を、次の手順に切り替えるための表示指示を受け付けるステップと、
前記表示指示に応じて前記次の手順を前記表示手段に表示させるステップと、
前記表示指示があった際に前記表示されている手順について、調理人が他の作業を並行して行う待ち時間が予め設定されている場合に、前記表示されている手順の注文品目とは異なる他の注文品目の手順を、前記記憶手段から読み出して前記表示手段に表示させるステップと、
を実行させるためのプログラム。
In the cooking assistant computer,
For each order item in a preset cooking order for the ordering method included in the order information from the customer for each order item, sequentially reading the order item procedure from the storage means, and displaying on the display means,
Receiving a display instruction for switching the displayed procedure to the next procedure;
Displaying the next procedure on the display means in response to the display instruction;
When the waiting time for the cook to perform other work in parallel is preset for the displayed procedure when the display instruction is given, the order item is different from the displayed procedure. Reading out the order of other order items from the storage means and displaying on the display means;
A program for running
JP2009275712A 2009-12-03 2009-12-03 Cooking assistance terminal and program Expired - Fee Related JP5193988B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009275712A JP5193988B2 (en) 2009-12-03 2009-12-03 Cooking assistance terminal and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009275712A JP5193988B2 (en) 2009-12-03 2009-12-03 Cooking assistance terminal and program

Publications (2)

Publication Number Publication Date
JP2011118683A true JP2011118683A (en) 2011-06-16
JP5193988B2 JP5193988B2 (en) 2013-05-08

Family

ID=44283926

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009275712A Expired - Fee Related JP5193988B2 (en) 2009-12-03 2009-12-03 Cooking assistance terminal and program

Country Status (1)

Country Link
JP (1) JP5193988B2 (en)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014132521A1 (en) * 2013-02-28 2014-09-04 ソニー株式会社 Information processing device and storage medium
JP2015164004A (en) * 2014-02-28 2015-09-10 三菱重工業株式会社 toll collection system, toll collection method, and program
JP2017134575A (en) * 2016-01-27 2017-08-03 セイコーエプソン株式会社 Display device, control method of display device, and program
JP2017182413A (en) * 2016-03-30 2017-10-05 セイコーエプソン株式会社 Head-mounted type display device, control method for the same, and computer program
US9880633B2 (en) 2015-09-01 2018-01-30 Kabushiki Kaisha Toshiba Eyeglasses-type wearable device and method using the same
US9897810B2 (en) 2015-09-02 2018-02-20 Kbushiki Kaisha Toshiba Spectacle-type electronic device and assisting method
WO2018074206A1 (en) * 2016-10-19 2018-04-26 住友電装株式会社 Operation instruction device
WO2018131081A1 (en) * 2017-01-10 2018-07-19 富士通株式会社 Work assistance program, work assistance device, and work assistance method
US10133900B2 (en) 2014-10-30 2018-11-20 Philips Lighting Holding B.V. Controlling the output of contextual information using a computing device
US10235856B2 (en) 2015-09-01 2019-03-19 Kabushiki Kaisha Toshiba Electronic apparatus and method
US10664044B2 (en) 2015-07-07 2020-05-26 Seiko Epson Corporation Display device, control method for display device, and computer program
US10671849B2 (en) 2015-09-01 2020-06-02 Kabushiki Kaisha Toshiba System and method for sensor based visual adjustments
JP2020166557A (en) * 2019-03-29 2020-10-08 株式会社エヌ・ティ・ティ・データ Cooking support system
US10956840B2 (en) 2015-09-04 2021-03-23 Kabushiki Kaisha Toshiba Information processing apparatus for determining user attention levels using biometric analysis
US11016295B2 (en) 2015-09-01 2021-05-25 Kabushiki Kaisha Toshiba Eyeglasses wearable device, method of controlling the eyeglasses wearable device and data management server
US11074887B2 (en) 2015-09-03 2021-07-27 Kabushiki Kaisha Toshiba Glasses-type wearable terminal and data processing method
JP6978570B1 (en) * 2020-09-30 2021-12-08 PayPay株式会社 Setting device, setting method and setting program
JP2022052324A (en) * 2020-09-23 2022-04-04 株式会社x garden Cooking support device, program, and method for supporting cooking
JP7505088B2 (en) 2019-09-30 2024-06-24 マクセル株式会社 Linked display system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05187642A (en) * 1992-01-14 1993-07-27 Matsushita Electric Works Ltd Cooking process indicator
JP2004102727A (en) * 2002-09-10 2004-04-02 Mitsubishi Heavy Ind Ltd Work support system
JP2009216338A (en) * 2008-03-12 2009-09-24 Sharp Corp Cooking assisting device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05187642A (en) * 1992-01-14 1993-07-27 Matsushita Electric Works Ltd Cooking process indicator
JP2004102727A (en) * 2002-09-10 2004-04-02 Mitsubishi Heavy Ind Ltd Work support system
JP2009216338A (en) * 2008-03-12 2009-09-24 Sharp Corp Cooking assisting device

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
BRANDBURY, J. S., SHELL, J. S. AND KNOWLES, C. B.: "Hands On Cooking: Towards an Attentive Kitchen", CHI 2003 EXTENDED ABSTRUCTS ON HUMAN FATORS IN COMPUTING SYSTEMS, JPN6012015052, 2003, pages 996 - 997, ISSN: 0002181267 *

Cited By (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2014132521A1 (en) * 2013-02-28 2017-02-02 ソニー株式会社 Information processing apparatus and storage medium
WO2014132521A1 (en) * 2013-02-28 2014-09-04 ソニー株式会社 Information processing device and storage medium
JP2015164004A (en) * 2014-02-28 2015-09-10 三菱重工業株式会社 toll collection system, toll collection method, and program
US10133900B2 (en) 2014-10-30 2018-11-20 Philips Lighting Holding B.V. Controlling the output of contextual information using a computing device
US11301034B2 (en) 2015-07-07 2022-04-12 Seiko Epson Corporation Display device, control method for display device, and computer program
US11073901B2 (en) 2015-07-07 2021-07-27 Seiko Epson Corporation Display device, control method for display device, and computer program
US10664044B2 (en) 2015-07-07 2020-05-26 Seiko Epson Corporation Display device, control method for display device, and computer program
US10755545B2 (en) 2015-09-01 2020-08-25 Kabushiki Kaisha Toshiba Electronic apparatus and method
US11002975B2 (en) 2015-09-01 2021-05-11 Kabushiki Kaisha Toshiba System and method for image generation based on a display-attachable wearable device
US12135432B2 (en) 2015-09-01 2024-11-05 Kbushiki Kaisha Toshiba System and method directed to an eyeglasses-type wearable device
US10168793B2 (en) 2015-09-01 2019-01-01 Kabushiki Kaisha Toshiba Eyeglasses-type wearable device and method using the same
US10235856B2 (en) 2015-09-01 2019-03-19 Kabushiki Kaisha Toshiba Electronic apparatus and method
US11880508B2 (en) 2015-09-01 2024-01-23 Kabushiki Kaisha Toshiba Eyeglasses-type wearable device and method using the same
US11789279B2 (en) 2015-09-01 2023-10-17 Kabushiki Kaisha Toshiba System and method for virtual image adjustment
US10671849B2 (en) 2015-09-01 2020-06-02 Kabushiki Kaisha Toshiba System and method for sensor based visual adjustments
US10679059B2 (en) 2015-09-01 2020-06-09 Kabushiki Kaisha Toshiba System and method for visual image adjustment
US10682405B2 (en) 2015-09-01 2020-06-16 Kabushiki Kaisha Toshiba System and method and device for adjusting image positioning
US10685232B2 (en) 2015-09-01 2020-06-16 Kabushiki Kaisha Toshiba Wearable device for displaying checklist of a work
US9880633B2 (en) 2015-09-01 2018-01-30 Kabushiki Kaisha Toshiba Eyeglasses-type wearable device and method using the same
US11741811B2 (en) 2015-09-01 2023-08-29 Kabushiki Kaisha Toshiba Electronic apparatus and method
US10877567B2 (en) 2015-09-01 2020-12-29 Kabushiki Kaisha Toshiba Eyeglasses-type wearable device and method using the same
US11428944B2 (en) 2015-09-01 2022-08-30 Kabushiki Kaisha Toshiba Wearable device and method for visual image adjustment
US11176797B2 (en) 2015-09-01 2021-11-16 Kabushiki Kaisha Toshiba Electronic apparatus and method
US11016295B2 (en) 2015-09-01 2021-05-25 Kabushiki Kaisha Toshiba Eyeglasses wearable device, method of controlling the eyeglasses wearable device and data management server
US11169617B2 (en) 2015-09-01 2021-11-09 Kabushiki Kaisha Toshiba Eyeglasses-type wearable device and method using the same
US9897810B2 (en) 2015-09-02 2018-02-20 Kbushiki Kaisha Toshiba Spectacle-type electronic device and assisting method
US11074887B2 (en) 2015-09-03 2021-07-27 Kabushiki Kaisha Toshiba Glasses-type wearable terminal and data processing method
US11545107B2 (en) 2015-09-03 2023-01-03 Kabushiki Kaisha Toshiba Glasses-type wearable terminal and data processing method
US10956840B2 (en) 2015-09-04 2021-03-23 Kabushiki Kaisha Toshiba Information processing apparatus for determining user attention levels using biometric analysis
JP2017134575A (en) * 2016-01-27 2017-08-03 セイコーエプソン株式会社 Display device, control method of display device, and program
JP2017182413A (en) * 2016-03-30 2017-10-05 セイコーエプソン株式会社 Head-mounted type display device, control method for the same, and computer program
WO2018074206A1 (en) * 2016-10-19 2018-04-26 住友電装株式会社 Operation instruction device
WO2018131081A1 (en) * 2017-01-10 2018-07-19 富士通株式会社 Work assistance program, work assistance device, and work assistance method
JPWO2018131081A1 (en) * 2017-01-10 2019-11-07 富士通株式会社 Work support program, work support device, and work support method
JP2020166557A (en) * 2019-03-29 2020-10-08 株式会社エヌ・ティ・ティ・データ Cooking support system
JP7505088B2 (en) 2019-09-30 2024-06-24 マクセル株式会社 Linked display system
JP2022052324A (en) * 2020-09-23 2022-04-04 株式会社x garden Cooking support device, program, and method for supporting cooking
JP2022057936A (en) * 2020-09-30 2022-04-11 PayPay株式会社 Setting device, setting method, and setting program
JP6978570B1 (en) * 2020-09-30 2021-12-08 PayPay株式会社 Setting device, setting method and setting program

Also Published As

Publication number Publication date
JP5193988B2 (en) 2013-05-08

Similar Documents

Publication Publication Date Title
JP5193988B2 (en) Cooking assistance terminal and program
JP4824793B2 (en) Wearable terminal device and program
JP4928592B2 (en) Image processing apparatus and program
JP6269028B2 (en) POS system and program
US10467616B2 (en) Voice data processor for distinguishing multiple voice inputs
JP2011048440A (en) Cooking assistance terminal and program
JP2011081737A (en) Cooking assistance terminal and program
JP2018128979A (en) Kitchen supporting system
US11900772B2 (en) Mobile terminal, weighing device, POS terminal, non-transitory computer-readable medium, sales processing system, and sales processing method
JP2011048462A (en) Sales support device and program
WO2015137559A1 (en) Uchef service system and method using terminal
JP2011118684A (en) Cooking assisting terminal and program
JP2011048426A (en) Cooking auxiliary terminal and program
CN110610249A (en) Information processing method, information display method, device and service terminal
WO2019208327A1 (en) Customer service assistance system
US20150363853A1 (en) System, assembly, and method for providing corrective eyewear
JP5166374B2 (en) Wearable ordering terminal and program
KR20170031722A (en) System and method for processing information using wearable device
JP5166365B2 (en) Wearable terminal device and program
JP6261639B2 (en) Menu generation system
KR20210003639A (en) Customer management device and customer management method
JP6781385B2 (en) Information processing device, information processing method, information processing program, user terminal and terminal control program
JP2019125162A (en) Ordered dish provision support system
JP6955053B1 (en) Payment processing method, payment processing device and payment program
US20200394572A1 (en) Reservation order processing system and reservation order processing method

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120314

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120327

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120528

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130122

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130204

R150 Certificate of patent or registration of utility model

Ref document number: 5193988

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160208

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees