JP2018147416A - 食事の識別システムと識別方法及び識別プログラム - Google Patents
食事の識別システムと識別方法及び識別プログラム Download PDFInfo
- Publication number
- JP2018147416A JP2018147416A JP2017044522A JP2017044522A JP2018147416A JP 2018147416 A JP2018147416 A JP 2018147416A JP 2017044522 A JP2017044522 A JP 2017044522A JP 2017044522 A JP2017044522 A JP 2017044522A JP 2018147416 A JP2018147416 A JP 2018147416A
- Authority
- JP
- Japan
- Prior art keywords
- food
- meal
- distance
- image
- identification
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 235000012054 meals Nutrition 0.000 title claims abstract description 65
- 238000000034 method Methods 0.000 title claims abstract description 9
- 235000013305 food Nutrition 0.000 claims abstract description 186
- 238000004364 calculation method Methods 0.000 claims description 13
- 238000000926 separation method Methods 0.000 claims description 7
- 235000002864 food coloring agent Nutrition 0.000 claims 1
- 235000016709 nutrition Nutrition 0.000 description 14
- 230000010365 information processing Effects 0.000 description 9
- 230000005484 gravity Effects 0.000 description 7
- 230000010354 integration Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 239000007787 solid Substances 0.000 description 5
- 238000000605 extraction Methods 0.000 description 4
- 235000021189 garnishes Nutrition 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 4
- 240000005856 Lyophyllum decastes Species 0.000 description 3
- 235000013194 Lyophyllum decastes Nutrition 0.000 description 3
- 230000035764 nutrition Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 240000007124 Brassica oleracea Species 0.000 description 2
- 235000003899 Brassica oleracea var acephala Nutrition 0.000 description 2
- 235000011301 Brassica oleracea var capitata Nutrition 0.000 description 2
- 235000001169 Brassica oleracea var oleracea Nutrition 0.000 description 2
- 241000287828 Gallus gallus Species 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 230000037303 wrinkles Effects 0.000 description 2
- 235000016623 Fragaria vesca Nutrition 0.000 description 1
- 240000009088 Fragaria x ananassa Species 0.000 description 1
- 235000011363 Fragaria x ananassa Nutrition 0.000 description 1
- 206010020751 Hypersensitivity Diseases 0.000 description 1
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 230000007815 allergy Effects 0.000 description 1
- 235000021170 buffet Nutrition 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000001055 chewing effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 239000006071 cream Substances 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000000474 nursing effect Effects 0.000 description 1
- 238000000513 principal component analysis Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Image Analysis (AREA)
- Medical Treatment And Welfare Office Work (AREA)
Abstract
Description
食事に含まれる食品の距離画像とカラー画像とを撮像する、少なくとも1台の2.5Dカメラと、
複数の視点から2.5Dカメラにより撮像した、食事に含まれる食品の距離画像とカラー画像とを入力として、
複数の距離画像により、食事に含まれる個々の食品を切り分ける切り分け部と、
複数の距離画像により、個々の食品の体積を求める体積計算部と、
距離画像とカラー画像とから、個々の食品の種類を識別する食品識別部、とを備えている。
2.5Dカメラにより、複数の視点から、食事に含まれる食品の距離画像と食品のカラー画像とを撮像するステップと、
食事識別システムにより、複数の距離画像を用いて、食事に含まれる個々の食品を切り分ける切り分けステップと、
食事識別システムにより、複数の距離画像を用いて、個々の食品の体積を求める体積計算ステップと、
食事識別システムにより、距離画像とカラー画像を用いて、個々の食品の種類を識別する食品識別ステップ、とを実行する。
前記コンピュータに、
複数の距離画像を用いて、食事に含まれる個々の食品を切り分ける切り分けステップと、
複数の距離画像を用いて、個々の食品の体積を求める体積計算ステップと、
距離画像とカラー画像を用いて、個々の食品の種類を識別する食品識別ステップ、とを実行させる。
4,4' 2.5Dカメラ
5 カラーカメラ
6 IRレーザ
7 IRカメラ
8 食品
10 通路
12 ワゴン車
14 トレー
16 平面
17 食器
20 バス
21 平面検出部
22 統合処理部
23 切り分け部
24 体積計算部
25 特徴量抽出部
26 中実度計算部
27 食品識別部
28 食品量計算部
30 メモリ
31 メモリ
32 通信部
34 メモリ
40 スマートフォン
42 テーブル
60,62 食品
70 食品
72 付け合わせ
80 ケーキ
90 食品
92,93 影
Claims (4)
- 食品の距離画像と食品のカラー画像とを撮像する、少なくとも1台の2.5Dカメラと、
複数の視点から2.5Dカメラにより撮像した、食事に含まれる食品の距離画像とカラー画像とを入力として、
複数の距離画像により、食事に含まれる個々の食品を切り分ける切り分け部と、
複数の距離画像により、個々の食品の体積を求める体積計算部と、
距離画像とカラー画像とから、個々の食品の種類を識別する食品識別部、とを有する食事識別システム。 - 前記複数の視点の各々に前記2.5Dカメラが設置されていることを特徴とする、請求項1の食事識別システム。
- 2.5Dカメラにより、複数の視点から、食事に含まれる食品の距離画像と食品のカラー画像とを撮像するステップと、
食事識別システムにより、複数の距離画像を用いて、食事に含まれる個々の食品を切り分ける切り分けステップと、
食事識別システムにより、複数の距離画像を用いて、個々の食品の体積を求める体積計算ステップと、
食事識別システムにより、距離画像とカラー画像を用いて、個々の食品の種類を識別する食品識別ステップ、とを行う食事識別方法。 - 複数の視点で撮像した、食事に含まれる食品の距離画像と食品のカラー画像を入力として、コンピュータにより、食事に含まれる食品の種類と量とを求めるプログラムであって、
前記コンピュータに、
複数の距離画像を用いて、食事に含まれる個々の食品を切り分ける切り分けステップと、
複数の距離画像を用いて、個々の食品の体積を求める体積計算ステップと、
距離画像とカラー画像を用いて、個々の食品の種類を識別する食品識別ステップ、とを実行させる食事識別プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017044522A JP6972481B2 (ja) | 2017-03-09 | 2017-03-09 | 食事の識別システムと識別方法及び識別プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017044522A JP6972481B2 (ja) | 2017-03-09 | 2017-03-09 | 食事の識別システムと識別方法及び識別プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018147416A true JP2018147416A (ja) | 2018-09-20 |
JP6972481B2 JP6972481B2 (ja) | 2021-11-24 |
Family
ID=63592150
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017044522A Active JP6972481B2 (ja) | 2017-03-09 | 2017-03-09 | 食事の識別システムと識別方法及び識別プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6972481B2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020160816A (ja) * | 2019-03-27 | 2020-10-01 | 株式会社ブレイン | 食事識別システムと識別プログラム |
JP2020182742A (ja) * | 2019-05-09 | 2020-11-12 | 株式会社ニデック | 検眼装置及び検眼プログラム |
CN114445614A (zh) * | 2020-10-16 | 2022-05-06 | 技嘉科技股份有限公司 | 餐饮内容识别方法以及餐饮内容识别系统 |
CN114972509A (zh) * | 2022-05-26 | 2022-08-30 | 北京利君成数字科技有限公司 | 一种快速识别餐具位置的方法 |
CN115691010A (zh) * | 2022-10-24 | 2023-02-03 | 深圳进化动力数码科技有限公司 | 基于菜品识别的自动结账方法、系统、设备及存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004259114A (ja) * | 2003-02-27 | 2004-09-16 | Seiko Epson Corp | 物体識別方法および物体識別装置、並びに物体識別プログラム |
JP2014229153A (ja) * | 2013-05-24 | 2014-12-08 | 株式会社ブレイン | 物品識別システムとそのプログラム |
JP2014229154A (ja) * | 2013-05-24 | 2014-12-08 | 株式会社ブレイン | 物品識別システムとそのプログラム |
JP2015130014A (ja) * | 2014-01-06 | 2015-07-16 | 株式会社リコー | 検知装置、検知システム、検知方法およびプログラム |
JP2016020833A (ja) * | 2014-07-14 | 2016-02-04 | 株式会社タニタ | 食材判定装置、方法、プログラム、及びクッキングスケール |
-
2017
- 2017-03-09 JP JP2017044522A patent/JP6972481B2/ja active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004259114A (ja) * | 2003-02-27 | 2004-09-16 | Seiko Epson Corp | 物体識別方法および物体識別装置、並びに物体識別プログラム |
JP2014229153A (ja) * | 2013-05-24 | 2014-12-08 | 株式会社ブレイン | 物品識別システムとそのプログラム |
JP2014229154A (ja) * | 2013-05-24 | 2014-12-08 | 株式会社ブレイン | 物品識別システムとそのプログラム |
JP2015130014A (ja) * | 2014-01-06 | 2015-07-16 | 株式会社リコー | 検知装置、検知システム、検知方法およびプログラム |
JP2016020833A (ja) * | 2014-07-14 | 2016-02-04 | 株式会社タニタ | 食材判定装置、方法、プログラム、及びクッキングスケール |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020160816A (ja) * | 2019-03-27 | 2020-10-01 | 株式会社ブレイン | 食事識別システムと識別プログラム |
JP7250275B2 (ja) | 2019-03-27 | 2023-04-03 | 株式会社ブレイン | 食事識別システムと識別プログラム |
JP2020182742A (ja) * | 2019-05-09 | 2020-11-12 | 株式会社ニデック | 検眼装置及び検眼プログラム |
JP7375332B2 (ja) | 2019-05-09 | 2023-11-08 | 株式会社ニデック | 検眼装置及び検眼プログラム |
CN114445614A (zh) * | 2020-10-16 | 2022-05-06 | 技嘉科技股份有限公司 | 餐饮内容识别方法以及餐饮内容识别系统 |
CN114972509A (zh) * | 2022-05-26 | 2022-08-30 | 北京利君成数字科技有限公司 | 一种快速识别餐具位置的方法 |
CN114972509B (zh) * | 2022-05-26 | 2023-09-29 | 北京利君成数字科技有限公司 | 一种快速识别餐具位置的方法 |
CN115691010A (zh) * | 2022-10-24 | 2023-02-03 | 深圳进化动力数码科技有限公司 | 基于菜品识别的自动结账方法、系统、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
JP6972481B2 (ja) | 2021-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6972481B2 (ja) | 食事の識別システムと識別方法及び識別プログラム | |
Song et al. | Automated body condition scoring of dairy cows using 3-dimensional feature extraction from multiple body regions | |
CN107873101B (zh) | 用于对象辨识和评估的成像系统 | |
JP6125188B2 (ja) | 映像処理方法及び装置 | |
EP2370952B1 (en) | Arrangement and method for determining a body condition score of an animal | |
JP2021515323A (ja) | 遠隔から生体標本を特徴付ける方法と装置 | |
Shimada et al. | Kitchen scene context based gesture recognition: A contest in ICPR2012 | |
CN108921098B (zh) | 人体运动分析方法、装置、设备及存储介质 | |
JP2008204105A (ja) | 自動食事摂取量計測システム及び自動食事摂取量計測方法 | |
Clarkson et al. | Assessing the suitability of the Microsoft Kinect for calculating person specific body segment parameters | |
CN107545236A (zh) | 用于确定个体的年龄的系统和方法 | |
CN113874678B (zh) | 食物测量方法、装置及程序 | |
US11562338B2 (en) | Automated point of sale systems and methods | |
CN110366731A (zh) | 用于指导膳食的图像捕获的系统、方法和计算机程序 | |
CN113302633A (zh) | 食物垃圾检测方法及系统 | |
US20220222844A1 (en) | Method, device, and program for measuring food | |
KR20240123777A (ko) | 음식 측정 방법, 장치, 및 프로그램 | |
JP6876293B2 (ja) | 食事の識別システムとそのプログラム | |
Liao et al. | Food intake estimation method using short-range depth camera | |
JP2018147415A (ja) | 食事の識別システムとそのプログラム | |
US20230196802A1 (en) | Multi-sensor device for dietary tracking | |
Sadeq et al. | Smartphone-based calorie estimation from food image using distance information | |
US11816806B2 (en) | System and method for foot scanning via a mobile computing device | |
JP2019101736A (ja) | 調理内容判別システム及び摂取内容判別システム | |
CN113240727A (zh) | 一种餐盘中菜品余量提示信息的获取系统及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A80 | Written request to apply exceptions to lack of novelty of invention |
Free format text: JAPANESE INTERMEDIATE CODE: A80 Effective date: 20170313 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20170606 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200109 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200625 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210315 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210413 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211012 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211014 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6972481 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |