JP6354653B2 - 拡張現実操作システムおよび拡張現実操作プログラム - Google Patents
拡張現実操作システムおよび拡張現実操作プログラム Download PDFInfo
- Publication number
- JP6354653B2 JP6354653B2 JP2015089901A JP2015089901A JP6354653B2 JP 6354653 B2 JP6354653 B2 JP 6354653B2 JP 2015089901 A JP2015089901 A JP 2015089901A JP 2015089901 A JP2015089901 A JP 2015089901A JP 6354653 B2 JP6354653 B2 JP 6354653B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- augmented reality
- hand
- composite image
- composite
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000003190 augmentative effect Effects 0.000 title claims description 90
- 239000002131 composite material Substances 0.000 claims description 70
- 238000003384 imaging method Methods 0.000 claims description 40
- 230000006870 function Effects 0.000 claims description 7
- 238000010586 diagram Methods 0.000 description 15
- 238000000034 method Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 6
- 230000003993 interaction Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00405—Output means
- H04N1/00408—Display of information to the user, e.g. menus
- H04N1/00413—Display of information to the user, e.g. menus using menus, i.e. presenting the user with a plurality of selectable options
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
- G06F3/1203—Improving or facilitating administration, e.g. print management
- G06F3/1205—Improving or facilitating administration, e.g. print management resulting in increased flexibility in print job configuration, e.g. job settings, print requirements, job tickets
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/12—Digital output to print unit, e.g. line printer, chain printer
- G06F3/1201—Dedicated interfaces to print systems
- G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
- G06F3/1237—Print job management
- G06F3/1253—Configuration of print job parameters, e.g. using UI at the client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/0035—User-machine interface; Control console
- H04N1/00493—Particular location of the interface or console
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- User Interface Of Digital Computer (AREA)
- Facsimiles In General (AREA)
- Telephonic Communication Services (AREA)
- Accessory Devices And Overall Control Thereof (AREA)
- Position Input By Displaying (AREA)
Description
20 MFP(電子機器)
30 拡張現実サーバー
34a 拡張現実操作プログラム
35a 拡張現実手段
35b 操作受付手段
35c 立体音響手段
41 撮像デバイス
42 表示デバイス
43 音出力デバイス
50 操作用画像
51〜57 操作部
60 撮影画像
62 画像(現実の手の画像)
70 合成画像
80 画像(仮想の手の画像)
90 手(現実の手)
91 手(仮想の手)
92 位置(現実空間における位置)
Claims (4)
- 撮像デバイスと、
表示デバイスと、
電子機器と、
前記撮像デバイスによる撮影画像に前記電子機器の画像が含まれている場合に、前記電子機器を操作するための操作用画像を前記撮影画像に合成した合成画像を、前記電子機器と、前記表示デバイスとの間の空間に前記電子機器から離れた状態で前記操作用画像が配置されているように見えるように前記表示デバイスに表示させる拡張現実手段と、
前記操作用画像中の操作部に対する操作を受け付ける操作受付手段とを備え、
前記拡張現実手段は、前記撮影画像に現実の手の画像が含まれる場合に、前記撮影画像に含まれる前記現実の手の画像を画像処理によって前記合成画像から消去し、前記合成画像を介して、前記操作用画像と、仮想の手の指先との前記撮像デバイスによる撮影方向における位置が一致して見えるように、前記現実の手の前記撮影画像における位置に応じて、前記仮想の手の画像を前記合成画像において前記操作用画像に対して配置し、
前記操作受付手段は、前記仮想の手の指先の位置が、前記合成画像において前記操作部に重なっている場合に、この指先が前記合成画像において位置が変わらずに大きさが小さくなったとき、前記操作部が押されたと判断することを特徴とする拡張現実操作システム。 - 音出力デバイスと、
前記合成画像における前記操作部の位置に対応する現実空間における位置で前記操作部に対する操作音が出力させられているように前記音出力デバイスに立体音響で前記操作音を出力させる立体音響手段とを備えることを特徴とする請求項1に記載の拡張現実操作システム。 - 前記拡張現実手段は、前記撮影画像に含まれる前記現実の手の画像の少なくとも一部の形状を前記仮想の手の画像の形状として使用することを特徴とする請求項1または請求項2に記載の拡張現実操作システム。
- 撮像デバイスによる撮影画像に電子機器の画像が含まれている場合に、前記電子機器を操作するための操作用画像を前記撮影画像に合成した合成画像を、前記電子機器と、表示デバイスとの間の空間に前記電子機器から離れた状態で前記操作用画像が配置されているように見えるように前記表示デバイスに表示させる拡張現実手段、および、
前記操作用画像中の操作部に対する操作を受け付ける操作受付手段として、コンピューターを機能させ、
前記拡張現実手段は、前記撮影画像に現実の手の画像が含まれる場合に、前記撮影画像に含まれる前記現実の手の画像を画像処理によって前記合成画像から消去し、前記合成画像を介して、前記操作用画像と、仮想の手の指先との前記撮像デバイスによる撮影方向における位置が一致して見えるように、前記現実の手の前記撮影画像における位置に応じて、前記仮想の手の画像を前記合成画像において前記操作用画像に対して配置し、
前記操作受付手段は、前記仮想の手の指先の位置が、前記合成画像において前記操作部に重なっている場合に、この指先が前記合成画像において位置が変わらずに大きさが小さくなったとき、前記操作部が押されたと判断することを特徴とする拡張現実操作プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015089901A JP6354653B2 (ja) | 2015-04-25 | 2015-04-25 | 拡張現実操作システムおよび拡張現実操作プログラム |
US15/135,853 US9628646B2 (en) | 2015-04-25 | 2016-04-22 | Augmented reality operation system and augmented reality operation method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015089901A JP6354653B2 (ja) | 2015-04-25 | 2015-04-25 | 拡張現実操作システムおよび拡張現実操作プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016207048A JP2016207048A (ja) | 2016-12-08 |
JP6354653B2 true JP6354653B2 (ja) | 2018-07-11 |
Family
ID=57147090
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015089901A Expired - Fee Related JP6354653B2 (ja) | 2015-04-25 | 2015-04-25 | 拡張現実操作システムおよび拡張現実操作プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US9628646B2 (ja) |
JP (1) | JP6354653B2 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10635161B2 (en) * | 2015-08-04 | 2020-04-28 | Google Llc | Context sensitive hand collisions in virtual reality |
JP2018132824A (ja) * | 2017-02-13 | 2018-08-23 | 株式会社Soken | 操作装置 |
JP6687157B2 (ja) * | 2017-07-14 | 2020-04-22 | 京セラドキュメントソリューションズ株式会社 | 表示装置および表示システム |
WO2019032967A1 (en) * | 2017-08-10 | 2019-02-14 | Google Llc | HAND INTERACTION SENSITIVE TO THE CONTEXT |
JP2019149066A (ja) * | 2018-02-28 | 2019-09-05 | 富士ゼロックス株式会社 | 情報処理装置及びプログラム |
US10916065B2 (en) * | 2018-05-04 | 2021-02-09 | Facebook Technologies, Llc | Prevention of user interface occlusion in a virtual reality environment |
JP7155613B2 (ja) * | 2018-05-29 | 2022-10-19 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置及びプログラム |
JP7135444B2 (ja) * | 2018-05-29 | 2022-09-13 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置及びプログラム |
JP7363399B2 (ja) * | 2019-11-15 | 2023-10-18 | 富士フイルムビジネスイノベーション株式会社 | 情報処理装置、情報処理システム、及び情報処理プログラム |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0749744A (ja) * | 1993-08-04 | 1995-02-21 | Pioneer Electron Corp | 頭部搭載型表示入力装置 |
JP2007001237A (ja) * | 2005-06-27 | 2007-01-11 | Konica Minolta Business Technologies Inc | 機器、機器システム、画像形成装置、機器の制御方法及びプログラム |
JP4676303B2 (ja) * | 2005-10-18 | 2011-04-27 | 株式会社日立製作所 | 端末装置 |
US8730156B2 (en) * | 2010-03-05 | 2014-05-20 | Sony Computer Entertainment America Llc | Maintaining multiple views on a shared stable virtual space |
JP4670860B2 (ja) * | 2007-11-22 | 2011-04-13 | ソニー株式会社 | 記録再生装置 |
US9037468B2 (en) * | 2008-10-27 | 2015-05-19 | Sony Computer Entertainment Inc. | Sound localization for user in motion |
JP4900741B2 (ja) * | 2010-01-29 | 2012-03-21 | 島根県 | 画像認識装置および操作判定方法並びにプログラム |
CN102804121B (zh) * | 2010-03-23 | 2016-01-06 | 夏普株式会社 | 信息显示装置及文书数据编辑方法 |
JP2012029164A (ja) | 2010-07-26 | 2012-02-09 | Konica Minolta Business Technologies Inc | 携帯端末及び装置管理方法 |
US8559030B2 (en) * | 2010-07-27 | 2013-10-15 | Xerox Corporation | Augmented reality system and method for device management and service |
US20120113223A1 (en) * | 2010-11-05 | 2012-05-10 | Microsoft Corporation | User Interaction in Augmented Reality |
US20130142371A1 (en) * | 2011-12-01 | 2013-06-06 | Jason P. Martin | Detachable Audio Speakers for Portable Devices and Methods for Manufacturing such Speakers |
US9558590B2 (en) * | 2012-03-28 | 2017-01-31 | Microsoft Technology Licensing, Llc | Augmented reality light guide display |
JP6079060B2 (ja) * | 2012-08-29 | 2017-02-15 | 株式会社リコー | 携帯端末、画像形成方法及び画像形成システム |
JP5696908B2 (ja) * | 2013-02-15 | 2015-04-08 | コニカミノルタ株式会社 | 操作表示システム |
WO2014128749A1 (ja) * | 2013-02-19 | 2014-08-28 | 株式会社ブリリアントサービス | 形状認識装置、形状認識プログラム、および形状認識方法 |
US20160217617A1 (en) * | 2013-08-30 | 2016-07-28 | Hewlett-Packard Development Company, L.P. | Augmented reality device interfacing |
WO2015105044A1 (ja) * | 2014-01-10 | 2015-07-16 | 日本電気株式会社 | インターフェース装置、可搬装置、制御装置、モジュール、制御方法およびプログラム記憶媒体 |
US20160232369A1 (en) * | 2015-02-11 | 2016-08-11 | Ricoh Company, Ltd. | Managing Access To Images Using Roles |
-
2015
- 2015-04-25 JP JP2015089901A patent/JP6354653B2/ja not_active Expired - Fee Related
-
2016
- 2016-04-22 US US15/135,853 patent/US9628646B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US9628646B2 (en) | 2017-04-18 |
JP2016207048A (ja) | 2016-12-08 |
US20160316081A1 (en) | 2016-10-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6354653B2 (ja) | 拡張現実操作システムおよび拡張現実操作プログラム | |
JP4904223B2 (ja) | 画像処理装置及び画像処理方法 | |
US8358280B2 (en) | Electronic device capable of showing page flip effect and method thereof | |
JP2012194642A (ja) | 画像処理装置および画像処理方法、ならびに、画像処理システム | |
JP7042622B2 (ja) | 画像処理装置、画像処理システム、画像処理方法、及び、プログラム | |
JP6988060B2 (ja) | 画像処理装置、画像処理システム、画像処理方法及びプログラム | |
JP7561260B2 (ja) | 画像処理装置 | |
JP2018067261A (ja) | 表示システム | |
US9413908B2 (en) | Image forming apparatus remotely operated by external terminal, method for controlling image forming apparatus, recording medium, and image forming system including image forming apparatus | |
JP5830055B2 (ja) | 画像処理装置および画像処理システム | |
US9417771B2 (en) | Information processing apparatus, information processing method, and computer readable-recording medium | |
KR102105492B1 (ko) | 정보 처리 장치, 정보 처리 장치의 제어 방법 및 저장 매체 | |
JP6323390B2 (ja) | 電子機器及び表示制御プログラム | |
JP2016208323A (ja) | 情報処理装置、情報処理装置の制御方法、及びプログラム | |
JP2020108112A (ja) | 電子機器及びその制御方法 | |
JP2020075360A (ja) | 画像処理装置 | |
JP5751281B2 (ja) | 画像表示装置及び画像表示プログラム | |
US9374482B2 (en) | Image processing apparatus, method for displaying preview image, and recording medium | |
JP2015014888A (ja) | 操作装置、画像形成装置、操作装置の制御方法、及びプログラム | |
JP6977384B2 (ja) | 情報処理装置、プログラムおよび画像出力システム | |
JP6779778B2 (ja) | 表示制御装置およびその制御方法 | |
JP4798017B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6354696B2 (ja) | 表示装置、および画像処理装置 | |
JP2020064506A (ja) | 表示装置、画像処理装置及びプログラム | |
JP7336323B2 (ja) | 表示制御装置および表示制御方法、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170222 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20171130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171206 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180129 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180515 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180528 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6354653 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |