[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

TWI464695B - 基於臉部表情播放文檔的電子裝置及方法 - Google Patents

基於臉部表情播放文檔的電子裝置及方法 Download PDF

Info

Publication number
TWI464695B
TWI464695B TW100134067A TW100134067A TWI464695B TW I464695 B TWI464695 B TW I464695B TW 100134067 A TW100134067 A TW 100134067A TW 100134067 A TW100134067 A TW 100134067A TW I464695 B TWI464695 B TW I464695B
Authority
TW
Taiwan
Prior art keywords
document
facial
facial expression
image
user
Prior art date
Application number
TW100134067A
Other languages
English (en)
Other versions
TW201314586A (zh
Inventor
Young Way Liu
Original Assignee
Hon Hai Prec Ind Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hon Hai Prec Ind Co Ltd filed Critical Hon Hai Prec Ind Co Ltd
Priority to TW100134067A priority Critical patent/TWI464695B/zh
Priority to US13/329,229 priority patent/US9195300B2/en
Publication of TW201314586A publication Critical patent/TW201314586A/zh
Application granted granted Critical
Publication of TWI464695B publication Critical patent/TWI464695B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • G06V40/175—Static expression

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)

Description

基於臉部表情播放文檔的電子裝置及方法
本發明涉及一種基於臉部表情播放文檔的電子裝置及方法。
現有的電子裝置，如平板電腦、行動電話等，都是接收使用者的輸入命令來啟動相應的程式或者進行相應的運作。然而，上述的這種根據用戶的輸入命令來開啟對應的程式其所產生的顯示結果都是可以被預知的，因此就導致了這些電子裝置使用起來比較單調及乏味。
本發明的主要目的在於提供一種基於臉部表情播放文檔的電子裝置及方法，其根據用戶的臉部表情隨機的生成播放文檔進行播放，以此替代現有電子裝置使用起來單調及乏味的問題。
本發明提供一種基於用戶臉部表情播放文檔的電子裝置，該電子裝置包括一拍攝單元及一存儲單元，該拍攝單元用於拍攝影像，該存儲單元中存儲有至少一臉部表情及每個臉部表情對應的文檔設置資訊，該電子裝置還包括有：一拍照控制模組，用於回應用戶的開機操作，控制拍攝單元連續的拍攝前方一預定數量張的臉部影像；一影像判斷模組，用於從拍攝的該預定數量張臉部影像中確一張清晰的臉部影像；一表情識別模組，用於識別該清晰的臉部影像的臉部表情；一文檔獲取模組，用於識別存儲單元中是否存在有該臉部表情對應的文檔設置資訊，當存在時，獲取該臉部表情對應的文檔設置資訊對應的文檔；及一文檔播放模組，用於播放所獲取到的文檔。
本發明還提供一種電子裝置基於用戶臉部表情播放文檔的方法，該電子裝置包括一拍攝單元及一存儲單元，該拍攝單元用於拍攝影像，該存儲單元中存儲有至少一個臉部表情及每個臉部表情對應的文檔設置資訊，該方法包括以下步驟：回應用戶的開機操作，控制拍攝單元連續的拍攝前方一預定數量張的臉部影像；從拍攝的該預定數量張臉部影像中獲取一張清晰的臉部影像；識別該清晰的臉部影像的臉部表情；識別存儲單元中是否存在有該臉部表情對應的一個或多個文檔類型，當存在時，獲取該臉部表情對應的文檔設置資訊對應的文檔；及播放所獲取到的文檔設置資訊對應的文檔。
本發明的基於用戶臉部表情播放文檔的電子裝置及方法，通過識別開機時用戶的臉部表情來自動的選擇對應的文檔進行播放，從而使得電子裝置與用戶之間產生一定的互動，避免現有技術下的單調及乏味。
圖1為一種基於用戶臉部表情播放文檔的電子裝置1的硬體結構圖。該電子裝置1包括一處理單元10、一拍攝單元30及一存儲單元20。該拍攝單元30用於拍攝影像。該存儲單元20中存儲有至少一臉部表情及每個臉部表情對應的文檔設置資訊。在本實施方式中，該文檔設置信息可為一個或多個文檔的類型，也可為一個或多個特定文檔。該文檔可為歌曲、圖片、視頻等。該歌曲的類型可包括有古典、爵士、田園等。該圖片的類型可包括有風景、美女、名車等。該視頻的類型可包括有幽默、滑稽、歡快等。
該處理單元10包括一拍照控制模組101、一影像判斷模組102、一表情識別模組103、一文檔獲取模組104及一文檔播放模組105。
該拍照控制模組101用於控制拍攝單元30連續的拍攝前方一預定數量張的臉部影像。在本實施方式中，該拍攝單元30為一攝像頭。
該影像判斷模組102用於從拍攝的該預定數量張臉部影像中獲取一張清晰的臉部影像。在本實施方式中，該影像判斷模組102是為根據各臉部影像中臉部的輪廓判斷其清晰度，及當一臉部影像的臉部輪廓完整時，則確定該臉部影像是清晰的。
該表情識別模組103用於識別該清晰的臉部影像的臉部表情。在本實施方式中，該表情識別模組103通過分析該清晰的臉部影像的臉部特徵來識別當前的臉部表情。其他實施方式中，該表情識別模組103也可利用其他的技術識別當前的臉部表情。其中，臉部表情包括開心、抑鬱、沮喪、憤怒、哀傷等。
該文檔獲取模組104用於識別存儲單元20中是否存在該臉部表情對應的文檔設置資訊，若存在，則獲取該臉部表情對應的文檔設置資訊對應的文檔。在本實施方式中，該文檔獲取模組104是為獲取該臉部表情對應的文檔設置資訊對應的文檔，在本發明中具體為獲取一個或多個文檔類型下的文檔，或為獲取該臉部表情對應的一個或多個特定文檔。
該文檔播放模組105用於播放所獲取到的文檔。例如，當前用戶心情不好，該拍照控制模組101控制拍攝單元30連續的拍攝前方一預定數量張的臉部影像，該影像判斷模組102從拍攝的該預定數量張臉部影像中獲取所拍用戶的一張清晰的臉部影像，該表情識別模組103識別出當前臉部影像的臉部表情為憤怒，該文檔獲取模組104自動的從存儲單元20中獲取與憤怒表情相對應的一個或多個文檔的類型，該文檔為歌曲及圖片，該歌曲的類型為輕音樂，該圖片的類型為自然美景，則文檔播放模組105從輕音樂中選擇一首歌曲及從自然美景圖片中選擇圖片進行播放，從而舒緩用戶的壓力。
進一步地，當文檔獲取模組104識別出該臉部表情在存儲單元20無對應的文檔類型時，該拍照控制模組101還用於控制拍攝單元30一預定時間後再次拍攝用戶的臉部影像。
進一步地，該處理單元10還包括一重設模組106，該重設模組106用於根據用戶的輸入重新設定存儲單元20中的臉部表情及其對應的文檔設置資訊。
進一步地，該電子裝置1還包括一閃光燈40，該處理單元10還包括一偵測模組107及一光線控制模組108，該偵測模組107用於在拍攝單元30進行影像拍攝之前，偵測外界的光線，該光線控制模組108用於判斷偵測模組107偵測的外界光線是否充足，該拍照控制模組101還用於當外界光線不足時，啟動閃光燈40。
圖2為一種電子裝置1基於臉部表情播放文檔的方法示意圖。
該拍照控制模組101回應用戶的開機操作（步驟S601）。
該偵測模組107偵測外界光線是否不足（步驟S602）。
當外界光線不足時，開啟閃光燈（步驟S603）。
當外界光線充足時，該拍照控制模組101控制拍攝單元30連續的拍攝前方一預定數量張的臉部影像（步驟S604）。
該影像判斷模組102從拍攝的預定數量張臉部影像中獲取一張清晰的臉部影像（步驟S605）。
該表情識別模組103識別該清晰的臉部影像的臉部表情（步驟S606）。
該文檔獲取模組104識別該臉部表情在存儲單元20中是否存在對應的文檔設置資訊（步驟S607）。
當該臉部表情在存儲單元20中不存在對應的文檔設置資訊時，返回步驟S604。
當該臉部表情在存儲單元20中存在對應的文檔設置資訊時，該文檔播放模組105播放該臉部表情對應的文檔設置資訊下對應的文檔。（步驟S608）。
1．．．電子裝置
10．．．處理單元
30．．．拍攝單元
20．．．存儲單元
101．．．拍照控制模組
102．．．影像判斷模組
103．．．表情識別模組
104．．．文檔獲取模組
105．．．文檔播放模組
106．．．重設模組
107．．．偵測模組
108．．．光線控制模組
40．．．閃光燈
圖1係一種基於臉部表情播放文檔的電子裝置的硬體結構圖。
圖2係一種電子裝置基於臉部表情播放文檔的方法示意圖。
1．．．電子裝置
10．．．處理單元
30．．．拍攝單元
20．．．存儲單元
101．．．拍照控制模組
102．．．影像判斷模組
103．．．表情識別模組
104．．．文檔獲取模組
105．．．文檔播放模組
106．．．重設模組
107．．．偵測模組
108．．．光線控制模組
40．．．閃光燈

Claims (16)

  1. 一種基於用戶臉部表情播放文檔的電子裝置，該電子裝置包括一拍攝單元及一存儲單元，該拍攝單元用於拍攝影像，該存儲單元中存儲有至少一臉部表情及每個臉部表情對應的文檔設置資訊，其中：該電子裝置還包括有：
    一拍照控制模組，用於回應用戶的開機操作，控制拍攝單元連續的拍攝前方一預定數量張的臉部影像；
    一影像判斷模組，用於從拍攝的該預定數量張臉部影像中確一張清晰的臉部影像；
    一表情識別模組，用於識別該清晰的臉部影像的臉部表情；
    一文檔獲取模組，用於識別存儲單元中是否存在有該臉部表情對應的文檔設置資訊，當存在時，獲取該臉部表情對應的文檔設置資訊對應的文檔；及
    一文檔播放模組，用於播放所獲取到的文檔。
  2. 如申請專利範圍第1項所述的基於用戶臉部表情播放文檔的電子裝置，其中，該清晰臉部影像判斷過程為：該影像判斷模組根據各臉部影像中臉部的輪廓判斷其清晰度，及當一臉部影像的臉部輪廓完整時，確定該臉部影像是清晰的。
  3. 如申請專利範圍第1項所述的基於用戶臉部表情播放文檔的電子裝置，其中，該文檔為歌曲、圖片、視頻或其中任意一種組合。
  4. 如申請專利範圍第1項所述的基於用戶臉部表情播放文檔的電子裝置，其中，該文檔設置資訊是為一個或多個文檔類型或為一個或多個特定文檔，該文檔獲取模組是為獲取該臉部表情對應的一個或多個文檔類型下的文檔，或為獲取該臉部表情對應的一個或多個特定文檔。
  5. 如申請專利範圍第1項所述的基於用戶臉部表情播放文檔的電子裝置，其中，當識別到的臉部表情在存儲單元中無對應的文檔類型時，該拍照控制模組還用於控制拍攝單元一預定時間後再次拍攝用戶的臉部影像。
  6. 如申請專利範圍第1項所述的基於用戶臉部表情播放文檔的電子裝置，其中，該電子裝置還包括一重設模組，該重設模組用於根據用戶的輸入重新設定存儲單元中的臉部表情及其對應文檔設置資訊。
  7. 如申請專利範圍第1項所述的基於用戶臉部表情播放文檔的電子裝置，其中，該表情識別模組是為分析清晰的臉部影像的臉部特徵來識別當前的臉部表情。
  8. 如申請專利範圍第1項所述的基於用戶臉部表情播放文檔的電子裝置，其中，該電子裝置還包括一閃光燈、一偵測模組及一光線控制模組，該偵測模組用於在拍攝單元進行影像拍攝之前，偵測外界的光線，該光線控制模組用於判斷偵測模組偵測的外界光線是否充足，該拍照控制模組還用於當外界光線不足時，啟動閃光燈。
  9. 一種電子裝置基於用戶臉部表情播放文檔的方法，該電子裝置包括一拍攝單元及一存儲單元，該拍攝單元用於拍攝影像，該存儲單元中存儲有至少一個臉部表情及每個臉部表情對應的文檔設置資訊，其中：該方法包括以下步驟：
    回應用戶的開機操作，控制拍攝單元連續的拍攝前方一預定數量張的臉部影像；
    從拍攝的該預定數量張臉部影像中獲取一張清晰的臉部影像；
    識別該清晰的臉部影像的臉部表情；
    識別存儲單元中是否存在有該臉部表情對應的一個或多個文檔類型，當存在時，獲取該臉部表情對應的文檔設置資訊對應的文檔；及
    播放所獲取到的文檔設置資訊對應的文檔。
  10. 如申請專利範圍第9項所述的方法，其中，該從拍攝的該預定數量張臉部影像中判斷所拍用戶清晰的一張臉部影像步驟具體為：根據各臉部影像中臉部的輪廓判斷其清晰度，及當一臉部影像的臉部輪廓完整時，確定該臉部影像是清晰的。
  11. 如申請專利範圍第9項所述的方法，其中，該文檔為歌曲、圖片、視頻或其中任意一種組合。
  12. 如申請專利範圍第9項所述的方法，其中，還包括步驟：
    當識別到的臉部表情在存儲單元中無對應的文檔類型時，控制拍攝單元一預定時間後再次拍攝用戶的臉部影像。
  13. 如申請專利範圍第9項所述的方法，其中，還包括步驟：
    根據用戶的輸入重新設定存儲單元中的臉部表情及其對應的文檔設置資訊。
  14. 如申請專利範圍第9項所述的方法，其中，還包括步驟：
    該識別清晰的臉部影像的臉部表情步驟具體為：分析清晰的臉部影像的臉部特徵來識別當前的臉部表情。
  15. 如申請專利範圍第9項所述的方法，其中，該方法還包括步驟：
    在拍攝影像之前偵測外界的光線；及
    當外界的光線不足時，啟動閃光燈。
  16. 如申請專利範圍第9項所述的方法，其中，該文檔設置資訊是為一個或多個文檔類型或為一個或多個特定文檔，該獲取臉部表情對應的文檔設置資訊對應的文檔的步驟具體為：獲取該臉部表情對應的一個或多個文檔類型下的文檔，或為獲取該臉部表情對應的一個或多個特定文檔。
TW100134067A 2011-09-22 2011-09-22 基於臉部表情播放文檔的電子裝置及方法 TWI464695B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW100134067A TWI464695B (zh) 2011-09-22 2011-09-22 基於臉部表情播放文檔的電子裝置及方法
US13/329,229 US9195300B2 (en) 2011-09-22 2011-12-17 Electronic device capable of selecting and playing files based on facial expressions and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW100134067A TWI464695B (zh) 2011-09-22 2011-09-22 基於臉部表情播放文檔的電子裝置及方法

Publications (2)

Publication Number Publication Date
TW201314586A TW201314586A (zh) 2013-04-01
TWI464695B true TWI464695B (zh) 2014-12-11

Family

ID=47911346

Family Applications (1)

Application Number Title Priority Date Filing Date
TW100134067A TWI464695B (zh) 2011-09-22 2011-09-22 基於臉部表情播放文檔的電子裝置及方法

Country Status (2)

Country Link
US (1) US9195300B2 (zh)
TW (1) TWI464695B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI603213B (zh) 2014-01-23 2017-10-21 國立交通大學 基於臉部辨識的音樂選取方法、音樂選取系統及電子裝置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW200935865A (en) * 2008-02-12 2009-08-16 Wistron Corp Mobile phone and method for controlling the same
JP2010141649A (ja) * 2008-12-12 2010-06-24 Casio Computer Co Ltd 撮像装置、顔検出方法及びプログラム
CN101836219A (zh) * 2007-11-01 2010-09-15 索尼爱立信移动通讯有限公司 基于面部表情生成音乐播放列表
TWM402934U (en) * 2010-11-29 2011-05-01 Oriental Inst Tech Electric monitor and image processing unit thereof

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6829368B2 (en) * 2000-01-26 2004-12-07 Digimarc Corporation Establishing and interacting with on-line media collections using identifiers in media signals
US8494286B2 (en) * 2008-02-05 2013-07-23 DigitalOptics Corporation Europe Limited Face detection in mid-shot digital images
JP4762805B2 (ja) * 2006-06-29 2011-08-31 富士通株式会社 生体認証方法及び生体認証システム
JP4789825B2 (ja) * 2007-02-20 2011-10-12 キヤノン株式会社 撮像装置及びその制御方法
US8930463B2 (en) * 2007-07-09 2015-01-06 Yahoo! Inc. Super-emoticons
US8150850B2 (en) * 2008-01-07 2012-04-03 Akiban Technologies, Inc. Multiple dimensioned database architecture
US20100098341A1 (en) * 2008-10-21 2010-04-22 Shang-Tzu Ju Image recognition device for displaying multimedia data
US20100177116A1 (en) * 2009-01-09 2010-07-15 Sony Ericsson Mobile Communications Ab Method and arrangement for handling non-textual information
CN101674363A (zh) 2009-09-23 2010-03-17 中兴通讯股份有限公司 移动设备及通话方法
US8509495B2 (en) * 2011-04-15 2013-08-13 Xerox Corporation Subcutaneous vein pattern detection via multi-spectral IR imaging in an identity verification system

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101836219A (zh) * 2007-11-01 2010-09-15 索尼爱立信移动通讯有限公司 基于面部表情生成音乐播放列表
TW200935865A (en) * 2008-02-12 2009-08-16 Wistron Corp Mobile phone and method for controlling the same
JP2010141649A (ja) * 2008-12-12 2010-06-24 Casio Computer Co Ltd 撮像装置、顔検出方法及びプログラム
TWM402934U (en) * 2010-11-29 2011-05-01 Oriental Inst Tech Electric monitor and image processing unit thereof

Also Published As

Publication number Publication date
US9195300B2 (en) 2015-11-24
TW201314586A (zh) 2013-04-01
US20130077834A1 (en) 2013-03-28

Similar Documents

Publication Publication Date Title
US8325234B2 (en) Information processing apparatus, information processing method, and program for storing an image shot by a camera and projected by a projector
KR101444103B1 (ko) 상태 정보를 이용하여 미디어 신호를 생성하는 방법 및장치
CN104519261B (zh) 一种信息处理方法及电子设备
TWI597980B (zh) 影音管理方法及其系統
TW201327226A (zh) 電子設備及其根據臉部表情提供心情服務的方法
US20160180882A1 (en) Editing apparatus and editing method
KR102127351B1 (ko) 사용자 단말 장치 및 그 제어 방법
KR102655625B1 (ko) 피사체의 근접 여부에 따라 촬영 장치를 제어하는 방법 및 촬영 장치.
US10382734B2 (en) Electronic device and color temperature adjusting method
WO2015184841A1 (zh) 一种控制投影显示的方法及装置
US20160189413A1 (en) Image creation method, computer-readable storage medium, and image creation apparatus
CN105072335B (zh) 一种拍照方法及用户终端
JP2016189544A (ja) 画像撮影装置、画像撮影方法、プログラムおよび記録媒体
CN105391935B (zh) 影像撷取装置的控制方法及电子装置
JP2016127431A (ja) 撮像装置、撮像制御方法及びプログラム
US20140285649A1 (en) Image acquisition apparatus that stops acquisition of images
US20160127651A1 (en) Electronic device and method for capturing image using assistant icon
JP2007068149A5 (zh)
TWI464695B (zh) 基於臉部表情播放文檔的電子裝置及方法
JP2009290819A5 (zh)
US10269389B2 (en) Video processing apparatus, video processing method, and program
US9407825B2 (en) Imaging apparatus, image processing apparatus, image processing method, and storage medium
JP2016506688A (ja) シングルクリックに基づく映像クリップの始点および終点の判定方法
JP5510999B2 (ja) 撮像装置及びプログラム
JP6631166B2 (ja) 撮影装置、プログラム及び撮影方法

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees