[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP5782540B2 - Beauty counseling method - Google Patents

Beauty counseling method Download PDF

Info

Publication number
JP5782540B2
JP5782540B2 JP2014051202A JP2014051202A JP5782540B2 JP 5782540 B2 JP5782540 B2 JP 5782540B2 JP 2014051202 A JP2014051202 A JP 2014051202A JP 2014051202 A JP2014051202 A JP 2014051202A JP 5782540 B2 JP5782540 B2 JP 5782540B2
Authority
JP
Japan
Prior art keywords
line
sight
subject
data
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014051202A
Other languages
Japanese (ja)
Other versions
JP2014149841A (en
Inventor
池田 浩
浩 池田
哲也 浅野
哲也 浅野
明生 樫本
明生 樫本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kao Corp
Original Assignee
Kao Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kao Corp filed Critical Kao Corp
Priority to JP2014051202A priority Critical patent/JP5782540B2/en
Publication of JP2014149841A publication Critical patent/JP2014149841A/en
Application granted granted Critical
Publication of JP5782540B2 publication Critical patent/JP5782540B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Description

本発明は、美容カウンセリング方法に関する。 The present invention also relates to the beauty contents counseling how.

人物を観察する場合、まず着目されるのは顔や髪などの頭部である。しかしながら、自分または他人の頭部に対して観察者の視線がどのように移動するかを客観的に把握することはあまりおこなわれていない。   When observing a person, the heads such as face and hair are first noticed. However, it is not often done to objectively grasp how the observer's line of sight moves with respect to his or her head.

特に、主として女性が自ら化粧メイクやヘアメイクなどの美容行為をおこなう場合には、他人の視線を意識してこれをおこなうことが望まれるところ、メイクの方法が正しいのか、その結果が自分に本当に似合っているのか不安を感じることがある。
化粧メイクの場合には化粧品売り場のビューティーアドバイザーと対面しながら自分に合ったメイク方法のアドバイスを受けることができる。しかしながら、受けられるアドバイスは、そのアドバイザーの主観や特有の経験によるメイク方法であったり、その化粧品会社特有のメイク方法であったりするため、女性の不安を解消できない場合がある。
ヘアメイクの場合も同様に、美容室の美容師のヘアメイクに対して、自分に本当に似合っているかという女性の不安を解消できない場合があった。
In particular, when women are engaged in cosmetic acts such as makeup and hair makeup, it is desirable to be aware of other people's gazes. You may feel anxiety.
In the case of makeup, you can receive advice on how to make up your face while meeting with a beauty advisor at the cosmetics department. However, since the advice that can be received is a makeup method based on the subjectivity and specific experience of the advisor, or a makeup method specific to the cosmetic company, there are cases where the anxiety of the woman cannot be resolved.
Similarly, in the case of hair makeup, there was a case where the woman's anxiety about whether she really suits herself for hair makeup by a hairdresser in a beauty salon could not be resolved.

これに対し、ユーザの顔画像に化粧見本やアドバイスを重畳表示することで、ユーザが化粧の修正や変更の指示を受けながら一人で化粧することを容易にする化粧支援装置が提案されている(特許文献1を参照)。特許文献2については後述する。   On the other hand, a makeup support apparatus that makes it easy for the user to make makeup alone while receiving instructions for correction or change of makeup by superimposing a makeup sample or advice on the user's face image has been proposed ( (See Patent Document 1). Patent Document 2 will be described later.

特開2001−216386号公報JP 2001-216386 A 特開2008−3724号公報JP 2008-3724 A

しかしながら、特許文献1の化粧支援装置を用いたとしても、化粧見本どおりにユーザが化粧を自ら再現することはきわめて困難であり、結局のところ、自分に似合った化粧が行われたかどうかの不安を払拭することはできない。   However, even if the makeup support apparatus of Patent Document 1 is used, it is extremely difficult for the user to reproduce the makeup himself according to the makeup sample. It cannot be wiped out.

本発明は上述の課題に鑑みてなされたものであり、美容に関する説得力のある情報をユーザに与え、美容行為を行うユーザの不安を解消することのできる美容カウンセリング方法を提供するものである。 Things present invention has been made in view of the above problems, which gives the user a compelling information on cosmetic provides a ruby contents counseling how can the be overcome anxiety in users who hairdressing works It is.

本発明の美容カウンセリング方法は、頭部を含む視覚的刺激を目視する被験者の視線に関する第一の視線データを視線取得部で取得する工程と、前記視覚的刺激又は他の視覚的刺激を目視する視線提供者の視線に関する第二の視線データを保存する蓄積部から第二の視線データを取得する工程と、前記取得された第一の視線データと、前記取得された第二の視線データとを比較可能に表示部に表示出力する工程と、を含む。 In the beauty counseling method of the present invention, the step of acquiring first line-of-sight data relating to the line of sight of a subject who visually observes a visual stimulus including the head is obtained by the line-of-sight acquisition unit, and the visual stimulus or other visual stimulus is visually observed. A step of acquiring second line-of-sight data from an accumulation unit that stores second line-of-sight data relating to the line of sight of the line-of-sight provider, the acquired first line-of-sight data, and the acquired second line-of-sight data. And a step of performing display display on the display unit so that the comparison is possible .

ここで、美容カウンセリングとは、美容に関するアドバイスをカウンセラーが被カウンセラーに与えることのほか、美容カウンセリングシステムからの情報に基づいて被カウンセラーが自ら美容行為に関する知見を得る(いわゆるセルフカウンセリングをおこなう)ことをいう。したがって、美容カウンセリングは、美容アドバイスを含む。
そして、美容カウンセリングシステムとは、ユーザに対して美容カウンセリングを提供するシステムであり、美容アドバイスシステムを含む。美容カウンセリングシステムのユーザが被カウンセラーにあたる。
Here, beauty counseling means that the counselor gives advice about beauty to the counselor, and that the counselor obtains knowledge about the beauty act based on information from the beauty counseling system (so-called self-counseling). Say. Thus, beauty counseling includes beauty advice.
The beauty counseling system is a system that provides beauty counseling to the user, and includes a beauty advice system. A user of a beauty counseling system is a counselor.

本発明の美容ポイント分析方法は、頭部を含む視覚的刺激を被験者に提示する工程と、前記視覚的刺激を目視する前記被験者の視線に関する第一の視線データを取得する工程と、前記視覚的刺激または他の視覚的刺激を目視する視線提供者の視線に関する第二の視線データを、前記第一の視線データと対応づけて取得する工程と、を含む。   The beauty point analysis method of the present invention includes a step of presenting a visual stimulus including a head to a subject, a step of obtaining first gaze data relating to the gaze of the subject who views the visual stimulus, and the visual Obtaining second line-of-sight data relating to the line of sight of the line-of-sight provider viewing the stimulus or other visual stimulus in association with the first line-of-sight data.

また、本発明の美容カウンセリング方法および美容ポイント分析方法は、複数の工程を順番に記載してあるが、その記載の順番は複数の工程を実行する順番を必ずしも限定するものではない。このため、本発明の方法を実施するときには、その複数の工程の順番は内容的に支障のない範囲で変更することができる。
さらに、本発明の美容カウンセリング方法および美容ポイント分析方法は、複数の工程が個々に相違するタイミングで実行されることに限定されず、ある工程の実行中に他の工程が発生することや、ある工程の実行タイミングと他の工程の実行タイミングとの一部ないし全部が重複することを含む。
Moreover, although the beauty counseling method and the beauty point analysis method of this invention have described several processes in order, the order of description does not necessarily limit the order which performs several processes. For this reason, when implementing the method of this invention, the order of the some process can be changed in the range which does not have trouble in content.
Furthermore, the beauty counseling method and the beauty point analysis method of the present invention are not limited to the plurality of steps being executed at different timings, and other steps may occur during the execution of a certain step. It includes that part or all of the execution timing of a process and the execution timing of another process overlap.

本発明の美容カウンセリング方法によれば、視覚的刺激に対する被験者の視線データと他の視線データとを表示出力することができる。これにより、美容に関する似合いの判断を被カウンセラーがおこなうに際して、頭部に対する被験者の着目点を客観的に把握することができる。このため、被カウンセラーは美容行為の妥当性について説得力が得られ、美容行為を行う際の不安が解消される。また、本発明の美容ポイント分析方法によれば、被カウンセラーにこの種の情報を提供するための視線データを取得することができる。 According to beauty ml counseling process of the present invention, it is possible to display and output the subject of sight data and other line-of-sight data to visual stimuli. As a result, when the counselor determines the suitability for beauty, the subject's point of interest with respect to the head can be objectively grasped. For this reason, the counselor is persuasive about the appropriateness of the beauty act, and the anxiety when performing the beauty act is eliminated. Further, according to the beauty point analysis method of the present invention, it is possible to acquire line-of-sight data for providing this type of information to the counselor.

第一実施形態にかかる美容カウンセリングシステムの構成図である。It is a lineblock diagram of the beauty counseling system concerning a first embodiment. 第一実施形態にかかる美容カウンセリングシステムの機能ブロック図である。It is a functional block diagram of the beauty counseling system concerning a first embodiment. 第一実施形態にかかる美容カウンセリング方法のフローチャートである。It is a flowchart of the beauty counseling method according to the first embodiment. 第二実施形態にかかる美容カウンセリングシステムの構成図である。It is a block diagram of the beauty counseling system concerning 2nd embodiment. 第一実施例で用いた第一の視覚的刺激を示す図である。It is a figure which shows the 1st visual stimulus used in the 1st Example. 第一実施例で用いた第二の視覚的刺激を示す図である。It is a figure which shows the 2nd visual stimulus used in the 1st Example. 第一実施例で用いた第三の視覚的刺激を示す図である。It is a figure which shows the 3rd visual stimulus used in the 1st Example. 第一実施例で用いた第四の視覚的刺激を示す図である。It is a figure which shows the 4th visual stimulus used in the 1st Example. 第一の視覚的刺激に対するヘア専門家視線データを示す図である。It is a figure which shows the hair expert gaze data with respect to a 1st visual stimulus. 第二の視覚的刺激に対するヘア専門家視線データを示す図である。It is a figure which shows the hair expert gaze data with respect to a 2nd visual stimulus. 第三の視覚的刺激に対するヘア専門家視線データを示す図である。It is a figure which shows the hair expert gaze data with respect to a 3rd visual stimulus. 第四の視覚的刺激に対するヘア専門家視線データを示す図である。It is a figure which shows the hair expert eyes | visual_axis data with respect to a 4th visual stimulus. 第一の視覚的刺激に対する被験者の視線データを示す図である。It is a figure which shows the test subject's eyes | visual_axis data with respect to a 1st visual stimulus. 第二の視覚的刺激に対する被験者の視線データを示す図である。It is a figure which shows the test subject's eyes | visual_axis data with respect to a 2nd visual stimulus. 第三の視覚的刺激に対する被験者の視線データを示す図である。It is a figure which shows the test subject's gaze data with respect to a 3rd visual stimulus. 第四の視覚的刺激に対する被験者の視線データを示す図である。It is a figure which shows the test subject's eyes | visual_axis data with respect to a 4th visual stimulus. 第一の視覚的刺激に対するメイク専門家視線データを示す図である。It is a figure which shows makeup specialist eyes | visual_axis data with respect to a 1st visual stimulus. 第二の視覚的刺激に対するメイク専門家視線データを示す図である。It is a figure which shows makeup specialist eyes | visual_axis data with respect to a 2nd visual stimulus. 第三の視覚的刺激に対するメイク専門家視線データを示す図である。It is a figure which shows makeup expert eyes | visual_axis data with respect to a 3rd visual stimulus. 第四の視覚的刺激に対するメイク専門家視線データを示す図である。It is a figure which shows makeup expert eyes | visual_axis data with respect to a 4th visual stimulus. 第二実施例のメイク専門家視線データ(似合い判断)を示す図である。It is a figure which shows the makeup expert eyes | visual_axis data (matching judgment) of 2nd Example. 第二実施例のメイク専門家視線データ(不似合い判断)を示す図である。It is a figure which shows makeup specialist eyes | visual_axis data (mismatch judgment) of 2nd Example. 第二実施例の被験者の視線データ(似合い判断)を示す図である。It is a figure which shows the test subject's eyes | visual_axis data (appropriateness judgment) of a 2nd Example. 第二実施例の被験者の視線データ(不似合い判断)を示す図である。It is a figure which shows the test subject's eyes | visual_axis data (mismatch judgment) of 2nd Example. 第二実施例のヘア専門家視線データ(似合い判断)を示す図である。It is a figure which shows the hair expert gaze data (appropriateness judgment) of a 2nd Example. 第二実施例のヘア専門家視線データ(不似合い判断)を示す図である。It is a figure which shows the hair expert eyes | visual_axis data (mismatch judgment) of 2nd Example.

以下、本発明の実施形態を図面に基づいて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. In all the drawings, the same reference numerals are given to the same components, and the description will be omitted as appropriate.

<第一実施形態>
(美容カウンセリングシステム)
図1は、本発明の第一の実施形態にかかる美容カウンセリングシステム100の一例を示す構成図である。
図2は、本実施形態の美容カウンセリングシステム100の機能ブロック図である。
<First embodiment>
(Beauty counseling system)
FIG. 1 is a configuration diagram showing an example of a beauty counseling system 100 according to the first embodiment of the present invention.
FIG. 2 is a functional block diagram of the beauty counseling system 100 of the present embodiment.

はじめに、本実施形態の美容カウンセリングシステム100の概要について説明する。
本実施形態の美容カウンセリングシステム100は、提示部(画像提示部10)と、取得部(視線取得部20)と、蓄積部30と、表示部40とを有する。
画像提示部10は、頭部60を含む視覚的刺激50を被験者S1に提示する。ここで、頭部とは、髪部および顔部のそれぞれ少なくとも一部を含む領域である。
視線取得部20は、視覚的刺激50を目視する被験者S1の視線に関する第一の視線データD1を取得する。
蓄積部30は、被験者S1に提示される視覚的刺激50または他の視覚的刺激を目視する視線提供者(SP、CE)の視線に関する第二の視線データD2を保存する
表示部40は、第一の視線データD1と第二の視線データD2とをともに表示出力する。
First, the outline | summary of the beauty counseling system 100 of this embodiment is demonstrated.
The beauty counseling system 100 of the present embodiment includes a presentation unit (image presentation unit 10), an acquisition unit (line-of-sight acquisition unit 20), an accumulation unit 30, and a display unit 40.
The image presentation unit 10 presents the visual stimulus 50 including the head 60 to the subject S1. Here, the head is an area including at least a part of each of the hair and the face.
The line-of-sight acquisition unit 20 acquires first line-of-sight data D1 related to the line of sight of the subject S1 who views the visual stimulus 50.
The storage unit 30 stores second line-of-sight data D2 related to the line-of-sight provider (SP, CE) viewing the visual stimulus 50 or other visual stimulus presented to the subject S1. Both the first line-of-sight data D1 and the second line-of-sight data D2 are displayed and output.

ここで、美容カウンセリングシステム100の各種の構成要素は、その機能を実現するように形成されていればよく、たとえば、所定の機能を発揮する専用のハードウェア、所定の機能がコンピュータプログラムにより付与された処理装置(データ処理装置または画像処理装置)、コンピュータプログラムにより処理装置に実現された所定の機能、これらの任意の組み合わせ、等として実現することができる。
また、美容カウンセリングシステム100の各種の構成要素は、コンピュータプログラムを読み取って対応する処理動作を実行できるように、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)、I/F(Interface)ユニット、等の汎用デバイスで構築されたハードウェア、所定の処理動作を実行するように構築された専用の論理回路、これらの組み合わせ、等として実施することができる。
なお、美容カウンセリングシステム100においてコンピュータプログラムに対応した各種動作を処理装置に実行させるとは、各種デバイスを処理装置に動作制御させることを含む。
また、本実施形態において蓄積部30が視線データを保存するとは、蓄積部30が少なくとも視線データを記憶する機能を有することを意味している。このため、蓄積部30は、視線提供者の視線データが新規に登録されることのほか、蓄積部30の製造時に登録された視線データを保持して出荷後には新規の視線データが登録されないことも許容する。
一方、蓄積部30が視線提供者の視線データを保存しているとは、本実施形態の美容カウンセリングシステム100が、少なくとも被験者により使用されるときに視線提供者の視線データを記憶している状態となる機能を有することを意味している。このため、蓄積部30がサプライヤから出荷される時点で視線提供者の視線データが登録されていることのほか、出荷されるときには登録されていない視線提供者の視線データが、被験者に使用されるまでに登録されることも許容する。
Here, the various components of the beauty counseling system 100 only have to be formed so as to realize their functions. For example, dedicated hardware that exhibits a predetermined function and a predetermined function are given by a computer program. It can be realized as a processing function (data processing apparatus or image processing apparatus), a predetermined function realized in the processing apparatus by a computer program, an arbitrary combination thereof, or the like.
Various components of the beauty counseling system 100 can read a computer program and execute a corresponding processing operation, such as a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), an I It can be implemented as hardware constructed with a general-purpose device such as an / F (Interface) unit, a dedicated logic circuit constructed so as to execute a predetermined processing operation, a combination thereof, or the like.
In the beauty counseling system 100, causing the processing device to execute various operations corresponding to the computer program includes causing the processing device to control the operation of various devices.
In the present embodiment, the storage unit 30 storing the line-of-sight data means that the storage unit 30 has at least a function of storing the line-of-sight data. For this reason, in addition to the line-of-sight provider's line-of-sight data being newly registered, the storage unit 30 holds the line-of-sight data registered at the time of manufacture of the storage unit 30 and no new line-of-sight data is registered after shipment. Is also acceptable.
On the other hand, the storage unit 30 stores the line-of-sight provider's line-of-sight data when the beauty counseling system 100 of this embodiment stores the line-of-sight provider's line-of-sight data at least when used by the subject. It has a function to become. For this reason, in addition to the fact that the line-of-sight provider's line-of-sight data is registered when the storage unit 30 is shipped from the supplier, the line-of-sight provider's line-of-sight data that is not registered when shipped is used by the subject. It is allowed to be registered before.

本実施形態の美容カウンセリングシステム100は、画像提示部10、視線取得部20、蓄積部30、表示部40、および後述する撮影部12が、バスライン80に接続されている。
また、図1に示すように、バスライン80には、美容カウンセリングシステム100に対する各種操作を受け付ける操作部72と、視線データD1、D2や視覚的刺激50のデータ処理を実行するCPU70とが接続されている。
In the beauty counseling system 100 of the present embodiment, an image presentation unit 10, a line-of-sight acquisition unit 20, a storage unit 30, a display unit 40, and a photographing unit 12 described later are connected to a bus line 80.
As shown in FIG. 1, the bus line 80 is connected to an operation unit 72 that receives various operations on the beauty counseling system 100 and a CPU 70 that executes data processing of the line-of-sight data D1 and D2 and the visual stimulus 50. ing.

次に、図1および図2を用いて本実施形態の美容カウンセリングシステム100を詳細に説明する。   Next, the beauty counseling system 100 of this embodiment will be described in detail with reference to FIGS. 1 and 2.

なお、第一の視線データD1が取得される被験者と、被カウンセラーとは共通であってもよく、または異なってもよい。また、被験者S1は、美容に関する素人であってもよく、美容専門家であってもよい。本実施形態では、美容カウンセリングシステム100のユーザ(被カウンセラー)と被験者S1とを同一とする。したがって、本実施形態の場合、視線取得部20で取得される第一の視線データD1は、ユーザの視線を示すデータとなる。なお、被カウンセラーと被験者S1とが異なる場合については後述する。   Note that the subject from whom the first line-of-sight data D1 is acquired and the counselor may be common or different. In addition, the subject S1 may be an amateur relating to beauty or a beauty specialist. In this embodiment, the user (counselor) of the beauty counseling system 100 and the subject S1 are the same. Therefore, in this embodiment, the first line-of-sight data D1 acquired by the line-of-sight acquisition unit 20 is data indicating the user's line of sight. The case where the counselor is different from the subject S1 will be described later.

一方、蓄積部30に予め保存された第二の視線データD2は、美容専門家SPまたは著名人CEの視線を示すデータである。ここで、著名人とは、美容分野に限らず、芸能人や文化人など各種分野における有名人である。このほか、第二の視線データD2として、被験者Sと異なる性別の者(異性)の視線を示すデータを用いてもよい。また、美容専門家SP、著名人CEまたは異性のいずれか二以上は、重複する者であってもよい。
本実施形態の美容カウンセリングシステム100は、ユーザ(被験者S1)自らの操作、またはアドバイザーの操作によって、ユーザの第一の視線データD1と、美容専門家SPまたは著名人CEの第二の視線データD2とを、視覚的刺激50とともに表示出力する。これにより、アドバイザーは、表示部40を目視するユーザに対して美容アドバイスを提供することができる。
On the other hand, the second line-of-sight data D2 stored in advance in the storage unit 30 is data indicating the line of sight of the beauty specialist SP or the celebrity CE. Here, the celebrities are not only in the beauty field but also celebrities in various fields such as entertainers and cultural figures. In addition, as the second line-of-sight data D2, data indicating the line of sight of a gender (sex) different from the subject S may be used. In addition, any two or more of the beauty specialist SP, the celebrity CE, or the opposite sex may be overlapping persons.
The beauty counseling system 100 according to the present embodiment is configured so that the user's (subject S1) 's own operation or an advisor's operation allows the user's first line-of-sight data D1 and the second line-of-sight data D2 of the beauty specialist SP or celebrity CE. Are output together with the visual stimulus 50. Thereby, the advisor can provide beauty advice to the user who views the display unit 40.

被験者S1に提示される視覚的刺激50は、被験者S1もしくは他者の頭部60を含む静止画像、動画像、鏡像または美容行為の実演である。   The visual stimulus 50 presented to the subject S1 is a demonstration of a still image, a moving image, a mirror image, or a cosmetic action involving the subject S1 or the head 60 of another person.

提示部は、視覚的刺激50を被験者S1に提示する手段である。具体的には、視覚的刺激50が画像(静止画像または動画像)である場合、提示部としては液晶表示装置などのディスプレイ装置(画像提示部10)を用いることができる。
視覚的刺激50が被験者S1の鏡像の場合は、提示部に鏡を用いることができる。そして、美容専門家によって被験者S1の頭や顔に対するヘアメイクや化粧メイクを行う様子を、鏡像として被験者S1は目視することができる。
また、美容行為の実演としては、モデルの頭や顔に対するヘアメイクや化粧メイクを例示することができる。そして、視覚的刺激50が美容行為の実演の場合、提示部には、モデルを含む実態物を用いることができる。
また、鏡像や実演を視覚的刺激50とする場合、ヘアメイクや化粧メイクに代えて、またはこれらに加えて、着衣やアクセサリーを交換してもよい。
このように、鏡や実演を視覚的刺激50とすることで、被験者S1が現実に美容行為を自ら行う状況を模した視線データを取得することができる。
The presentation unit is means for presenting the visual stimulus 50 to the subject S1. Specifically, when the visual stimulus 50 is an image (a still image or a moving image), a display device (image presentation unit 10) such as a liquid crystal display device can be used as the presentation unit.
When the visual stimulus 50 is a mirror image of the subject S1, a mirror can be used for the presentation unit. Then, the subject S1 can visually observe as a mirror image how the beauty specialist performs hair makeup and makeup on the head and face of the subject S1.
Moreover, as a demonstration of the beauty act, hair makeup and makeup makeup on the model head and face can be exemplified. When the visual stimulus 50 is a beauty act demonstration, a real object including a model can be used for the presentation unit.
In addition, when the mirror image or demonstration is used as the visual stimulus 50, clothes or accessories may be exchanged instead of or in addition to hair makeup or makeup makeup.
In this way, by using the mirror or the demonstration as the visual stimulus 50, it is possible to acquire line-of-sight data imitating the situation where the subject S1 actually performs the beauty act himself.

このうち、本実施形態では、画像提示部10が被験者S1に提示する視覚的刺激50として、被験者S1自身の静止画像または動画像(以下、被験者画像という場合がある)を用いるものとする。
より具体的には、図1、図2に示す本実施形態の画像提示部10は、撮影部12で撮像した被験者S1の頭部画像を視覚的刺激50として被験者S1に表示する。
頭部画像とは、髪部および顔部のそれぞれ少なくとも一部を含む頭部が撮像された画像である。頭部に加えて、被験者S1の上半身や下半身、胴部や衣服、装飾品などが撮像されていてもよい。すなわち、本実施形態にいう頭部画像は全身画像を含む。そして、頭部を含む視覚的刺激は、全身の静止画像、動画像もしくは鏡像、または美容行為の全身実演を含む。
Among these, in this embodiment, the still image or moving image of the subject S1 itself (hereinafter sometimes referred to as the subject image) is used as the visual stimulus 50 presented by the image presentation unit 10 to the subject S1.
More specifically, the image presentation unit 10 of the present embodiment illustrated in FIGS. 1 and 2 displays the head image of the subject S1 captured by the imaging unit 12 as the visual stimulus 50 on the subject S1.
The head image is an image in which the head including at least a part of each of the hair and the face is captured. In addition to the head, the upper half and lower half of the subject S1, the torso, clothes, and ornaments may be imaged. That is, the head image referred to in the present embodiment includes a whole body image. The visual stimulus including the head includes a still image of the whole body, a moving image or a mirror image, or a whole body demonstration of a beauty act.

そして、異なる被験者S2、S3、・・・(図1、2には図示せず、図4に図示)に対しては、それぞれ被験者S2、S3、・・・の頭部画像を画像提示部10は表示する。
すなわち、提示部(画像提示部10)において被験者S1に提示される視覚的刺激50と、被験者S2、S3、・・・に提示される視覚的刺激50とは相違するものであってもよい。例として、提示部は、被験者S1には被験者S1自身の画像や鏡像を提示し、被験者S2、S3、・・・には他の画像、鏡像または実演を提示してもよい。ただし本発明においては、被験者S1、S2、S3、・・・に対して同一の視覚的刺激50を提示してもよい。
For different subjects S2, S3,... (Not shown in FIGS. 1 and 2 and shown in FIG. 4), the head images of subjects S2, S3,. Is displayed.
That is, the visual stimulus 50 presented to the subject S1 in the presentation unit (image presentation unit 10) may be different from the visual stimulus 50 presented to the subjects S2, S3,. As an example, the presentation unit may present the subject S1 with an image or a mirror image of the subject S1, and may present another image, a mirror image, or a demonstration with the subject S2, S3,. However, in the present invention, the same visual stimulus 50 may be presented to the subjects S1, S2, S3,.

視線取得部20は、視覚的刺激50を目視する被験者S1の視線方向(視点位置)を示す第一の視線データD1を取得する眼検知装置(アイカメラ)である。
視線取得部20は、画像提示部10に正対する被験者S1に対向して配置され、被験者S1の頭部に向かって赤外線などの光ビームを照射するとともに、その反射光を受光する。視線取得部20は、受光光を画像化し、画素のコントラストに基づいて瞳孔位置を算出することで、被験者S1の目の位置を検出してその視線方向を数値データまたは画像データとして取得する。
本実施形態の視線取得部20は、赤外線ダイオードを用いて被験者S1に光ビームを照射する。光ビームの強度は、被験者S1による視覚的刺激50の自然な目視を妨げない程度に抑制されている。
The line-of-sight acquisition unit 20 is an eye detection device (eye camera) that acquires first line-of-sight data D1 indicating the line-of-sight direction (viewpoint position) of the subject S1 viewing the visual stimulus 50.
The line-of-sight acquisition unit 20 is disposed to face the subject S1 facing the image presentation unit 10, and irradiates a light beam such as infrared rays toward the head of the subject S1, and receives the reflected light. The line-of-sight acquisition unit 20 images the received light, calculates the pupil position based on the pixel contrast, detects the eye position of the subject S1, and acquires the line-of-sight direction as numerical data or image data.
The line-of-sight acquisition unit 20 of the present embodiment irradiates the subject S1 with a light beam using an infrared diode. The intensity of the light beam is suppressed to such an extent that natural viewing of the visual stimulus 50 by the subject S1 is not hindered.

ここで、被験者S1に代えて、視線提供者である美容専門家SPや著名人CEを美容カウンセリングシステム100に適用することにより、視線取得部20は第二の視線データD2を取得することができる。
すなわち、美容カウンセリングシステム100の蓄積部30には、視線提供者の目の位置および凝視方向を視線取得部20で検知してデータ取得した、視線提供者の視線方向(視点位置)を示す視線データが、第二の視線データD2として記憶されている。
Here, instead of the subject S1, the line-of-sight acquisition unit 20 can acquire the second line-of-sight data D2 by applying a beauty expert SP or a celebrity CE as a line-of-sight provider to the beauty counseling system 100. .
That is, in the accumulation unit 30 of the beauty counseling system 100, line-of-sight data indicating the line-of-sight provider's line-of-sight direction (viewpoint position) obtained by detecting the eye-gaze provider's eye position and gaze direction with the line-of-sight acquisition unit 20 and acquiring data. Is stored as the second line-of-sight data D2.

視線取得部20が取得する具体的な視線データD1、D2は特に限定されない。たとえば、視覚的刺激50に対する視線提供者の視線の初期位置データのほか、視覚的刺激50に対してどの位置に視線提供者の視線が集中したかを示す視線の頻度データを視線取得部20は取得してもよい。視線の頻度データは、たとえば、視覚的刺激50を複数の領域に分割して、各領域を視線が通過した回数をカウントして求めることができる。   The specific line-of-sight data D1 and D2 acquired by the line-of-sight acquisition unit 20 is not particularly limited. For example, in addition to the initial position data of the line-of-sight provider's line of sight with respect to the visual stimulus 50, the line-of-sight acquisition unit 20 includes line-of-sight frequency data indicating where the line of sight of the line-of-sight provider is concentrated with respect to the visual stimulus 50. You may get it. The line-of-sight frequency data can be obtained, for example, by dividing the visual stimulus 50 into a plurality of areas and counting the number of times the line of sight passes through each area.

本実施形態の視線取得部20は、光ビームの照射および受光と、画像処理による視線データD1、D2の取得を連続的におこなう。そして、視線取得部20は、視線データD1、D2として、視覚的刺激50に対する視線提供者の目視位置の時刻歴データを取得する。
このように、視線提供者の目線を視線取得部20で追跡して、視線データD1、D2を時刻歴データとして取得することにより、視線提供者の視線の初期位置データや、目視位置の頻度データなど、多様なデータを取得することができる。
The line-of-sight acquisition unit 20 of the present embodiment continuously performs irradiation and light reception of a light beam and acquisition of line-of-sight data D1 and D2 by image processing. Then, the line-of-sight acquisition unit 20 acquires time history data of the visual position of the line-of-sight provider with respect to the visual stimulus 50 as the line-of-sight data D1 and D2.
In this way, by tracking the line of sight of the line of sight with the line-of-sight acquisition unit 20 and acquiring the line-of-sight data D1 and D2 as time history data, the line-of-sight provider's line-of-sight initial position data and visual position frequency data Various data can be acquired.

蓄積部30は、画像蓄積部31と視線データ蓄積部32とからなる。
蓄積部30は、頭部60をそれぞれ含む複数のサンプル画像55と、サンプル画像55を個別に目視する視線提供者(美容専門家SPまたは著名人CE)の視線に関する第二の視線データD2(専門家視線データDSまたは著名人視線データDC)と、を互いに対応づけて保存している。
The storage unit 30 includes an image storage unit 31 and a line-of-sight data storage unit 32.
The accumulating unit 30 includes a plurality of sample images 55 each including the head 60 and second line-of-sight data D2 (specialized) regarding the line of sight of a line-of-sight provider (beauty specialist SP or celebrity CE) who views the sample image 55 individually. House line-of-sight data DS or celebrity line-of-sight data DC) are stored in association with each other.

第二の視線データD2は、被験者S1に提示される視覚的刺激50(被験者画像)とは異なる他の視覚的刺激を目視する視線提供者の視線に関するデータである。そして、本実施形態の表示部40は、被験者S1に提示される視覚的刺激50(被験者画像)と第二の視線データD2とを合成して表示出力する。   The second line-of-sight data D2 is data relating to the line of sight of the line-of-sight provider who views another visual stimulus different from the visual stimulus 50 (subject image) presented to the subject S1. And the display part 40 of this embodiment synthesize | combines and outputs the visual stimulus 50 (subject image) and 2nd gaze data D2 which are shown to the test subject S1.

具体的には、画像蓄積部31には複数のサンプル画像55がライブラリとして保存されている。サンプル画像55は、美容専門家SPや著名人CEに対して表示される視覚的刺激である。
視線データ蓄積部32には、画像提示部10で視覚的刺激として表示されたサンプル画像55を目視する美容専門家SPや著名人CEの視線に関する専門家視線データDSや著名人視線データDCが、第二の視線データD2として保存されている。
Specifically, a plurality of sample images 55 are stored in the image storage unit 31 as a library. The sample image 55 is a visual stimulus displayed to the beauty specialist SP and the celebrity CE.
In the line-of-sight data storage unit 32, expert line-of-sight data DS and celebrity line-of-sight data DC relating to the line of sight of a beauty expert SP and a celebrity CE who sees the sample image 55 displayed as a visual stimulus in the image presentation unit 10, It is stored as second line-of-sight data D2.

サンプル画像55は、複数のカテゴリに分類されて画像蓄積部31に保存されている。
サンプル画像55の分類は種々の観点でおこなうことができるが、たとえば、髪型のボリューム感の分布の特徴、顔型、顔パーツの相対位置、肌色の分類、虹彩色の分類、年齢などの観点で分類することができる。
髪型のボリューム感の分布とは、たとえば、正面頭部画像において、水平線を二段に引き、上側の水平線より上部における毛髪領域の面積(髪トップ面積)と、上下の水平線の間における毛髪領域の面積(髪ミドル面積)と、下側の水平線より下部における毛髪領域の面積(髪ボトム面積)との比率をいう。かかる比率の大小によってサンプル画像55を複数のカテゴリに分類することができる。
顔型とは、丸顔、四角顔、三角顔、面長顔、卵顔などに分類される顔の外形形状である。
顔パーツの相対位置とは、顔における髪、眉、目、鼻、口、耳などの部位の相対的な位置関係をいう。かかる相対位置が互いに類似する顔のサンプル画像55を同一のカテゴリに分類することができる。
肌色の分類とは、黄味か青味か、暖色か寒色か、などの分類である。
虹彩色の分類とは、濃褐色、淡褐色、琥珀色、緑色、灰色、青色などの分類である。
The sample images 55 are classified into a plurality of categories and stored in the image storage unit 31.
The sample image 55 can be classified from various viewpoints. For example, from the viewpoints of the distribution characteristics of the volume of the hairstyle, the face type, the relative position of the facial parts, the skin color classification, the iris color classification, the age, and the like. Can be classified.
For example, in the frontal head image, the distribution of the volume of the hairstyle draws a horizontal line in two steps, the area of the hair area above the upper horizontal line (hair top area), and the hair area between the upper and lower horizontal lines. The ratio between the area (hair middle area) and the area of the hair region (hair bottom area) below the lower horizontal line. The sample image 55 can be classified into a plurality of categories according to the ratio.
The face type is an external shape of a face classified into a round face, a square face, a triangular face, a face-long face, an egg face, and the like.
The relative position of the facial parts refers to the relative positional relationship of parts such as hair, eyebrows, eyes, nose, mouth, and ears on the face. Such face sample images 55 whose relative positions are similar to each other can be classified into the same category.
The skin color classification is a classification such as yellow or blue, warm or cold.
The iris color classification includes dark brown, light brown, amber, green, gray, blue, and the like.

画像提示部10は、美容専門家SPや著名人CEに対して、視覚的刺激50としてサンプル画像55を提示する。
視線取得部20は画像提示部10の近傍に設置され、サンプル画像55を目視する美容専門家SPや著名人CEの視線に関する専門家視線データDSや著名人視線データDCを取得する。
そして、CPU70は、視線取得部20が取得した専門家視線データDSや著名人視線データDCを、第二の視線データD2として視線データ蓄積部32に格納する。
The image presentation unit 10 presents the sample image 55 as the visual stimulus 50 to the beauty specialist SP and the celebrity CE.
The line-of-sight acquisition unit 20 is installed in the vicinity of the image presentation unit 10 and acquires expert line-of-sight data DS and celebrity line-of-sight data DC regarding the line of sight of the beauty specialist SP and the celebrity CE who views the sample image 55.
Then, the CPU 70 stores the expert line-of-sight data DS and the celebrity line-of-sight data DC acquired by the line-of-sight acquisition unit 20 in the line-of-sight data storage unit 32 as second line-of-sight data D2.

本実施形態では、第二の視線データD2は、各サンプル画像55における部位ごとの目視頻度を示す分布図の画像データであるコンター(等値線)データとして、視線データ蓄積部32に蓄積される。   In the present embodiment, the second line-of-sight data D <b> 2 is accumulated in the line-of-sight data accumulation unit 32 as contour (isoline) data that is image data of a distribution diagram indicating the viewing frequency for each part in each sample image 55. .

また、本実施形態では、美容専門家SPは、髪型または髪色に関する頭髪専門家SPHと、化粧メイクに関する化粧専門家SPMと、を含む。そして、専門家視線データDSは、頭髪専門家SPHの視線に関するヘア専門家視線データDSHと、化粧専門家SPMの視線に関するメイク専門家視線データDSMと、を含んでいる。
なお、髪型または髪色と化粧メイクとの両方に精通した専門家の場合、頭髪専門家SPHと化粧専門家SPMとは同一人でもよい。言い換えると、ヘア専門家視線データDSHとメイク専門家視線データDSMとは、同一人の視線に関する視線データでもよい。
In the present embodiment, the beauty specialist SP includes a hair specialist SPH related to a hairstyle or hair color, and a makeup specialist SPM related to cosmetic makeup. The expert line-of-sight data DS includes hair expert line-of-sight data DSH relating to the line of sight of the hair specialist SPH and makeup expert line-of-sight data DSM relating to the line of sight of the makeup specialist SPM.
In the case of an expert who is familiar with both the hairstyle or hair color and makeup makeup, the hair specialist SPH and the makeup specialist SPM may be the same person. In other words, the hair expert line-of-sight data DSH and the makeup expert line-of-sight data DSM may be line-of-sight data relating to the line of sight of the same person.

そして、視線データ蓄積部32に格納される第二の視線データD2には、頭髪専門家SPH、化粧専門家SPM、または著名人CEのいずれの視線データであるかを示す目視者識別情報と、目視された視覚的刺激50(サンプル画像55)を示すサンプル識別情報と、がヘッダー情報として付されている。   The second line-of-sight data D2 stored in the line-of-sight data storage unit 32 includes viewer identification information indicating which line of sight data is a hair specialist SPH, a makeup specialist SPM, or a celebrity CE. The sample identification information indicating the visually recognized visual stimulus 50 (sample image 55) is attached as header information.

サンプル画像55は、分類された各カテゴリより少なくとも一枚が、画像提示部10にて視線提供者に順次提示される。
視線データ蓄積部32には、これら複数枚のサンプル画像55の個々に対するヘア専門家視線データDSH、メイク専門家視線データDSMおよび著名人視線データDCが記憶されている。
At least one sample image 55 from each classified category is sequentially presented to the line-of-sight provider by the image presentation unit 10.
The line-of-sight data storage unit 32 stores hair expert line-of-sight data DSH, makeup expert line-of-sight data DSM, and celebrity line-of-sight data DC for each of the plurality of sample images 55.

また、シミュレーション部14(図2を参照)は、各サンプル画像55を画像処理して、その髪型、髪色、化粧メイクのいずれか一以上を複数通りに変化させる。かかる複数通りのサンプル画像55は、美容専門家SPや著名人CEに対して画像提示部10で順次提示される。
シミュレーション部14が行う、サンプル画像55に含まれる頭部60の髪型を変更するヘアスタイルシミュレーション、その髪色を変更するヘアカラーシミュレーション、および頭部60の顔面部分に化粧を施すメイクアップシミュレーションは、具体的には、上記の特許文献2に記載の画像処理方法を用いておこなうことができる。
そして、視線データ蓄積部32には、髪型、髪色および/または化粧メイクを変化させたサンプル画像55について、それぞれヘア専門家視線データDSH、メイク専門家視線データDSMおよび著名人視線データDCが関連づけて記憶されている。
Moreover, the simulation part 14 (refer FIG. 2) image-processes each sample image 55, and changes any one or more of the hairstyle, hair color, and makeup makeup in multiple ways. The plural sample images 55 are sequentially presented by the image presentation unit 10 to the beauty specialist SP and the celebrity CE.
A hairstyle simulation for changing the hairstyle of the head 60 included in the sample image 55, a haircolor simulation for changing the hair color, and a makeup simulation for applying makeup to the face portion of the head 60, which are performed by the simulation unit 14, Specifically, it can be performed using the image processing method described in Patent Document 2 above.
The line-of-sight data storage unit 32 associates hair expert line-of-sight data DSH, makeup professional line-of-sight data DSM, and celebrity line-of-sight data DC with respect to the sample image 55 in which the hairstyle, hair color, and / or makeup is changed. Is remembered.

図2に示すように、本実施形態の美容カウンセリングシステム100は、複数枚のサンプル画像55のうち、被験者画像との一致度の高いものを抽出する。そして、抽出された当該サンプル画像55に対する視線提供者の視線データを、視線データ蓄積部32より呼び出して表示出力する。すなわち、本実施形態の美容カウンセリングシステム100は、被験者S1に提示される視覚的刺激50(被験者画像)とサンプル画像55との一致度に基づいて、サンプル画像55を複数枚より抽出する抽出部74をさらに備えている。そして、表示部40は、抽出されたサンプル画像55に対応づけられた第二の視線データD2(ヘア専門家視線データDSH、メイク専門家視線データDSMまたは著名人視線データDC)を表示出力する。
これにより、被験者S1は、美容専門家SPまたは著名人CEが被験者S1を目視した場合に想定される視線を把握することができる。
なお、抽出部74における被験者画像とサンプル画像55との一致度の判断方法は特に限られない。たとえば後述するように、複数の項目に関するスコアを被験者画像とサンプル画像55とにそれぞれ付与し、スコアの傾向の類似性によって、画像同士の一致度を判断することができる。
As illustrated in FIG. 2, the beauty counseling system 100 according to the present embodiment extracts a plurality of sample images 55 having a high degree of coincidence with the subject image. Then, the line-of-sight provider's line-of-sight data for the extracted sample image 55 is called from the line-of-sight data storage unit 32 and displayed. In other words, the beauty counseling system 100 according to the present embodiment extracts the sample image 55 from a plurality of sheets based on the degree of coincidence between the visual stimulus 50 (subject image) presented to the subject S1 and the sample image 55. Is further provided. Then, the display unit 40 displays and outputs second line-of-sight data D2 (hair expert line-of-sight data DSH, makeup expert line-of-sight data DSM, or celebrity line-of-sight data DC) associated with the extracted sample image 55.
Thereby, the subject S1 can grasp the line of sight assumed when the beauty specialist SP or the celebrity CE views the subject S1.
The method for determining the degree of coincidence between the subject image and the sample image 55 in the extraction unit 74 is not particularly limited. For example, as will be described later, scores regarding a plurality of items can be assigned to the subject image and the sample image 55, respectively, and the degree of coincidence between images can be determined based on the similarity of the tendency of scores.

表示部40は、第一の視線データD1と第二の視線データD2とをともに表示出力する。第一の視線データD1と第二の視線データD2とは同時に表示出力されてもよく、時間的に相前後して表示出力されてもよい。   The display unit 40 displays and outputs both the first line-of-sight data D1 and the second line-of-sight data D2. The first line-of-sight data D1 and the second line-of-sight data D2 may be displayed and output simultaneously, or may be displayed and output in tandem with each other.

本実施形態の表示部40は、第一の視線データD1および第二の視線データD2を、被験者S1に提示した視覚的刺激50と重ね合わせて表示出力する。
ここで、表示部40は、第一の視線データD1および第二の視線データD2に関する画像データと被験者画像とをそれぞれ重畳して表示してもよく、第一の視線データD1または第二の視線データD2と被験者画像のデータとを画像合成した新たな画像データを表示出力してもよい。
このほか、積層された二枚のディスプレイで表示部40を構成するとともに、その少なくとも一方を透明ディスプレイとしてもよい。具体的には、被験者画像を表示するディスプレイの前面に重ねて、第一の視線データD1または第二の視線データD2を表示する透明な有機EL(Electro-Luminescence)ディスプレイを設置してもよい。これにより、被験者S1は第一の視線データD1または第二の視線データD2と被験者画像とを重ね合わせて目視することができる。
The display unit 40 of the present embodiment displays and outputs the first line-of-sight data D1 and the second line-of-sight data D2 superimposed on the visual stimulus 50 presented to the subject S1.
Here, the display unit 40 may superimpose and display the image data related to the first line-of-sight data D1 and the second line-of-sight data D2 and the subject image, and may display the first line-of-sight data D1 or the second line of sight. New image data obtained by combining the data D2 and the subject image data may be displayed and output.
In addition, the display unit 40 may be configured by two stacked displays, and at least one of them may be a transparent display. Specifically, a transparent organic EL (Electro-Luminescence) display that displays the first line-of-sight data D1 or the second line-of-sight data D2 may be installed on the front of the display that displays the subject image. Accordingly, the subject S1 can visually check the first line-of-sight data D1 or the second line-of-sight data D2 and the subject image.

ここで、本実施形態の表示部40は、第一の視線データD1および第二の視線データD2(専門家視線データDSまたは著名人視線データDC)を、視覚的刺激50に対する目視頻度に関する分布図として表示出力する。
これにより、被験者S1は、美容専門家SPまたは著名人CEが被験者S1の髪型、髪色および/または化粧メイクの似合いを判断するにあたってどの部位に着目するかを客観的に知得することができる。このため、被験者S1は、自らが行う美容行為における似合いの判断ポイントの妥当性について不安を解消することができる。
Here, the display unit 40 according to the present embodiment distributes the first line-of-sight data D1 and the second line-of-sight data D2 (expert line-of-sight data DS or celebrity line-of-sight data DC) with respect to the visual frequency for the visual stimulus 50. Display output.
Thereby, the subject S1 can objectively know which part the beauty specialist SP or the celebrity CE will focus on when determining the suitability of the hairstyle, hair color and / or makeup makeup of the subject S1. For this reason, the subject S1 can eliminate anxiety about the validity of the determination point of suitability in the beauty act performed by the subject S1.

なお、本実施形態において表示部40が視線データ(第一の視線データD1、第二の視線データD2)を表示出力するとは、視線取得部20で取得された視線データを任意で画像処理またはデータ処理して表示出力することを含む。
また、第一の視線データD1または第二の視線データD2が重畳されて表示部40で表示出力される被験者画像には、画像提示部10で被験者S1に提示された視覚的刺激50に対して任意で画像処理を施したものを用いることができる。具体的には、画像提示部10で被験者S1に提示される被験者画像(元画像)には比較的明度や彩度の高い画像を用いるとよい。そして、表示部40で出力される被験者画像には、重畳される第一の視線データD1または第二の視線データD2の画像データが鮮明に目視できるよう、元画像よりも明度や彩度を低下させたものを用いるとよい。
In the present embodiment, when the display unit 40 displays and outputs the line-of-sight data (first line-of-sight data D1, second line-of-sight data D2), the line-of-sight data acquired by the line-of-sight acquisition unit 20 is optionally subjected to image processing or data. Including processing and display output.
In addition, in the subject image displayed on the display unit 40 with the first line-of-sight data D1 or the second line-of-sight data D2 superimposed, the visual stimulus 50 presented to the subject S1 by the image presentation unit 10 is displayed. Any image-processed image can be used. Specifically, an image with relatively high brightness and saturation may be used as the subject image (original image) presented to the subject S1 by the image presentation unit 10. Then, the subject image output from the display unit 40 has lower brightness and saturation than the original image so that the image data of the first line-of-sight data D1 or the second line-of-sight data D2 to be superimposed can be clearly seen. It is good to use what was made to do.

(美容カウンセリング方法)
図3は、本実施形態の美容カウンセリングシステム100を用いておこなう美容カウンセリング方法(以下、本方法という場合がある)のフローチャートである。図1〜図3を用いて本方法を説明する。
(Beauty counseling method)
FIG. 3 is a flowchart of a beauty counseling method (hereinafter sometimes referred to as the present method) performed using the beauty counseling system 100 of the present embodiment. The method will be described with reference to FIGS.

本方法は、提示工程S22と視線追跡工程S24と表示工程S46と、を含む。
提示工程S22は、頭部を含む視覚的刺激50を被験者S1に提示する工程である。
視線追跡工程S24は、視覚的刺激50を目視する被験者S1の視線に関する第一の視線データD1を取得する工程である。
表示工程S46は、被験者S1に提示される視覚的刺激50または他の視覚的刺激を目視する視線提供者の視線に関する第二の視線データD2と、第一の視線データD1と、を表示出力する工程である。
The method includes a presentation step S22, a line-of-sight tracking step S24, and a display step S46.
Presenting step S22 is a step of presenting visual stimulus 50 including the head to subject S1.
The line-of-sight tracking step S24 is a step of acquiring first line-of-sight data D1 related to the line of sight of the subject S1 who views the visual stimulus 50.
The display step S46 displays and outputs the second line-of-sight data D2 and the first line-of-sight data D1 related to the line-of-sight of the line-of-sight provider viewing the visual stimulus 50 or other visual stimulus presented to the subject S1. It is a process.

本方法で被験者S1に提示される視覚的刺激50は、被験者S1の頭部を含む静止画像または動画像(被験者画像)である。そして、表示工程S46では、第一の視線データD1および第二の視線データD2を、それぞれ視覚的刺激50(被験者画像)に重ね合わせて表示出力する。   The visual stimulus 50 presented to the subject S1 in this method is a still image or a moving image (subject image) including the head of the subject S1. In the display step S46, the first line-of-sight data D1 and the second line-of-sight data D2 are superimposed on the visual stimulus 50 (subject image) and displayed.

以下、図1から3を用いて本方法をより詳細に説明する。
本方法では、被験者S1の視線に関する視線データ(第一の視線データD1)を被験者S1に対して表示出力して、当該被験者S1を被カウンセラーとして美容カウンセリングを提供する場合を例にして、まず以下の説明をおこなう。ただし、本発明はこれに限るものではなく、被験者と視線提供者と被カウンセラーとを種々に選択することで特有の効果が発揮されることを後述する。
Hereinafter, this method will be described in more detail with reference to FIGS.
In this method, for example, a case in which gaze data (first gaze data D1) relating to the gaze of the subject S1 is displayed and output to the subject S1, and beauty counseling is provided by using the subject S1 as a counselor is described below. I will explain. However, the present invention is not limited to this, and it will be described later that a specific effect is exhibited by variously selecting a subject, a line-of-sight provider, and a counselor.

本方法では、まず、視線提供者より第二の視線データD2を取得して、これを蓄積部30に蓄積する予備取得工程を行う。   In this method, first, a preliminary acquisition step of acquiring the second line-of-sight data D2 from the line-of-sight provider and storing it in the storage unit 30 is performed.

予備取得工程は、刺激取得工程S10と取得工程S20とからなる。
刺激取得工程S10では、頭部60を含むサンプル画像55を、視線提供者である頭髪専門家SPH、化粧専門家SPMまたは著名人CEに提示する。
具体的には、美容カウンセリングシステム100のCPU70は、画像蓄積部31に保存された一枚または複数枚のサンプル画像55を呼び出す。
The preliminary acquisition step includes a stimulus acquisition step S10 and an acquisition step S20.
In the stimulus acquisition step S10, the sample image 55 including the head 60 is presented to a hair specialist SPH, a makeup specialist SPM, or a celebrity CE who is a line-of-sight provider.
Specifically, the CPU 70 of the beauty counseling system 100 calls one or a plurality of sample images 55 stored in the image storage unit 31.

予備取得工程では、被験者S1に提示される視覚的刺激50(被験者画像)とは異なる他の視覚的刺激(サンプル画像55)を目視する視線提供者の視線に関する第二の視線データD2を取得する。   In the preliminary acquisition step, second line-of-sight data D2 relating to the line of sight of the line-of-sight provider viewing the visual stimulus (sample image 55) different from the visual stimulus 50 (subject image) presented to the subject S1 is acquired. .

取得工程S20では、CPU70は、画像蓄積部31から呼び出されたサンプル画像55を、画像提示部10にて視覚的刺激として表示出力させる(提示工程S22)。
頭髪専門家SPH、化粧専門家SPMまたは著名人CEは、視覚的刺激50を目視して、サンプル画像55にかかる人物の髪型、髪色または化粧メイクの似合いを判断する。
視線取得部20は、サンプル画像55を目視する視線提供者の視線に関する第二の視線データD2を所定時間に亘って取得する(視線追跡工程S24)。
視線取得部20は、取得した第二の視線データD2を蓄積部30の視線データ蓄積部32に保存する。
In the acquisition step S20, the CPU 70 causes the image presentation unit 10 to display and output the sample image 55 called from the image storage unit 31 as a visual stimulus (presentation step S22).
The hair specialist SPH, makeup specialist SPM, or celebrity CE views the visual stimulus 50 to determine the suitability of the person's hairstyle, hair color, or makeup for the sample image 55.
The line-of-sight acquisition unit 20 acquires second line-of-sight data D2 relating to the line of sight of the line-of-sight provider viewing the sample image 55 over a predetermined time (line-of-sight tracking step S24).
The line-of-sight acquisition unit 20 stores the acquired second line-of-sight data D2 in the line-of-sight data storage unit 32 of the storage unit 30.

つぎに、視線提供者に提示されるサンプル画像55を切り替える場合(S26:Y)には、その髪型、髪色および/または化粧メイクを変化させる画像処理がシミュレーション部14(CPU70)で行われる(シミュレーション工程S28)。
画像処理が施されたサンプル画像55は、画像提示部10にて繰り返し表示出力される(提示工程S22)。
提示工程S22および視線追跡工程S24が所定回数に亘って繰り返され、十分な量の第二の視線データD2が蓄積されたところで、取得工程S20は終了する(S26:N)。
また、本方法では、視線提供者に対しては美容アドバイスを行わず(S30:N)、一連の処理を終了する。
Next, when the sample image 55 presented to the line-of-sight provider is switched (S26: Y), image processing for changing the hairstyle, hair color and / or makeup is performed by the simulation unit 14 (CPU 70) ( Simulation step S28).
The sample image 55 subjected to the image processing is repeatedly displayed and output by the image presentation unit 10 (presentation step S22).
When the presentation step S22 and the line-of-sight tracking step S24 are repeated a predetermined number of times and a sufficient amount of the second line-of-sight data D2 is accumulated, the acquisition step S20 ends (S26: N).
Further, in this method, beauty advice is not given to the line-of-sight provider (S30: N), and a series of processing ends.

本方法では、髪型、髪色または化粧メイクを変化させたサンプル画像55に対してヘア専門家視線データDSH、メイク専門家視線データDSMおよび著名人視線データDCをそれぞれ取得する。これにより、サンプル画像55にかかる人物が髪型、髪色または化粧メイクを変化させた場合に美容専門家SPや著名人CEが着目する似合いの判断ポイントが多様に蓄積され、ひいては被験者S1に対する豊富なアドバイスが可能となる。   In this method, hair expert line-of-sight data DSH, makeup professional line-of-sight data DSM, and celebrity line-of-sight data DC are acquired for each sample image 55 in which the hairstyle, hair color, or makeup is changed. As a result, when the person on the sample image 55 changes the hairstyle, hair color, or makeup, a variety of matching points that the beauty specialist SP or celebrity CE is interested in are accumulated, and as a result, there are abundant abundances for the subject S1. Advice is possible.

つぎに、本実施形態の美容カウンセリングシステム100を用いて被験者S1に美容アドバイスを行う方法を説明する。
刺激取得工程S10では、まず、デジタルカメラなどの撮影部12にて被験者S1の頭部画像(被験者画像)を撮影する。ただし、刺激取得工程S10では、予め撮影された被験者画像のデータを画像蓄積部31に格納してもよい。
Next, a method for providing beauty advice to the subject S1 using the beauty counseling system 100 of the present embodiment will be described.
In the stimulus acquisition step S10, first, a head image (subject image) of the subject S1 is photographed by the photographing unit 12 such as a digital camera. However, in the stimulus acquisition step S <b> 10, data of a subject image captured in advance may be stored in the image storage unit 31.

撮影された被験者画像は、画像蓄積部31に保存されるとともに、画像提示部10で視覚的刺激50として表示出力される(提示工程S22)。
被験者S1は、画像提示部10で表示出力されている視覚的刺激50を目視して、髪型、髪色または化粧メイクの似合いを判断する。
視線追跡工程S24では、かかる被験者S1の視線を示す第一の視線データD1を、視線取得部20で取得する。
取得された第一の視線データD1は、被験者画像における部位ごとの目視頻度を示す分布図の画像データ(コンターデータ)として、視線データ蓄積部32に蓄積される。
The captured subject image is stored in the image storage unit 31 and displayed and output as a visual stimulus 50 by the image presentation unit 10 (presentation step S22).
The subject S1 looks at the visual stimulus 50 displayed and output by the image presentation unit 10 to determine the suitability of the hairstyle, hair color, or makeup.
In the line-of-sight tracking step S24, the line-of-sight acquisition unit 20 acquires first line-of-sight data D1 indicating the line of sight of the subject S1.
The acquired first line-of-sight data D1 is accumulated in the line-of-sight data accumulation unit 32 as image data (contour data) of a distribution diagram indicating the viewing frequency for each part in the subject image.

被験者画像と、被験者S1の第一の視線データD1には、それぞれ被験者S1を識別する個人IDが付されて画像蓄積部31と視線データ蓄積部32に蓄積される。   The subject image and the first line-of-sight data D1 of the subject S1 are each assigned a personal ID for identifying the subject S1 and stored in the image storage unit 31 and the line-of-sight data storage unit 32.

つぎに、被験者S1に提示される視覚的刺激50(被験者画像)を切り替える場合(S26:Y)には、画像蓄積部31に保存された被験者画像に対してその髪型、髪色および/または化粧メイクを変化させる画像処理を行う(シミュレーション工程S28)。かかる画像処理は、シミュレーション部14(CPU70)により行われる。
髪型、髪色および/または化粧メイクが変化した被験者画像は、新たな視覚的刺激50として、順次、画像提示部10で表示出力される(提示工程S22)。
所定回数に亘って提示工程S22と視線追跡工程S24とが繰り返されたところで(S26:N)、取得工程S20は終了する。
Next, when the visual stimulus 50 (subject image) presented to the subject S1 is switched (S26: Y), the hairstyle, hair color, and / or makeup for the subject image stored in the image storage unit 31 is displayed. Image processing for changing the makeup is performed (simulation step S28). Such image processing is performed by the simulation unit 14 (CPU 70).
The test subject image in which the hairstyle, hair color, and / or makeup is changed is sequentially displayed and output by the image presentation unit 10 as a new visual stimulus 50 (presentation step S22).
When the presentation step S22 and the line-of-sight tracking step S24 are repeated a predetermined number of times (S26: N), the acquisition step S20 ends.

そして、本方法では、被験者S1に対してアドバイスを行う(S30:Y)ための出力工程S40が行われる。   And in this method, output process S40 for giving advice to subject S1 (S30: Y) is performed.

まず、出力工程S40では、画像蓄積部31にライブラリとして保存されたサンプル画像55より、被験者画像に類似しているものを抽出部74(図2を参照)により抽出する(抽出工程S42)。
抽出工程S42は、具体的にはCPU70によるサンプル画像55の検索処理によって行われる。
上述のように、画像蓄積部31に記憶されているサンプル画像55は、複数のカテゴリに分類されている。抽出工程S42の一例として、CPU70は、被験者画像をサンプル画像55と同様にカテゴリ分類し、被験者画像と同一カテゴリに分類されているサンプル画像55を選択する。
このほか、抽出工程S42では、CPU70は、髪型のボリューム感の分布の特徴、顔型、顔パーツの相対位置などの観点から、被験者画像ともっとも類似度の高いサンプル画像55を検索してもよい。
First, in the output step S40, a sample image 55 stored as a library in the image storage unit 31 is extracted by the extraction unit 74 (see FIG. 2) that is similar to the subject image (extraction step S42).
Specifically, the extraction step S42 is performed by a search process of the sample image 55 by the CPU 70.
As described above, the sample images 55 stored in the image storage unit 31 are classified into a plurality of categories. As an example of the extraction step S42, the CPU 70 classifies the subject image in the same manner as the sample image 55, and selects the sample image 55 classified in the same category as the subject image.
In addition, in the extraction step S42, the CPU 70 may search for the sample image 55 having the highest degree of similarity to the subject image from the viewpoint of the distribution characteristics of the hairstyle volume, the face type, the relative position of the face parts, and the like. .

被験者画像に対応するサンプル画像55が画像蓄積部31から抽出されると、CPU70は、当該サンプル画像55に対応づけられた第二の視線データD2を、視線データ蓄積部32より呼び出す。具体的には、CPU70は、画像データとして記憶されている第二の視線データD2のヘッダー情報に基づいて、抽出工程S42で抽出されたサンプル画像55に対応する第二の視線データD2を検索する。   When the sample image 55 corresponding to the subject image is extracted from the image accumulation unit 31, the CPU 70 calls the second line-of-sight data D <b> 2 associated with the sample image 55 from the line-of-sight data accumulation unit 32. Specifically, the CPU 70 searches for the second line-of-sight data D2 corresponding to the sample image 55 extracted in the extraction step S42 based on the header information of the second line-of-sight data D2 stored as image data. .

つぎに、美容カウンセリングシステム100では画像合成工程S44を行う。画像合成工程S44では、まず、画像調整部76(図2を参照)にて、第二の視線データD2を被験者画像に重ね合わせるためのサイズ調整と位置合わせを行う。
具体的には、CPU70は、第二の視線データD2に対応づけられたサンプル画像55と被験者画像とにそれぞれ含まれる頭部60のサイズを正規化する。正規化の基準としては、たとえば、両目の中心を結んだライン上での顔幅を採ればよい。正規化によりサイズ調整したそれぞれの画像は、たとえば、上記両目の中心を結んだラインと両目の中間点が重なるように位置合わせを行う。
これにより、美容専門家SPや著名人CEに提示したサンプル画像55と被験者画像とが異なるものであっても、専門家視線データDSや著名人視線データDCを被験者画像に重ね合わせて表示出力することが可能となる。すなわち、美容専門家SPや著名人CEの視線データD2を有限枚のサンプル画像55に対して取得しておくだけで、不特定の被験者S1、S2、S3、・・・の被験者画像に対して視線データD2を重ね合わせて表示部40で表示することができる。
Next, the beauty counseling system 100 performs an image composition step S44. In the image composition step S44, first, the image adjustment unit 76 (see FIG. 2) performs size adjustment and alignment for superimposing the second line-of-sight data D2 on the subject image.
Specifically, the CPU 70 normalizes the size of the head 60 included in each of the sample image 55 and the subject image associated with the second line-of-sight data D2. As a standard for normalization, for example, the face width on a line connecting the centers of both eyes may be taken. Each image whose size has been adjusted by normalization is aligned so that, for example, the line connecting the centers of the eyes overlaps the midpoint of the eyes.
Thereby, even if the sample image 55 presented to the beauty specialist SP and the celebrity CE is different from the subject image, the expert gaze data DS and the celebrity gaze data DC are superimposed and displayed on the subject image. It becomes possible. That is, it is only necessary to acquire the line-of-sight data D2 of the beauty specialist SP and the celebrity CE for the finite number of sample images 55, and for the subject images of unspecified subjects S1, S2, S3,. The line-of-sight data D2 can be superimposed and displayed on the display unit 40.

つぎに、画像合成工程S44では、被験者S1に提示される視覚的刺激50(被験者画像)と第二の視線データD2とを合成する。
また、画像合成工程S44では、第一の視線データD1と視覚的刺激50(被験者画像)とを合成する。
CPU70は、第一の視線データD1および第二の視線データD2が合成された視覚的刺激50を画像蓄積部31に格納する。
なお、第一の視線データD1と第二の視線データD2は、被験者画像に対して個別に合成してもよく、または共通の視覚的刺激50に対して第一の視線データD1および第二の視線データD2をともに合成してもよい。
Next, in the image composition step S44, the visual stimulus 50 (subject image) presented to the subject S1 and the second line-of-sight data D2 are synthesized.
In the image composition step S44, the first line-of-sight data D1 and the visual stimulus 50 (subject image) are synthesized.
The CPU 70 stores the visual stimulus 50 in which the first line-of-sight data D1 and the second line-of-sight data D2 are combined in the image storage unit 31.
Note that the first line-of-sight data D1 and the second line-of-sight data D2 may be individually combined with the subject image, or the first line-of-sight data D1 and the second line-of-sight data 50 for the common visual stimulus 50 may be combined. The line-of-sight data D2 may be combined together.

表示工程S46では、表示部40は、第一の視線データD1および第二の視線データD2が合成された視覚的刺激50(被験者画像)を表示出力する。すなわち、本方法では、第一の視線データD1および第二の視線データD2を、それぞれ視覚的刺激50に重ね合わせて表示出力する。   In the display step S46, the display unit 40 displays and outputs a visual stimulus 50 (subject image) in which the first line-of-sight data D1 and the second line-of-sight data D2 are combined. That is, in the present method, the first line-of-sight data D1 and the second line-of-sight data D2 are superimposed on the visual stimulus 50 and displayed.

なお、第一の視線データD1の表示出力と、第二の視線データD2の表示出力とは、同時におこなってもよく、または異なるタイミングでおこなってもよい。また、これらは異なる表示部40で表示出力してもよい。   The display output of the first line-of-sight data D1 and the display output of the second line-of-sight data D2 may be performed simultaneously or at different timings. These may be displayed and output on different display units 40.

本方法では、第一の視線データD1と第二の視線データD2とを、被験者S1に対してともに表示出力する場合を例示する。   In this method, a case where the first line-of-sight data D1 and the second line-of-sight data D2 are both displayed and output to the subject S1 is exemplified.

第一の視線データD1および第二の視線データD2が合成された視覚的刺激50(被験者画像)には被験者を特定する個人IDがデータ付与されている。操作部72(図1を参照)を用いて被験者S1の個人IDをキー入力することで、画像蓄積部31から視覚的刺激50を呼び出して表示部40で出力することができる。   The visual stimulus 50 (subject image) in which the first line-of-sight data D1 and the second line-of-sight data D2 are combined is assigned a personal ID for identifying the subject. By using the operation unit 72 (see FIG. 1) to key-in the personal ID of the subject S1, the visual stimulus 50 can be called from the image storage unit 31 and output on the display unit 40.

アドバイザーと被験者S1は、かかる表示部40を目視して、被験者S1の視線と美容専門家SPや著名人CEの視線とを対照し、一連の処理を終了する。   The adviser and the subject S1 visually observe the display unit 40, contrast the line of sight of the subject S1 with the line of sight of the beauty specialist SP and the celebrity CE, and finish the series of processes.

より具体的には、本方法は、表示出力された第一の視線データD1と第二の視線データD2との相違に基づく美容アドバイスを被カウンセラーに提供する工程をさらに含んでもよい。すなわち、表示部40を目視した被カウンセラーは、美容に関するセルフカウンセリングをおこなってもよく、または表示部40を目視した美容専門家SPが被カウンセラーに美容アドバイスを与えてもよい。   More specifically, the method may further include the step of providing the counselor with beauty advice based on the difference between the first line-of-sight data D1 and the second line-of-sight data D2 that are displayed and output. That is, the counselor viewing the display unit 40 may perform beauty counseling, or the beauty specialist SP viewing the display unit 40 may give the counselor beauty advice.

より具体的には、被験者S1の第一の視線データD1と、他者(美容の素人または美容専門家)の第二の視線データD2とを比較することにより、美容専門家SPから美容行為における重要なポイントに関する説得力のあるアドバイスを受けることができ、また被験者S1自身も、美容行為におけるポイントを分析してセルフカウンセリングをすることができる。   More specifically, by comparing the first line-of-sight data D1 of the subject S1 and the second line-of-sight data D2 of another person (a beauty amateur or a beauty specialist), the beauty specialist SP performs a cosmetic action. Persuasive advice on important points can be received, and the subject S1 himself can also analyze points in the beauty and perform self-counseling.

本方法によれば、提示工程S22と視線追跡工程S24とを含む美容ポイント分析方法が提供される。
提示工程S22は、本方法と共通であり、頭部を含む視覚的刺激50を被験者S1に提示する。
そして、本実施形態の美容ポイント分析方法における視線追跡工程S24では、視覚的刺激50を目視する被験者S1の視線に関する第一の視線データD1を取得し、また、視覚的刺激50または他の視覚的刺激を目視する視線提供者の視線に関する第二の視線データD2を、第一の視線データD1と対応づけて取得する。
According to this method, a beauty point analysis method including a presentation step S22 and a line-of-sight tracking step S24 is provided.
The presenting step S22 is common to the present method, and presents the visual stimulus 50 including the head to the subject S1.
In the line-of-sight tracking step S24 in the beauty point analysis method of the present embodiment, first line-of-sight data D1 relating to the line of sight of the subject S1 viewing the visual stimulus 50 is acquired, and the visual stimulus 50 or other visual stimulus is acquired. Second line-of-sight data D2 relating to the line of sight of the line-of-sight provider viewing the stimulus is acquired in association with the first line-of-sight data D1.

このように、第一の視線データD1と第二の視線データD2とを対応づけて取得することにより、第一の視線データD1と第二の視線データD2との相違に基づく美容アドバイスのポイントとなるデータを得ることができる。   Thus, by obtaining the first line-of-sight data D1 and the second line-of-sight data D2 in association with each other, the point of beauty advice based on the difference between the first line-of-sight data D1 and the second line-of-sight data D2 Can be obtained.

<第二実施形態>
図4は、本実施形態の美容カウンセリングシステム100の構成図である。
本実施形態の美容カウンセリングシステム100は、蓄積部30と、複数の視線取得部20および表示部40と、がネットワーク110を通じて互いに接続されている。
<Second embodiment>
FIG. 4 is a configuration diagram of the beauty counseling system 100 of the present embodiment.
In the beauty counseling system 100 of this embodiment, the storage unit 30, the plurality of line-of-sight acquisition units 20, and the display unit 40 are connected to each other through a network 110.

すなわち、第一実施形態の美容カウンセリングシステム100がスタンドアローン型であるのに対して、本実施形態の美容カウンセリングシステム100はネットワーク型である。
ネットワーク110としてはインターネットが例示される。
本実施形態の蓄積部30は、ネットワーク110に接続された一つまたは複数のサーバ型記憶装置であり、画像蓄積部31と視線データ蓄積部32を備えている。
That is, the beauty counseling system 100 of the first embodiment is a stand-alone type, whereas the beauty counseling system 100 of the present embodiment is a network type.
The network 110 is exemplified by the Internet.
The storage unit 30 of this embodiment is one or more server-type storage devices connected to the network 110 and includes an image storage unit 31 and a line-of-sight data storage unit 32.

アドバイス装置91〜94は、個別にネットワーク110に接続されている。
アドバイス装置91〜94は、撮影部12、画像提示部10、視線取得部20、表示部40、CPU70および操作部72を備えている。これらは、送受信部90を介してネットワーク110に接続されている。
The advice devices 91 to 94 are individually connected to the network 110.
The advice devices 91 to 94 include an imaging unit 12, an image presentation unit 10, a line-of-sight acquisition unit 20, a display unit 40, a CPU 70, and an operation unit 72. These are connected to the network 110 via the transmission / reception unit 90.

アドバイス装置91〜94は、被験者S1、S2、S3のほか、美容専門家SPや著名人CEに供される。
アドバイス装置94では、画像蓄積部31に蓄積されたサンプル画像55(図1を参照)がネットワーク110および送受信部90を介して画像提示部10に表示される。
かかるサンプル画像55を目視する美容専門家SPや著名人CEの視線データD2は、視線取得部20で取得されて視線データ蓄積部32に記憶される。
The advice devices 91 to 94 are provided to the beauty specialist SP and the celebrity CE in addition to the subjects S1, S2, and S3.
In the advice device 94, the sample image 55 (see FIG. 1) accumulated in the image accumulation unit 31 is displayed on the image presentation unit 10 via the network 110 and the transmission / reception unit 90.
The line-of-sight data D2 of the beauty specialist SP and the celebrity CE who views the sample image 55 is acquired by the line-of-sight acquisition unit 20 and stored in the line-of-sight data storage unit 32.

アドバイス装置91〜93はそれぞれ撮影部12を備えている。撮影部12が撮影した被験者S1〜S3の被験者画像は画像提示部10で表示される。
CPU70は、画像蓄積部31に記憶されたサンプル画像55の中から、被験者S1〜S3の被験者画像との類似度の高いものを抽出し、当該サンプル画像55に対応づけられた視線データD2を視線データ蓄積部32から取得する。
The advice devices 91 to 93 each include a photographing unit 12. The subject images of the subjects S1 to S3 taken by the photographing unit 12 are displayed by the image presentation unit 10.
The CPU 70 extracts, from the sample images 55 stored in the image storage unit 31, those having high similarity to the subject images of the subjects S1 to S3, and uses the line-of-sight data D2 associated with the sample image 55 as the line of sight. Obtained from the data storage unit 32.

被験者画像を目視する被験者S1〜S3の視線データD1は、視線取得部20で取得され、被験者画像と重ね合わされて表示部40で表示される。
一方、送受信部90を通じて視線データ蓄積部32から受信した視線データD2も、被験者画像と重ね合わされて表示部40で表示される。
被験者S1〜S3は、表示部40を目視することにより、美容専門家SPや著名人CEの視線データD2と、自らの視線データD1との差異を視覚的に知得することができる。
The line-of-sight data D1 of the subjects S1 to S3 viewing the subject image is acquired by the line-of-sight acquisition unit 20, superimposed on the subject image, and displayed on the display unit 40.
On the other hand, the line-of-sight data D <b> 2 received from the line-of-sight data storage unit 32 through the transmission / reception unit 90 is also superimposed on the subject image and displayed on the display unit 40.
The subjects S1 to S3 can visually know the difference between the line-of-sight data D2 of the beauty specialist SP and the celebrity CE and their own line-of-sight data D1 by viewing the display unit 40.

ここで、アドバイス装置91〜93は、被験者S1〜S3より取得した被験者画像および視線データD1を、互いに対応づけて画像蓄積部31および視線データ蓄積部32に送信してもよい。
本実施形態によれば、美容に関する素人である多数かつ散在する被験者の視線データD1を蓄積部30に蓄積してゆくことができる。これにより、素人の視線の傾向を示す情報を統計的に取得することができ、任意の被験者に対して他の被験者の視線との傾向の差異を視覚的に示すことが可能である。
Here, the advice devices 91 to 93 may transmit the subject image and the line-of-sight data D1 acquired from the subjects S1 to S3 to the image storage unit 31 and the line-of-sight data storage unit 32 in association with each other.
According to the present embodiment, it is possible to accumulate the line-of-sight data D1 of many and scattered subjects who are amateurs related to beauty in the accumulation unit 30. Thereby, the information which shows the tendency of an amateur's eyes | visual_axis can be statistically acquired, and it is possible to show visually the difference of a tendency with respect to another test subject's eyes | visual_axis.

上記実施形態は種々の変形を許容する。
第一実施形態では、サンプル画像55および被験者画像の髪型、髪色、化粧メイクをシミュレーション部14で変化させることを説明したが、本発明はこれに限られない。髪型、髪色、化粧メイクに代えて、またはこれらに加えて、たとえば着衣やアクセサリーの形状やカラーを変化させたサンプル画像55に基づく視線データD2を視線提供者から取得して蓄積部30に蓄積しておくとよい。これにより、所定の衣服やアクセサリーとのバランスに鑑みて化粧メイクやヘアメイクの似合いを判断する際の被験者S1の視線データD1と美容専門家SPや著名人CEの視線データD2とを対照することができる。
The above embodiment allows various modifications.
In the first embodiment, it has been described that the hairstyle, hair color, and makeup of the sample image 55 and the subject image are changed by the simulation unit 14, but the present invention is not limited to this. Instead of or in addition to the hairstyle, hair color, and makeup, for example, the line-of-sight data D2 based on the sample image 55 in which the shape and color of clothes and accessories are changed is acquired from the line-of-sight provider and stored in the storage unit 30. It is good to keep. Thus, it is possible to contrast the line-of-sight data D1 of the subject S1 and the line-of-sight data D2 of the beauty specialist SP and the celebrity CE when judging the suitability of makeup makeup and hair makeup in view of the balance with predetermined clothes and accessories. it can.

また、表示部40で第一の視線データD1とともに表示出力する第二の視線データD2は、当該被験者S1、S2、S3、・・・より過去に取得された視線データでもよい。すなわち、本方法における視線提供者は、当該被験者S1、S2、S3、・・・から見た他人(第三者)に限られず、過去の自分でもよい。
そして、過去の自分の視線データD2を、現在の自分の視線データD1とともに表示部40で表示出力することにより、被験者S1は、似合いの判断時の着目点に関する自己の変化や成長を確認することができる。
Further, the second line-of-sight data D2 displayed and output together with the first line-of-sight data D1 on the display unit 40 may be line-of-sight data acquired in the past from the subjects S1, S2, S3,. That is, the line-of-sight provider in the present method is not limited to another person (third party) viewed from the subject S1, S2, S3,.
The subject S1 confirms his / her own change and growth regarding the point of interest at the time of determination of suitability by displaying the past his / her own line-of-sight data D2 on the display unit 40 together with the current own line-of-sight data D1. Can do.

また、上記実施形態では被験者S1の被験者画像を視覚的刺激50として用いることを説明したが、本発明では被験者S1の鏡像を視覚的刺激50としてもよい。すなわち、画像提示部10に鏡(ミラーまたはハーフミラー)を用いて、画像提示部10に被験者S1の頭部を映してもよい。この場合、視線取得部20は、鏡に映る被験者S1を目視する被験者S1の視線を取得する。
一方、被験者S1の頭部に関する鏡面写真のデジタルデータを撮影部12で取得して画像蓄積部31に保存し、当該データに対して視線データD1およびD2を合成し、表示部40で出力する。
このように、本実施形態においては、画像提示部10で被験者S1に提示する視覚的刺激と、表示部40で表示出力する視覚的刺激とは異なるものでもよい。
Moreover, although the said embodiment demonstrated using the test subject image of test subject S1 as the visual stimulus 50, it is good also considering the mirror image of test subject S1 as the visual stimulus 50 in this invention. That is, a mirror (a mirror or a half mirror) may be used for the image presentation unit 10 and the head of the subject S1 may be projected on the image presentation unit 10. In this case, the line-of-sight acquisition unit 20 acquires the line of sight of the subject S1 who views the subject S1 reflected in the mirror.
On the other hand, digital data of a specular photograph relating to the head of the subject S1 is acquired by the photographing unit 12 and stored in the image storage unit 31, and the line-of-sight data D1 and D2 are combined with the data and output by the display unit 40.
Thus, in this embodiment, the visual stimulus presented to the subject S1 by the image presentation unit 10 and the visual stimulus displayed and output by the display unit 40 may be different.

また、被験者S1から取得した第一の視線データD1は、上記のように画像蓄積部31に一旦保存した上で視覚的刺激50に合成されて表示部40で出力してもよく、または画像蓄積部31を介さず視線取得部20から表示部40に出力してもよい。後者の場合、被験者S1に対してその視線をリアルタイムで表示することができる。したがって、画像提示部10と表示部40とを共通のディスプレイ装置によって実現してもよい。   Further, the first line-of-sight data D1 acquired from the subject S1 may be temporarily stored in the image storage unit 31 as described above, and then synthesized with the visual stimulus 50 and output on the display unit 40, or the image storage. The output may be output from the line-of-sight acquisition unit 20 to the display unit 40 without going through the unit 31. In the latter case, the line of sight can be displayed to the subject S1 in real time. Therefore, the image presentation unit 10 and the display unit 40 may be realized by a common display device.

また、上記実施形態では、サンプル画像55を複数のカテゴリに分類して画像蓄積部31に記憶することを説明したが、本発明はこれに限られない。サンプル画像55には複数の項目に関するスコアを付与して画像蓄積部31に記憶してもよい。項目としては、上述のカテゴリと同様に、髪型のボリューム感の分布の特徴、顔型、顔パーツの相対位置、肌色の分類、虹彩色の分類、年齢などを用いることができる。すなわち、サンプル画像55を各項目に関してスコア付けして、スコアデータをテーブル形式で蓄積部30に記憶しておく。そして、撮影部12で取得した被験者画像を同様にスコア付けし、スコアの一致度の高いサンプル画像55をテーブル検索して抽出してもよい。   In the above embodiment, the sample image 55 is classified into a plurality of categories and stored in the image storage unit 31. However, the present invention is not limited to this. The sample image 55 may be stored in the image storage unit 31 with scores relating to a plurality of items. As the items, similar to the above-mentioned category, the distribution feature of the hair style volume, the face type, the relative position of the face parts, the skin color classification, the iris color classification, the age, and the like can be used. That is, the sample image 55 is scored for each item, and the score data is stored in the storage unit 30 in a table format. Then, the subject images acquired by the imaging unit 12 may be scored in the same manner, and the sample image 55 having a high score matching score may be searched and extracted.

また、上記実施形態では、第一の視線データD1および第二の視線データD2を、目視頻度の分布図として表示出力することを例示したが、本発明はこれに限られない。たとえば、第一の視線データD1および第二の視線データD2を、目視順と各目視点での静止時間を可視化したプロット図として表示出力してもよいし、被験者S1の視線の傾向を美容専門家SPや著名人CEの視線の傾向と対比して、テキストメッセージまたは数値にてディスプレイ表示または印字出力してもよい。   In the above-described embodiment, the first line-of-sight data D1 and the second line-of-sight data D2 are exemplified as display frequency distribution maps, but the present invention is not limited to this. For example, the first line-of-sight data D1 and the second line-of-sight data D2 may be displayed and output as a plot diagram in which the visual order and the rest time at each eye viewpoint are visualized. In contrast to the tendency of the line of sight of the house SP and the celebrity CE, it may be displayed or printed out by a text message or a numerical value.

<その他の実施形態>
上記実施形態では、被験者と視線提供者とを異なる人物とし、また被験者を被カウンセラーとして美容アドバイスを提供する場合を例に本発明を説明した。また、視覚的刺激50としては、被験者の頭部を含む画像を用いる場合を例示した。
しかしながら、以下に例示するように被験者、視線提供者、被カウンセラーおよび視覚的刺激を種々に設定することで、それぞれ独自の効果を発揮する美容カウンセリングシステム、美容カウンセリング方法および美容ポイント分析方法が提供される。
<Other embodiments>
In the above-described embodiment, the present invention has been described by taking as an example the case where the subject and the line-of-sight provider are different persons, and beauty advice is provided by using the subject as a counselor. Moreover, as the visual stimulus 50, a case where an image including a subject's head is used is illustrated.
However, there are provided a beauty counseling system, a beauty counseling method, and a beauty point analysis method, each of which exhibits its own effect by variously setting a subject, a gaze provider, a counselor, and a visual stimulus as exemplified below. The

(i)視線提供者は、被験者S1であってもよい。言い換えると、第二の視線データD2を提供する視線提供者と、第一の視線データD1を提供する被験者S1を同一人物としてもよい。このとき、例えば被験者S1が美容に関する素人である場合に、当該被験者S1の視線データが、視覚的刺激ごとにどのように変化するかを、被験者S1に示すことができる。
とくに、第二の視線データD2として、被験者S1と異なる他者の頭部を含む視覚的刺激を用いた場合には、当該被験者S1が自身および他者を見る視線データを比較して示すことができる。これにより、被験者S1の主観的な見方に客観的な修正を加え、被験者S1に気付きを与えながら、当該被験者(被カウンセラー)に対してカウンセリングを行うことができる。言い換えると、被験者S1が自身の像を主観的に見る視線と、被験者S1が他人を客観的に見る視線とを対比することで、被験者S1が自身に感じている印象が主観的なものか客観的なものであるか否かを示すことができ、また美容に関して被験者S1が抱えている悩みを分析することができる。
(I) The line-of-sight provider may be the subject S1. In other words, the line-of-sight provider that provides the second line-of-sight data D2 and the subject S1 that provides the first line-of-sight data D1 may be the same person. At this time, for example, when the subject S1 is an amateur related to beauty, the subject S1 can be shown how the line-of-sight data of the subject S1 changes for each visual stimulus.
In particular, when a visual stimulus including the head of another person different from the subject S1 is used as the second line-of-sight data D2, the subject S1 may show a comparison of the line-of-sight data looking at itself and others. it can. Thereby, it is possible to perform counseling on the subject (the counselor) while objectively correcting the subjective view of the subject S1 and giving the subject S1 awareness. In other words, by comparing the line of sight of the subject S1 subjectively looking at his / her image and the line of sight of the subject S1 objectively looking at another person, the impression that the subject S1 feels is subjective or objective. It is possible to show whether the subject S1 is concerned or not and to analyze the worries that the subject S1 has regarding beauty.

(ii)第一の視線データD1が、被験者S1の頭部を含む視覚的刺激に対する被験者S1の視線に関する視線データであり、第二の視線データD2が、他者の頭部を含む他の視覚的刺激に対する当該他者の視線に関する視線データであってもよい。   (Ii) The first line-of-sight data D1 is line-of-sight data regarding the line of sight of the subject S1 with respect to the visual stimulus including the head of the subject S1, and the second line-of-sight data D2 is another visual including the head of another person. It may be line-of-sight data related to the line of sight of the other person with respect to a visual stimulus.

これにより、他者が自身を観察する視線と、被験者S1が自身を観察する視線とを比較して被験者S1(被カウンセラー)に示すことができる。この場合も、被験者S1の主観的な見方に客観的な修正を加え、被験者S1に気付きを与えながら、当該被験者S1に対してカウンセリングを行うことができる。   Thereby, the line of sight of the other person observing himself and the line of sight of the subject S1 observing himself can be shown to the subject S1 (counselor). In this case as well, it is possible to perform counseling on the subject S1 while making an objective correction to the subjective view of the subject S1 and notifying the subject S1.

(iii)上記の(ii)の場合において、他者が美容専門家SPであってもよい。すなわち、美容専門家SPが自身を観察する視線と、被験者S1が自身を観察する視線とを対比して被験者S1(被カウンセラー)に示すことができる。これにより、被験者S1が美容の素人であるか専門家であるかにかかわらず、他者(美容専門家SP)による自己観察の仕方を被験者S1は学ぶことができる。   (Iii) In the case of (ii) above, the other person may be a beauty specialist SP. That is, the line of sight of the beauty specialist SP observing himself and the line of sight of the subject S1 observing himself can be shown to the subject S1 (counselor). Thereby, regardless of whether the subject S1 is a beauty amateur or an expert, the subject S1 can learn how to observe by another person (beauty specialist SP).

(iv)上記の(iii)の場合において、被カウンセラーが被験者S1と異なる人物であってもよい。すなわち、美容専門家SPが自身を観察する視線と、その他人にあたる被験者S1(美容の素人または美容専門家)が自身を観察する視線と、を対比して、第三者にあたる被カウンセラーに示すことができる。これにより、被カウンセラーは、美容専門家SPと素人による自身の観察時の視線の差異や、美容専門家SP同士による自身の観察時の視線の差異を学ぶことができる。   (Iv) In the case of (iii) above, the counselor may be a person different from the subject S1. That is, the line of sight that the beauty specialist SP observes and the line of sight of the subject S1 (beauty amateur or beauty specialist) who observes himself / herself are shown to a counselor corresponding to a third party. Can do. Thus, the counselor can learn the difference in line of sight when the beauty specialist SP and the amateur observe themselves, and the difference in line of sight when the beauty specialists SP observe each other.

(v)また、被験者S1に提示する視覚的刺激が、被カウンセラーの頭部を含んでもよい。被カウンセラーと被験者S1とは、互いに同一でもよく、または相違してもよい。被カウンセラーと被験者S1とが同一であり、これと視線提供者とが相違する場合には、被験者S1に客観的な見方の重要性について気付きを与えながらカウンセリングをおこなうことができる。すなわち、第三者にあたる視線提供者が被カウンセラーを客観的に観察する視線と、被カウンセラーが自身の像を主観的に観察する視線との相違の大小を示すことで、被カウンセラーが自身を客観的に観察できているか否かを知得させることができる。
また、被カウンセラーと被験者S1と視線提供者とが互いに相違する場合には、被カウンセラーの頭部に対して複数の人間(被験者および視線提供者)がどのように視線を送るかを客観的に示すことができる。
(V) The visual stimulus presented to the subject S1 may include the head of the counselor. The counselor and the subject S1 may be the same as or different from each other. When the counselor and the subject S1 are the same and the gaze provider is different, the counseling can be performed while giving the subject S1 awareness of the importance of the objective view. In other words, the counselor gives an objective view of the counselor by showing the size of the difference between the line of sight of the counselor objectively viewed by a third party and the line of sight of the counselor subjectively observing his / her image. It is possible to know whether or not the observation is possible.
In addition, when the counselor, the subject S1, and the line-of-sight provider are different from each other, it is objective to determine how a plurality of persons (subjects and line-of-sight providers) send lines of sight to the head of the counselor. Can show.

(vi)また、第二の視線データD2は、美容行為の動画または実演に対する美容専門家SPの視線に関する専門家視線データDSであってもよい。かかる美容行為は、当該美容専門家SPが自らおこなうものでもよく、または他の美容専門家によっておこなわれるものでもよい。これにより、美容行為に対する美容専門家SPの視線と、被験者S1の視線とを比較して示すことができる。すなわち、美容行為の動画または実演(いわゆるハウツー動画や実演)に対して、上級者にあたる美容専門家SPの視線情報を付与することにより、被カウンセラーへの伝達力が向上する。   (Vi) The second line-of-sight data D2 may be expert line-of-sight data DS relating to the line of sight of the beauty specialist SP with respect to a video or demonstration of a beauty act. Such a beauty act may be performed by the beauty specialist SP himself or may be performed by another beauty specialist. Accordingly, it is possible to compare and show the line of sight of the beauty specialist SP for the beauty action and the line of sight of the subject S1. In other words, by adding the line-of-sight information of the beauty expert SP, who is an advanced person, to a beauty action movie or demonstration (so-called how-to movie or demonstration), the ability to communicate to the counselor is improved.

(vii)また、被験者S1に提示する視覚的刺激が、この被験者S1が知っている人物の頭部を含んでもよい。また、第二の視線データD2が、視線提供者の知らない人物(被験者S1が知っている人物でもよい)の頭部を含む視覚的刺激に対する、この視線提供者の視線に関する視線データであってもよい。これにより、既知の(親密な)人物の頭部に対する被験者S1の視線と、未知(初対面)の人物の頭部に対する視線提供者の視線とを比較して示すことができる。よって、親密者と初対面者それぞれに合わせて魅力を強調する美容ポイント(顔パーツ、髪など)を把握することができる。この場合、被カウンセラーは、被験者S1と同一でもよく、または相違してもよい。   (Vii) The visual stimulus presented to the subject S1 may include the head of a person known to the subject S1. The second line-of-sight data D2 is line-of-sight data relating to the line-of-sight of the line-of-sight provider with respect to a visual stimulus including the head of a person who the line-of-sight provider does not know (may be a person known to the subject S1). Also good. Thereby, the line of sight of the subject S1 with respect to the head of a known (intimate) person and the line of sight of the line of sight provider with respect to the head of an unknown (first-to-face) person can be compared and shown. Therefore, it is possible to grasp beauty points (facial parts, hair, etc.) that emphasize attractiveness according to the intimate person and the first meeting person. In this case, the counselor may be the same as or different from the subject S1.

上記実施形態は、以下の技術的思想を包含する。
(1)頭部を含む視覚的刺激を被験者に提示する提示手段と、
前記視覚的刺激を目視する前記被験者の視線に関する第一の視線データを取得する取得手段と、
前記視覚的刺激または他の視覚的刺激を目視する視線提供者の視線に関する第二の視線データを保存する蓄積手段と、
前記第一の視線データと前記第二の視線データとをともに表示出力する表示手段と、
を有する美容アドバイスシステム。
(2)前記被験者に提示される前記視覚的刺激が、前記被験者もしくは他者の頭部を含む静止画像、動画像、鏡像または美容行為の実演である(1)に記載の美容アドバイスシステム。
(3)前記被験者に提示される前記視覚的刺激が、前記被験者の静止画像または動画像であって、
前記表示手段が、第一および第二の前記視線データを、前記視覚的刺激と重ね合わせて表示出力することを特徴とする(1)に記載の美容アドバイスシステム。
(4)前記第二の視線データが、前記被験者に提示される前記視覚的刺激とは異なる他の視覚的刺激を目視する前記視線提供者の視線に関するデータであって、
前記表示手段が、前記被験者に提示される前記視覚的刺激と前記第二の視線データとを合成して表示出力することを特徴とする(1)から(3)のいずれかに記載の美容アドバイスシステム。
(5)前記表示手段が、目視頻度に関する分布図として第一および第二の前記視線データを表示出力する(1)から(4)のいずれかに記載の美容アドバイスシステム。
(6)前記蓄積手段が、頭部をそれぞれ含む複数のサンプル画像と、前記サンプル画像を個別に目視する前記視線提供者の視線に関する前記第二の視線データと、を互いに対応づけて保存している(1)から(5)のいずれかに記載の美容アドバイスシステムであって、
前記被験者に提示される前記視覚的刺激との一致度に基づいて、前記サンプル画像を前記複数より抽出する抽出手段をさらに備えるとともに、
前記表示手段が、抽出された前記サンプル画像に対応づけられた前記第二の視線データを表示出力することを特徴とする美容アドバイスシステム。
(7)前記蓄積手段と、複数の前記取得手段および前記表示手段と、がネットワークを通じて互いに接続されていることを特徴とする(1)から(6)のいずれかに記載の美容アドバイスシステム。
(8)前記第二の視線データが、美容専門家の視線に関する専門家視線データである(6)に記載の美容アドバイスシステム。
(9)前記美容専門家が、髪型または髪色に関する頭髪専門家と、化粧メイクに関する化粧専門家と、を含み、
前記専門家視線データが、前記頭髪専門家の視線に関するヘア専門家視線データと、前記化粧専門家の視線に関するメイク専門家視線データと、を含む(8)に記載の美容アドバイスシステム。
(10)前記蓄積手段は、髪型または髪色の一方または両方を互いに変化させた複数の前記サンプル画像と、前記サンプル画像を個別に目視する前記頭髪専門家より取得された前記ヘア専門家視線データを保存し、
前記提示手段は、第一の前記視覚的刺激に続けて、髪型または髪色の一方または両方を変化させた第二の視覚的刺激を前記被験者に提示し、
前記表示手段は、前記被験者より取得した前記第一の視線データと、前記ヘア専門家視線データと、をともに表示出力する(9)に記載の美容アドバイスシステム。
(11)前記蓄積手段は、化粧メイクを互いに変化させた複数の前記サンプル画像と、前記サンプル画像を個別に目視する前記化粧専門家より取得された前記メイク専門家視線データを保存し、
前記提示手段は、第一の前記視覚的刺激に続けて、化粧メイクを変化させた第二の視覚的刺激を前記被験者に提示し、
前記表示手段は、前記被験者より取得した前記第一の視線データと、前記メイク専門家視線データと、をともに表示出力する(9)に記載の美容アドバイスシステム。
(12)前記第二の視線データが、著名人の視線に関する著名人視線データである(1)から(7)のいずれかに記載の美容アドバイスシステム。
(13)被験者の視線に関する視線データを前記被験者に対して表示出力する美容アドバイス方法であって、
頭部を含む視覚的刺激を被験者に提示する工程と、
前記視覚的刺激を目視する前記被験者の視線に関する第一の視線データを取得する工程と、
前記視覚的刺激または他の視覚的刺激を目視する視線提供者の視線に関する第二の視線データと、前記第一の視線データと、を前記被験者に対してともに表示出力する工程と、
を含む美容アドバイス方法。
(14)前記被験者に提示される前記視覚的刺激が前記被験者の頭部を含む静止画像または動画像であって、
前記第一の視線データおよび前記第二の視線データを、それぞれ前記視覚的刺激に重ね合わせて表示出力することを特徴とする(13)に記載の美容アドバイス方法。
(15)前記被験者に提示される前記視覚的刺激とは異なる他の視覚的刺激を目視する前記視線提供者の視線に関する前記第二の視線データを取得する工程と、
前記被験者に提示される前記視覚的刺激と前記第二の視線データとを合成する工程と、
をさらに含む(13)または(14)に記載の美容アドバイス方法。
The above embodiment includes the following technical idea.
(1) a presentation means for presenting a visual stimulus including a head to a subject;
Obtaining means for obtaining first line-of-sight data relating to the line of sight of the subject who visually observes the visual stimulus;
Storage means for storing second line-of-sight data relating to the line of sight of the line-of-sight provider viewing the visual stimulus or other visual stimulus;
Display means for displaying and outputting both the first line-of-sight data and the second line-of-sight data;
Having beauty advice system.
(2) The beauty advice system according to (1), wherein the visual stimulus presented to the subject is a still image including a head of the subject or another person, a moving image, a mirror image, or a demonstration of a beauty act.
(3) The visual stimulus presented to the subject is a still image or a moving image of the subject,
The beauty advice system according to (1), wherein the display unit displays and outputs the first and second line-of-sight data superimposed on the visual stimulus.
(4) The second line-of-sight data is data relating to the line of sight of the line-of-sight provider viewing another visual stimulus different from the visual stimulus presented to the subject,
The beauty advice according to any one of (1) to (3), wherein the display unit synthesizes and displays the visual stimulus presented to the subject and the second line-of-sight data. system.
(5) The beauty advice system according to any one of (1) to (4), wherein the display unit displays and outputs the first and second line-of-sight data as a distribution diagram relating to visual frequency.
(6) The storage means stores a plurality of sample images each including a head and the second line-of-sight data relating to the line-of-sight of the line-of-sight provider who individually views the sample images in association with each other. The beauty advice system according to any one of (1) to (5),
And further comprising extraction means for extracting the sample image from the plurality based on the degree of coincidence with the visual stimulus presented to the subject,
The beauty advice system, wherein the display means displays and outputs the second line-of-sight data associated with the extracted sample image.
(7) The beauty advice system according to any one of (1) to (6), wherein the storage unit, the plurality of acquisition units, and the display unit are connected to each other through a network.
(8) The beauty advice system according to (6), wherein the second line-of-sight data is expert line-of-sight data relating to the line of sight of a beauty expert.
(9) The beauty specialist includes a hair specialist for a hairstyle or a hair color, and a makeup specialist for a makeup makeup,
The beauty advice system according to (8), wherein the expert line-of-sight data includes hair expert line-of-sight data relating to the line of sight of the hair expert and makeup expert line-of-sight data relating to the line of sight of the makeup expert.
(10) The storage means includes a plurality of sample images obtained by changing one or both of a hairstyle and a hair color, and the hair specialist's line-of-sight data acquired from the hair specialist who individually views the sample images. Save the
The presenting means presents to the subject a second visual stimulus in which one or both of a hairstyle and a hair color is changed following the first visual stimulus,
The beauty advice system according to (9), wherein the display unit displays and outputs both the first line-of-sight data acquired from the subject and the hair specialist line-of-sight data.
(11) The storage means stores the plurality of sample images obtained by changing makeup makeup to each other, and the makeup specialist line-of-sight data acquired from the makeup specialist viewing the sample images individually,
The presenting means presents a second visual stimulus in which makeup makeup is changed to the subject following the first visual stimulus,
The beauty advice system according to (9), wherein the display unit displays and outputs both the first line-of-sight data acquired from the subject and the makeup specialist line-of-sight data.
(12) The beauty advice system according to any one of (1) to (7), wherein the second line-of-sight data is celebrity line-of-sight data relating to a line of sight of a celebrity.
(13) A beauty advice method for displaying and outputting gaze data relating to the gaze of the subject to the subject,
Presenting the subject with visual stimuli including the head;
Obtaining first line-of-sight data relating to the line of sight of the subject viewing the visual stimulus;
Displaying and outputting the second line-of-sight data relating to the line-of-sight of the line-of-sight provider viewing the visual stimulus or other visual stimuli and the first line-of-sight data to the subject;
Including beauty advice methods.
(14) The visual stimulus presented to the subject is a still image or a moving image including the head of the subject,
The beauty advice method according to (13), wherein the first line-of-sight data and the second line-of-sight data are displayed and output superimposed on the visual stimulus, respectively.
(15) obtaining the second line-of-sight data relating to the line of sight of the line-of-sight provider viewing another visual stimulus different from the visual stimulus presented to the subject;
Synthesizing the visual stimulus presented to the subject and the second line-of-sight data;
The beauty advice method according to (13) or (14), further including:

以下、実施例を用いて本発明をさらに詳細に説明する。本実施例は、図1および図2に示す美容カウンセリングシステム100を用いて、頭髪専門家SPH、化粧専門家SPMおよび被験者S1を視線提供者として視線データD1、D2を取得し、かかる結果を被験者S1に提示するものである。被験者S1は美容に関する素人である。本実施例は更に、髪型の似合いを判断する際の視線提供者の視点を追跡して視線データを取得し、複数の視線データを対照して表示出力するものである。   Hereinafter, the present invention will be described in more detail with reference to examples. In this embodiment, using the beauty counseling system 100 shown in FIG. 1 and FIG. 2, the line of sight data D1 and D2 are obtained by using the hair specialist SPH, the makeup specialist SPM, and the subject S1 as the line of sight provider. Presented in S1. Subject S1 is a beauty related amateur. In the present embodiment, the gaze data is obtained by tracking the gaze provider's viewpoint when determining the suitability of the hairstyle, and a plurality of gaze data are displayed and output.

(第一実施例)
図5〜図8は、視線提供者に提示される視覚的刺激50a〜50dをそれぞれ示す画像である。なお、図5〜図8は、視線提供者に実際に提示されたカラー画像の視覚的刺激50a〜50dに対して白黒二値化およびモザイク処理し、かつ、モデルの目線にあたる領域を黒色で表示している。
(First Example)
5 to 8 are images showing visual stimuli 50a to 50d presented to the line-of-sight provider, respectively. 5 to 8, the visual stimuli 50a to 50d of the color image actually presented to the line-of-sight provider are subjected to black and white binarization and mosaic processing, and the area corresponding to the line of sight of the model is displayed in black doing.

本実施例の美容カウンセリングシステム100は、共通の視覚的刺激50(50a〜50d)を目視して髪型の似合いを判断する、頭髪専門家SPHのヘア専門家視線データDSHと被験者S1の視線データD1とを対照可能に表示出力するものである。   The hairdressing counseling system 100 according to the present embodiment visually checks the common visual stimulus 50 (50a to 50d) and determines the suitability of the hairstyle. The hair specialist SPH's hair specialist line-of-sight data DSH and the subject's S1's line-of-sight data D1. Are displayed and output in a contrastable manner.

蓄積部30は、髪型または髪色の一方または両方を互いに変化させた複数のサンプル画像55と、サンプル画像55を個別に目視する頭髪専門家SPHより取得されたヘア専門家視線データDSHを保存している。
画像提示部10は、第一の視覚的刺激50aに続けて、髪型または髪色の一方または両方を変化させた第二の視覚的刺激50bを被験者S1に提示する。
表示部40は、被験者S1より取得した第一の視線データD1と、ヘア専門家視線データDSHと、をともに表示出力する(図1を参照)。
The accumulating unit 30 stores a plurality of sample images 55 in which one or both of the hairstyle and the hair color are changed from each other, and hair specialist line-of-sight data DSH acquired from a hair specialist SPH who visually observes the sample images 55 individually. ing.
Following the first visual stimulus 50a, the image presenting unit 10 presents the second visual stimulus 50b in which one or both of the hairstyle and the hair color is changed to the subject S1.
The display unit 40 displays and outputs both the first line-of-sight data D1 acquired from the subject S1 and the hair specialist line-of-sight data DSH (see FIG. 1).

より具体的には、図5〜図8に示す視覚的刺激50a〜50dは、共通のモデルの頭部正面を被写体とし、髪型(ヘアスタイル)のみを互いに変化させたものである。
本実施例の画像提示部10では、第一の視覚的刺激50aおよび第二の視覚的刺激50bに続けて、視覚的刺激50cおよび視覚的刺激50dをこの順に切り替えて視線提供者に提示した。
More specifically, the visual stimuli 50a to 50d shown in FIGS. 5 to 8 are obtained by changing the hairstyles (hairstyles) from each other with the front face of the common model as the subject.
In the image presentation unit 10 of the present embodiment, the visual stimulus 50c and the visual stimulus 50d are switched in this order after the first visual stimulus 50a and the second visual stimulus 50b and presented to the line-of-sight provider.

そして、被験者S1の視線データD1の取得に先だって、視線提供者である頭髪専門家SPHよりヘア専門家視線データDSHを取得した。頭髪専門家SPHは、視覚的刺激50a〜50dを順に目視して、各画像に示された髪型がモデルに似合っているかどうかを判断した。視線取得部20は、かかるヘア専門家視線データDSHを取得して蓄積部30に保存した(図1を参照)。
視線取得部20には、Tobii社製の注視点追跡システム(アイトラッカー)を用いた。
Then, prior to the acquisition of the line-of-sight data D1 of the subject S1, hair professional line-of-sight data DSH was acquired from the hair specialist SPH who is the line-of-sight provider. The hair specialist SPH visually observed the visual stimuli 50a to 50d in order to determine whether the hairstyle shown in each image suits the model. The line-of-sight acquisition unit 20 acquires the hair specialist line-of-sight data DSH and stores it in the storage unit 30 (see FIG. 1).
For the line-of-sight acquisition unit 20, a gaze point tracking system (eye tracker) manufactured by Tobii was used.

このように、髪型を変化させた視覚的刺激50を連続的に被験者S1および視線提供者に目視させることにより、髪型の似合いを判断する際の自然な目線の動きを視線取得部20で取得することが可能である。   As described above, the visual line 50 is changed by the visual line 50, and the visual line 50 is changed so that the subject S1 and the line-of-sight provider continuously observe the visual stimulus 50. It is possible.

取得されたヘア専門家視線データDSHは、それぞれ対応する視覚的刺激50a〜50dと画像合成して表示部40で表示出力した。
図9〜図12は、図5〜図8の視覚的刺激50a〜50dをこの順に目視した頭髪専門家SPHの目視頻度を示す分布図(暗色で図示)を、視覚的刺激50a〜50d(明色で図示)にそれぞれ重ね合わせた図である。
図9〜図12における頭部60は、図5〜図8を白黒反転させたものである。また、図9〜図12では、目視頻度の高い部位を濃色に図示している(図13以降も共通である)。
すなわち、図9〜図12は、表示部40で表示出力されるヘア専門家視線データDSH(第二の視線データD2)を示している。このうち、図9に関しては、頭部60、中心線61および毛先62に符号を付している。
The acquired hair specialist line-of-sight data DSH was displayed on the display unit 40 after being synthesized with the corresponding visual stimuli 50a to 50d.
9 to 12 are distribution diagrams (shown in dark colors) showing visual frequencies of hair specialists SPH who have visually observed the visual stimuli 50a to 50d shown in FIGS. 5 to 8 in this order, and visual stimuli 50a to 50d (bright). It is a figure superimposed on each (illustrated by color).
The head 60 in FIGS. 9 to 12 is obtained by reversing black and white in FIGS. Moreover, in FIGS. 9-12, the site | part with high visual frequency is shown in the dark color (it is common also after FIG. 13).
That is, FIG. 9 to FIG. 12 show hair specialist line-of-sight data DSH (second line-of-sight data D2) displayed and output on the display unit 40. Among these, with respect to FIG. 9, reference numerals are given to the head 60, the center line 61, and the hair tips 62.

つぎに、美容カウンセリングシステム100では、画像提示部10にて被験者S1に対して視覚的刺激50a〜50dを順に提示した。被験者S1は、各画像に示された髪型がモデルに似合っているかどうかを判断した。
視線取得部20は、かかる視線データ(第一の視線データ)D1を取得した。
そして、取得された第一の視線データD1は、それぞれ対応する視覚的刺激50a〜50dと画像合成した。
Next, in the beauty counseling system 100, the image presentation unit 10 sequentially presented the visual stimuli 50a to 50d to the subject S1. Subject S1 determined whether the hairstyle shown in each image suits the model.
The line-of-sight acquisition unit 20 acquires the line-of-sight data (first line-of-sight data) D1.
Then, the acquired first line-of-sight data D1 was synthesized with the corresponding visual stimuli 50a to 50d.

図13〜図16は、図5〜図8の視覚的刺激50a〜50dをこの順に目視した被験者S1の目視頻度を示す分布図(暗色で図示)を、視覚的刺激50a〜50d(明色で図示)にそれぞれ重ね合わせた図である。すなわち、図13〜図16は、表示部40で表示出力される第一の視線データD1を示している。このうち、図13に関しては、頭部60、中心線61および毛先62に符号を付している。   FIGS. 13 to 16 are distribution diagrams (shown in dark color) showing the visual frequencies of the subject S1 who visually observe the visual stimuli 50a to 50d in FIGS. 5 to 8 in this order, and visual stimuli 50a to 50d (light colors). FIG. That is, FIGS. 13 to 16 show the first line-of-sight data D <b> 1 displayed on the display unit 40. Among these, with respect to FIG.

図9〜図12に示すように、頭髪専門家SPHは、髪型の似合いを判断するにあたって、頭部60の中心線61を軸に逆卵型(上側が幅広の楕円形)に頭部60のシルエットを目視していることがわかった。また、頭髪専門家SPHは、髪型そのものを直接見るのではなく、頭部60のアウトラインをおぼろ気に観察していることがわかった。
そして、頭髪専門家SPHの視線は、モデルの髪型がロングヘアーである視覚的刺激50d(図8を参照)に対しては毛先62にまで及んだものの、髪型の似合いの判断をする際の上記の傾向は、図9〜図12を通じて共通であった。
As shown in FIGS. 9 to 12, the hair specialist SPH determines the suitability of the hairstyle by inverting the shape of the head 60 into an inverted egg shape (an ellipse with a wide upper side) around the center line 61 of the head 60. I found that I was looking at the silhouette. It was also found that the hair specialist SPH was observing the outline of the head 60 rather than looking directly at the hairstyle itself.
The hair specialist SPH's line of sight has reached the hair tip 62 for the visual stimulus 50d (see FIG. 8) whose model hairstyle is long hair, but when determining the suitability of the hairstyle. The above-mentioned tendency was common throughout FIGS.

これに対し、図13〜図16に示すように、美容の素人である被験者S1は、目から上と毛先62のニュアンスを主に頭部60を観察しており、特に目の周囲を集中的に目視していることがわかった。また、被験者S1の視線は髪単体に集中しており、髪型のシルエットと顔型や顔パーツ(目、鼻等)の相対位置などとの似合いよりも、髪単体に対する嗜好によって似合いを判断していることがわかった。
そして、モデルの髪型によらず、髪型の似合いの判断をする際の被験者S1(素人)の視線に関する上記の傾向は、図13〜図16を通じて共通であった。
On the other hand, as shown in FIGS. 13 to 16, the test subject S1 who is an amateur of beauty observes the head 60 mainly from the eyes and the nuances of the hair tips 62, and particularly concentrates around the eyes. It was found that he was visually observing. Also, the line of sight of the subject S1 is concentrated on the hair alone, and the suitability is judged by the preference for the hair alone rather than the suitability of the silhouette of the hairstyle and the relative position of the face and face parts (eyes, nose, etc.). I found out.
And the said tendency regarding test subject S1 (amateur) 's eyes | visual_axis at the time of judging the suitability of a hairstyle irrespective of the model's hairstyle was common throughout FIGS.

表示部40(図1を参照)では、図9と図13、図10と図14、図11と図15、図12と図16を、それぞれ対にして、同時にまたは連続的に表示出力した。
これにより、被験者S1は、頭髪専門家SPHがモデルの髪型を目視する場合の着目点を、自分の着目点と対比して目視することが可能である。そして、美容に関するアドバイザーは、被験者S1とともに表示部40を目視して、被験者S1の視線と頭髪専門家SPHの視線との違いをアドバイスすることができる。
これにより、被験者S1は、髪型の似合いを自ら判断するに際して、頭髪専門家SPHの視線に似せて、頭部60のアウトラインを全体的に観察することができるようになる。
In the display unit 40 (see FIG. 1), FIG. 9 and FIG. 13, FIG. 10 and FIG. 14, FIG. 11 and FIG.
Accordingly, the subject S1 can visually check the point of interest when the hair specialist SPH visually observes the hairstyle of the model in comparison with his / her own point of interest. And the advisor regarding beauty can visually observe the display part 40 with the test subject S1, and can advise the difference between the test subject S1's gaze and the gaze of the hair specialist SPH.
Thus, the subject S1 can observe the outline of the head 60 as a whole in a manner similar to the line of sight of the hair specialist SPH when determining the suitability of the hairstyle.

また、本実施例の蓄積部30は、第一の視覚的刺激50aおよび第二の視覚的刺激50bを目視する化粧専門家SPMより取得されたメイク専門家視線データDSMをさらに保存している。
本実施例の場合、メイク専門家視線データDSMは、視覚的刺激50a〜50dに示された髪型がモデルに似合っているかどうかを判断する化粧専門家SPMの視線に関する視線データである。
ここで、化粧専門家SPMは、化粧メイクに関する専門家ではあるものの、髪型の似合いの判断に関しては被験者S1と同様に素人である。
In addition, the storage unit 30 of the present embodiment further stores makeup specialist line-of-sight data DSM acquired from a makeup specialist SPM who views the first visual stimulus 50a and the second visual stimulus 50b.
In the case of the present embodiment, the makeup specialist line-of-sight data DSM is line-of-sight data relating to the line of sight of the makeup specialist SPM that determines whether the hairstyle shown in the visual stimuli 50a to 50d suits the model.
Here, the makeup specialist SPM is an expert on makeup and makeup, but is an amateur in the same manner as the subject S1 in determining the suitability of the hairstyle.

図17〜図20は、図5〜図8の視覚的刺激50a〜50dをこの順に目視した化粧専門家SPMの目視頻度を示す分布図(暗色で図示)を、視覚的刺激50a〜50d(明色で図示)にそれぞれ重ね合わせた図である。このうち、図17に関しては、頭部60、中心線61および毛先62に符号を付している。
化粧専門家SPMのメイク専門家視線データDSMは、髪型の似合いの判断に関する限り、美容の素人の被験者S1と大きな差はなく、目から下を主に目視しているとともに、肌と毛先62とのニュアンスを注視していることがわかった。
FIGS. 17 to 20 are distribution diagrams (shown in dark color) showing visual frequencies of the makeup specialists SPM who have visually observed the visual stimuli 50a to 50d in FIGS. 5 to 8 in this order, and visual stimuli 50a to 50d (light It is a figure superimposed on each (illustrated by color). Among these, regarding FIG. 17, the code | symbol is attached | subjected to the head 60, the centerline 61, and the hair tip 62. FIG.
The makeup specialist line-of-sight data DSM of the makeup specialist SPM is not significantly different from the beauty amateur subject S1 as far as the hairstyle suitability is judged, and mainly looks from the eyes to the bottom, and the skin and hair ends 62 I found out that I was paying attention to the nuances.

すなわち、図9〜図20を対照すると、第二の視覚的刺激50bに含まれる頭部60の中心線61近傍に対する頭髪専門家SPHの目視頻度は、中心線61近傍に対する化粧専門家SPMおよび素人(被験者S1)の目視頻度よりも高いことがわかった。
そして、第二の視覚的刺激50bに含まれる頭髪の毛先62近傍に対する頭髪専門家SPHの目視頻度が、毛先62近傍に対する化粧専門家SPMおよび被験者S1の目視頻度よりも低いことがわかった。
That is, in comparison with FIGS. 9 to 20, the visual frequency of the hair specialist SPH with respect to the vicinity of the center line 61 of the head 60 included in the second visual stimulus 50 b is the makeup specialist SPM and the amateur with respect to the vicinity of the center line 61. It turned out that it is higher than the visual frequency of (subject S1).
Then, it was found that the visual frequency of the hair specialist SPH with respect to the vicinity of the hair tip 62 included in the second visual stimulus 50b is lower than the visual frequency of the makeup specialist SPM and the subject S1 with respect to the vicinity of the hair tip 62.

このように、本実施例の美容カウンセリングシステム100では、頭髪専門家SPHを含む複数人の視線提供者の視線データを蓄積部30に蓄積しておき、任意で被験者S1の視線データD1と対照して表示部40で表示出力することができる。視線データを蓄積する視線提供者としては、美容の素人である他の被験者としてもよい。そして、多数の被験者より視線データを取得して統計的に分析することにより、被験者S1の視線データの傾向を他の被験者の傾向と対比して表示出力してもよい。   As described above, in the beauty counseling system 100 according to the present embodiment, the line-of-sight data of a plurality of line-of-sight providers including the hair specialist SPH is stored in the storage unit 30 and optionally contrasted with the line-of-sight data D1 of the subject S1. Display on the display unit 40. The line-of-sight provider that accumulates line-of-sight data may be another subject who is a beauty amateur. Then, the line-of-sight data of the subject S1 may be displayed and output in comparison with the tendency of other subjects by acquiring the line-of-sight data from a large number of subjects and statistically analyzing it.

(第二実施例)
本実施例は、化粧の似合いを判断する際の視線提供者(頭髪専門家SPH、化粧専門家SPMおよび被験者S1)の視点を追跡して視線データを取得し、複数の視線データを対照して表示出力するものである。
(Second embodiment)
In the present embodiment, the line-of-sight provider (hair specialist SPH, makeup professional SPM, and subject S1) at the time of judging the suitability of makeup is tracked to obtain the line-of-sight data, and a plurality of pieces of line-of-sight data are compared. It is for display output.

本実施例の蓄積部30は、化粧メイクを互いに変化させた複数のサンプル画像55と、サンプル画像55を個別に目視する化粧専門家SPMより取得されたメイク専門家視線データDSMを保存している。
画像提示部10は、第一の視覚的刺激50aに続けて、化粧メイクを変化させた第二の視覚的刺激50bを被験者S1に提示する。
表示部40は、被験者S1より取得した第一の視線データD1と、メイク専門家視線データDSMと、をともに表示出力する(図1を参照)。
The storage unit 30 of the present embodiment stores a plurality of sample images 55 in which makeup makeup is changed from each other, and makeup specialist line-of-sight data DSM acquired from a makeup specialist SPM that visually observes the sample images 55 individually. .
Following the first visual stimulus 50a, the image presentation unit 10 presents the second visual stimulus 50b in which the makeup is changed to the subject S1.
The display unit 40 displays and outputs both the first line-of-sight data D1 acquired from the subject S1 and the makeup specialist line-of-sight data DSM (see FIG. 1).

本実施例をより詳細に説明する。
本実施例では、図6に示した視覚的刺激50bを第一の視覚的刺激として用い、その口紅のカラーを変化させた画像を第二の視覚的刺激(図示省略)として用いた。
This embodiment will be described in more detail.
In this example, the visual stimulus 50b shown in FIG. 6 was used as the first visual stimulus, and an image in which the color of the lipstick was changed was used as the second visual stimulus (not shown).

そして、被験者S1の視線データD1の取得に先だって、視線提供者である化粧専門家SPMよりメイク専門家視線データDSMを取得した。化粧専門家SPMは、第一および第二の視覚的刺激を順に目視して、各画像に示された口紅がモデルに似合っているかどうかを判断した。視線取得部20は、かかるメイク専門家視線データDSMを取得して蓄積部30に保存した(図1を参照)。
このように、化粧メイクを変化させた視覚的刺激50を連続的に被験者S1および視線提供者に目視させることにより、化粧メイクの似合いを判断する際の自然な目線の動きを視線取得部20で取得することが可能である。
Then, prior to obtaining the line-of-sight data D1 of the subject S1, makeup professional line-of-sight data DSM was obtained from a makeup specialist SPM, which is the line-of-sight provider. The makeup specialist SPM viewed the first and second visual stimuli in order to determine whether the lipstick shown in each image suits the model. The line-of-sight acquisition unit 20 acquires the makeup specialist line-of-sight data DSM and stores it in the storage unit 30 (see FIG. 1).
In this way, the visual line acquisition unit 20 shows the natural eye movement when judging the suitability of the cosmetic makeup by causing the subject S1 and the visual line provider to visually observe the visual stimulus 50 with the makeup makeup changed. It is possible to obtain.

取得されたメイク専門家視線データDSMは、それぞれ対応する第一または第二の視覚的刺激と画像合成して表示部40で表示出力した。
図21〜図22は、化粧専門家SPMの目視頻度を示す分布図(明色で図示)を、第一または第二の視覚的刺激(暗色で図示)にそれぞれ重ね合わせた図である。すなわち、図21〜図22は、表示部40で表示出力されるメイク専門家視線データDSM(第二の視線データD2)を示している。
図21は口紅がモデルに似合うと化粧専門家SPMが判断した場合の視線データを示し、図22は口紅がモデルに似合わないと化粧専門家SPMが判断した場合の視線データを示している。
The acquired makeup specialist line-of-sight data DSM was displayed and output on the display unit 40 by synthesizing images with the corresponding first or second visual stimulus.
21 to 22 are diagrams in which distribution maps (shown in light color) showing the visual frequency of the makeup specialist SPM are superimposed on the first or second visual stimulus (shown in dark color), respectively. That is, FIGS. 21 to 22 show makeup specialist line-of-sight data DSM (second line-of-sight data D <b> 2) displayed and output on the display unit 40.
FIG. 21 shows line-of-sight data when the makeup specialist SPM determines that the lipstick suits the model, and FIG. 22 shows line-of-sight data when the makeup specialist SPM determines that the lipstick does not match the model.

以下、図21、図23および図25に関しては、頭部60、中心線61および毛先62に符号を付している。   Hereinafter, with respect to FIGS. 21, 23, and 25, the head 60, the center line 61, and the hair tips 62 are denoted by reference numerals.

つぎに、美容カウンセリングシステム100では、画像提示部10にて被験者S1に対して第一および第二の視覚的刺激を順に提示した。被験者S1は、各画像に示された口紅がモデルに似合っているかどうかを判断した。
視線取得部20は、かかる視線データ(第一の視線データ)D1を取得した。
そして、取得された第一の視線データD1を、それぞれ対応する視覚的刺激と画像合成した。
Next, in the beauty counseling system 100, the image presentation unit 10 sequentially presented the first and second visual stimuli to the subject S1. Subject S1 determined whether the lipstick shown in each image suits the model.
The line-of-sight acquisition unit 20 acquires the line-of-sight data (first line-of-sight data) D1.
Then, the obtained first line-of-sight data D1 was image-synthesized with the corresponding visual stimulus.

図23および図24は、被験者S1の目視頻度を示す分布図(暗色で図示)を、第一または第二の視覚的刺激(明色で図示)にそれぞれ重ね合わせた図である。すなわち、図23〜図24は、表示部40で表示出力される第一の視線データD1を示している。
図23は口紅がモデルに似合うと被験者S1が判断した場合の視線データを示し、図24は口紅がモデルに似合わないと被験者S1が判断した場合の視線データを示している。
23 and 24 are diagrams in which a distribution diagram (shown in dark color) indicating the visual frequency of the subject S1 is superimposed on the first or second visual stimulus (shown in light color), respectively. That is, FIGS. 23 to 24 show the first line-of-sight data D <b> 1 that is displayed and output on the display unit 40.
FIG. 23 shows the line-of-sight data when the subject S1 determines that the lipstick suits the model, and FIG. 24 shows the line-of-sight data when the subject S1 judges that the lipstick does not match the model.

図21〜図22に示すように、化粧専門家SPMは、口紅の似合いを判断するにあたって肌色や髪色とのバランスを見ており、肌色がくすんで見えないか、または顔全体の表情が生き生きとして見えるかどうかに着目していることがわかった。また、メイク専門家視線データDSMは、顔の全体から髪まで広く分散していることがわかった。   As shown in FIGS. 21 to 22, the makeup specialist SPM looks at the balance between the skin color and the hair color when determining the suitability of the lipstick, and the skin color is dull or cannot be seen, or the expression of the entire face is vivid It turned out that it is paying attention to whether it is visible as. In addition, it was found that makeup specialist line-of-sight data DSM is widely distributed from the entire face to the hair.

これに対し、図23〜図24に示すように、美容の素人である被験者S1は、唇と目に視線を集めて口紅の似合いを判断していることがわかった。そして、被験者S1は、モデルの印象と自分の好みとを合わせながら、唇の色の好みと、肌色がくすんで見えないかに着目して口紅の似合いを判断していることがわかった。   On the other hand, as shown in FIGS. 23 to 24, it was found that the subject S1 who is a beauty amateur collects the line of sight from the lips and eyes and determines the suitability of the lipstick. Then, it was found that the subject S1 judged the suitability of the lipstick by combining the impression of the model with his / her preference while paying attention to whether the lip color preference and the skin color were not visible.

表示部40(図1を参照)では、図21と図23、図22と図24を、それぞれ対にして表示出力した。
これにより、被験者S1は、化粧専門家SPMがモデルの化粧を目視する場合の着目点を、自分の着目点と対比して目視することが可能である。そして、美容に関するアドバイザーは、被験者S1とともに表示部40を目視して、被験者S1の視線と化粧専門家SPMの視線との違いをアドバイスすることができる。
これにより、被験者S1は、髪型の似合いを自ら判断するに際して、化粧専門家SPMの視線に似せて、頭部60を全体的に観察することができるようになる。
On the display unit 40 (see FIG. 1), FIG. 21 and FIG. 23, and FIG. 22 and FIG.
Thereby, the subject S1 can visually check the point of interest when the makeup specialist SPM views the makeup of the model in comparison with his / her point of interest. And the advisor regarding beauty can visually observe the display part 40 with test subject S1, and can advise the difference between the visual line of test subject S1 and the visual line of makeup specialist SPM.
As a result, the subject S1 can observe the head 60 as a whole in a manner similar to the line of sight of the makeup specialist SPM when determining the suitability of the hairstyle.

また、本実施例の蓄積部30は、第一の視覚的刺激および第二の視覚的刺激を目視する頭髪専門家SPHより取得されたヘア専門家視線データDSHをさらに保存している。
本実施例の場合、ヘア専門家視線データDSHは、第一および第二の視覚的刺激に示された髪型がモデルに似合っているかどうかを判断する頭髪専門家SPHの視線に関する視線データである。
ここで、頭髪専門家SPHは、ヘアメイクに関する専門家ではあるものの、化粧の似合いの判断に関しては被験者S1と同様に素人である。
In addition, the storage unit 30 of this embodiment further stores hair specialist line-of-sight data DSH acquired from a hair specialist SPH who views the first visual stimulus and the second visual stimulus.
In the case of the present embodiment, the hair specialist line-of-sight data DSH is line-of-sight data relating to the line of sight of the hair specialist SPH that determines whether the hairstyle shown in the first and second visual stimuli suits the model.
Here, although the hair specialist SPH is an expert on hair and makeup, he is an amateur in the same way as the subject S1 in determining the suitability of makeup.

図25および図26は、第一および第二の視覚的刺激をこの順に目視した頭髪専門家SPHの目視頻度を示す分布図(暗色で図示)を、第一または第二の視覚的刺激(明色で図示)にそれぞれ重ね合わせた図である。
図25は口紅がモデルに似合うと頭髪専門家SPHが判断した場合の視線データを示し、図26は口紅がモデルに似合わないと頭髪専門家SPHが判断した場合の視線データを示している。
FIG. 25 and FIG. 26 show distribution diagrams (shown in dark color) showing the visual frequency of the hair specialist SPH who observed the first and second visual stimuli in this order, and the first and second visual stimuli (bright). It is a figure superimposed on each (illustrated by color).
FIG. 25 shows line-of-sight data when the hair specialist SPH determines that the lipstick suits the model, and FIG. 26 shows line-of-sight data when the hair specialist SPH judges that the lipstick does not match the model.

頭髪専門家SPHのヘア専門家視線データDSHは、頭部60の中心線61に視線を集め、唇自体はほとんど目視しておらず、唇と肌のカラーのバランスを朧気に観察していることがわかった。また、唇の色の好みと、肌色がくすんで見えないかに着目して口紅の似合いを判断していることがわかった。したがって、化粧の似合いの判断に関する限り、美容の素人の被験者S1と大きな差はないことがわかった。   The hair specialist line-of-sight data DSH of the hair specialist SPH collects the line of sight on the center line 61 of the head 60, hardly sees the lips themselves, and caresfully observes the balance between lips and skin color. I understood. It was also found that lipstick suitability was judged by paying attention to lip color preference and whether the skin color was dull or invisible. Therefore, as far as determination of suitability for makeup is concerned, it was found that there is no significant difference from the beauty amateur subject S1.

すなわち、本実施例の場合、第二の視覚的刺激に含まれる頭部60に対する化粧専門家SPMの目視頻度は、頭部60に対する頭髪専門家SPHの目視頻度よりも、頭部60の全体に分散していることがわかった。   That is, in the case of the present embodiment, the visual frequency of the makeup specialist SPM with respect to the head 60 included in the second visual stimulus is larger than the visual frequency of the hair specialist SPH with respect to the head 60. I found that it was dispersed.

以上の実施例により、美容カウンセリングシステム100および本方法を用いて被験者S1に美容アドバイスを有効に行うことが可能であることが理解される。   From the above embodiments, it is understood that beauty advice can be effectively given to the subject S1 using the beauty counseling system 100 and the present method.

上記の各実施形態及び各実施例の一部又は全部は、以下のようにも特定され得る。但し、各実施形態及び各実施例が以下の記載に限定されるものではない。A part or all of the above embodiments and examples can be specified as follows. However, each embodiment and each example are not limited to the following description.
<1>頭部を含む視覚的刺激を被験者に提示する提示手段と、<1> a presentation means for presenting a visual stimulus including a head to a subject;
前記視覚的刺激を目視する前記被験者の視線に関する第一の視線データを取得する取得手段と、  Obtaining means for obtaining first line-of-sight data relating to the line of sight of the subject who visually observes the visual stimulus;
前記視覚的刺激または他の視覚的刺激を目視する視線提供者の視線に関する第二の視線データを保存する蓄積手段と、  Storage means for storing second line-of-sight data relating to the line of sight of the line-of-sight provider viewing the visual stimulus or other visual stimulus;
前記第一の視線データと前記第二の視線データとを表示出力する表示手段と、  Display means for displaying and outputting the first line-of-sight data and the second line-of-sight data;
を有する美容カウンセリングシステム。Beauty counseling system with.
<2>前記被験者に提示される前記視覚的刺激が、前記被験者もしくは他者の頭部を含む静止画像、動画像、鏡像または美容行為の実演である<1>に記載の美容カウンセリングシステム。<2> The beauty counseling system according to <1>, wherein the visual stimulus presented to the subject is a still image including a head of the subject or another person, a moving image, a mirror image, or a demonstration of a beauty act.
<3>前記被験者に提示される前記視覚的刺激が、前記被験者の静止画像または動画像であって、<3> The visual stimulus presented to the subject is a still image or a moving image of the subject,
前記表示手段が、第一および第二の前記視線データを、前記視覚的刺激と重ね合わせて表示出力することを特徴とする<1>に記載の美容カウンセリングシステム。  The beauty counseling system according to <1>, wherein the display unit displays and outputs the first and second line-of-sight data superimposed on the visual stimulus.
<4>前記第二の視線データが、前記被験者に提示される前記視覚的刺激とは異なる他の視覚的刺激を目視する前記視線提供者の視線に関するデータであって、<4> The second line-of-sight data is data related to the line of sight of the line-of-sight provider who views another visual stimulus different from the visual stimulus presented to the subject,
前記表示手段が、前記被験者に提示される前記視覚的刺激と前記第二の視線データとを合成して表示出力することを特徴とする<1>から<3>のいずれか1つに記載の美容カウンセリングシステム。  The display means synthesizes the visual stimulus presented to the subject and the second line-of-sight data, and outputs the combined display. <1> to <3> Beauty counseling system.
<5>前記表示手段が、目視頻度に関する分布図として第一および第二の前記視線データを表示出力する<1>から<4>のいずれか1つに記載の美容カウンセリングシステム。<5> The beauty counseling system according to any one of <1> to <4>, wherein the display unit displays and outputs the first and second line-of-sight data as a distribution map relating to visual frequency.
<6>前記蓄積手段が、頭部をそれぞれ含む複数のサンプル画像と、前記サンプル画像を個別に目視する前記視線提供者の視線に関する前記第二の視線データと、を互いに対応づけて保存している<1>から<5>のいずれか1つに記載の美容カウンセリングシステムであって、<6> The storage means stores a plurality of sample images each including a head and the second line-of-sight data relating to the line-of-sight of the line-of-sight provider who individually views the sample images in association with each other. The beauty counseling system according to any one of <1> to <5>,
前記被験者に提示される前記視覚的刺激との一致度に基づいて、前記サンプル画像を前記複数より抽出する抽出手段をさらに備えるとともに、  And further comprising extraction means for extracting the sample image from the plurality based on the degree of coincidence with the visual stimulus presented to the subject,
前記表示手段が、抽出された前記サンプル画像に対応づけられた前記第二の視線データを表示出力することを特徴とする美容カウンセリングシステム。  The beauty counseling system, wherein the display means displays and outputs the second line-of-sight data associated with the extracted sample image.
<7>前記蓄積手段と、複数の前記取得手段および前記表示手段と、がネットワークを通じて互いに接続されていることを特徴とする<1>から<6>のいずれか1つに記載の美容カウンセリングシステム。<7> The beauty counseling system according to any one of <1> to <6>, wherein the storage unit, the plurality of acquisition units, and the display unit are connected to each other through a network. .
<8>前記第二の視線データが、美容専門家の視線に関する専門家視線データである<6>に記載の美容カウンセリングシステム。<8> The beauty counseling system according to <6>, wherein the second line-of-sight data is expert line-of-sight data relating to the line of sight of a beauty expert.
<9>前記美容専門家が、髪型または髪色に関する頭髪専門家と、化粧メイクに関する化粧専門家と、を含み、<9> The beauty specialist includes a hair specialist related to a hairstyle or hair color, and a makeup specialist related to makeup makeup,
前記専門家視線データが、前記頭髪専門家の視線に関するヘア専門家視線データと、前記化粧専門家の視線に関するメイク専門家視線データと、を含む<8>に記載の美容カウンセリングシステム。  The beauty counseling system according to <8>, wherein the expert line-of-sight data includes hair expert line-of-sight data relating to the line of sight of the hair specialist and makeup expert line-of-sight data relating to the line of sight of the makeup specialist.
<10>前記蓄積手段は、髪型または髪色の一方または両方を互いに変化させた複数の前記サンプル画像と、前記サンプル画像を個別に目視する前記頭髪専門家より取得された前記ヘア専門家視線データを保存し、<10> The storage means includes a plurality of sample images obtained by changing one or both of a hairstyle and a hair color, and the hair specialist's line-of-sight data acquired from the hair specialist who individually views the sample images. Save the
前記提示手段は、第一の前記視覚的刺激に続けて、髪型または髪色の一方または両方を変化させた第二の視覚的刺激を前記被験者に提示し、  The presenting means presents to the subject a second visual stimulus in which one or both of a hairstyle and a hair color is changed following the first visual stimulus,
前記表示手段は、前記被験者より取得した前記第一の視線データと、前記ヘア専門家視線データと、をともに表示出力する<9>に記載の美容カウンセリングシステム。  The beauty counseling system according to <9>, wherein the display unit displays and outputs both the first line-of-sight data acquired from the subject and the hair specialist line-of-sight data.
<11>前記蓄積手段は、化粧メイクを互いに変化させた複数の前記サンプル画像と、前記サンプル画像を個別に目視する前記化粧専門家より取得された前記メイク専門家視線データを保存し、<11> The storage means stores a plurality of sample images obtained by changing makeup makeup, and the makeup specialist line-of-sight data acquired from the makeup specialist who visually observes the sample images,
前記提示手段は、第一の前記視覚的刺激に続けて、化粧メイクを変化させた第二の視覚的刺激を前記被験者に提示し、  The presenting means presents a second visual stimulus in which makeup makeup is changed to the subject following the first visual stimulus,
前記表示手段は、前記被験者より取得した前記第一の視線データと、前記メイク専門家視線データと、をともに表示出力する<9>に記載の美容カウンセリングシステム。  The beauty counseling system according to <9>, wherein the display unit displays and outputs both the first line-of-sight data acquired from the subject and the makeup specialist line-of-sight data.
<12>前記第二の視線データが、著名人の視線に関する著名人視線データである<1>から<7>のいずれか1つに記載の美容カウンセリングシステム。<12> The beauty counseling system according to any one of <1> to <7>, wherein the second line-of-sight data is celebrity line-of-sight data relating to a line of sight of a celebrity.
<13>頭部を含む視覚的刺激を被験者に提示する工程と、<13> presenting a visual stimulus including a head to a subject;
前記視覚的刺激を目視する前記被験者の視線に関する第一の視線データを取得する工程と、  Obtaining first line-of-sight data relating to the line of sight of the subject viewing the visual stimulus;
前記視覚的刺激または他の視覚的刺激を目視する視線提供者の視線に関する第二の視線データと、前記第一の視線データと、を表示出力する工程と、  Displaying and outputting second line-of-sight data relating to the line-of-sight of the line-of-sight provider viewing the visual stimulus or other visual stimulus; and the first line-of-sight data; and
を含む美容カウンセリング方法。Beauty counseling methods including.
<14>前記第一の視線データと前記第二の視線データとを前記被験者に対してともに表示出力する<13>に記載の美容カウンセリング方法。<14> The beauty counseling method according to <13>, wherein the first line-of-sight data and the second line-of-sight data are displayed and output together with the subject.
<15>前記視線提供者が前記被験者である<13>または<14>に記載の美容カウンセリング方法。<15> The beauty counseling method according to <13> or <14>, wherein the line-of-sight provider is the subject.
<16>前記第一の視線データが、前記被験者の頭部を含む前記視覚的刺激に対する前記被験者の視線に関する視線データであり、<16> The first line-of-sight data is line-of-sight data relating to the line of sight of the subject with respect to the visual stimulus including the head of the subject.
前記第二の視線データが、他者の頭部を含む前記他の視覚的刺激に対する前記他者の視線に関する視線データである<13>または<14>に記載の美容カウンセリング方法。  The beauty counseling method according to <13> or <14>, wherein the second line-of-sight data is line-of-sight data related to the other person's line of sight with respect to the other visual stimulus including the head of the other person.
<17>前記他者が美容専門家である<16>に記載の美容カウンセリング方法。<17> The beauty counseling method according to <16>, wherein the other person is a beauty specialist.
<18>表示出力された前記第一の視線データと前記第二の視線データとの相違に基づく美容アドバイスを被カウンセラーに提供する工程をさらに含む<13>から<17>のいずれか1つに記載の美容カウンセリング方法。<18> The method according to any one of <13> to <17>, further including a step of providing beauty advice based on a difference between the first line-of-sight data and the second line-of-sight data displayed and output to a counselor The beauty counseling method described.
<19>前記被カウンセラーが、前記被験者と異なる人物である<18>に記載の美容カウンセリング方法。<19> The beauty counseling method according to <18>, wherein the counselor is a person different from the subject.
<20>前記視覚的刺激が、前記被カウンセラーの頭部を含む<18>または<19>に記載の美容カウンセリング方法。<20> The beauty counseling method according to <18> or <19>, wherein the visual stimulus includes a head of the counselor.
<21>前記第二の視線データが、美容行為の動画または実演に対する美容専門家の視線に関する専門家視線データである<13>から<15>のいずれか1つに記載の美容カウンセリング方法。<21> The beauty counseling method according to any one of <13> to <15>, wherein the second line-of-sight data is expert line-of-sight data relating to a beauty professional's line of sight with respect to a video or demonstration of a beauty act.
<22>前記第一の視線データおよび前記第二の視線データを、それぞれ前記視覚的刺激に重ね合わせて表示出力することを特徴とする<13>から<21>のいずれか1つに記載の美容カウンセリング方法。<22> The first line-of-sight data and the second line-of-sight data are each displayed and output superimposed on the visual stimulus, according to any one of <13> to <21> Beauty counseling method.
<23>頭部を含む視覚的刺激を被験者に提示する工程と、<23> presenting a visual stimulus including a head to a subject;
前記視覚的刺激を目視する前記被験者の視線に関する第一の視線データを取得する工程と、  Obtaining first line-of-sight data relating to the line of sight of the subject viewing the visual stimulus;
前記視覚的刺激または他の視覚的刺激を目視する視線提供者の視線に関する第二の視線データを、前記第一の視線データと対応づけて取得する工程と、  Obtaining second line-of-sight data relating to the line of sight of the line-of-sight provider viewing the visual stimulus or other visual stimulus in association with the first line-of-sight data;
を含む美容ポイント分析方法。Beauty point analysis method including.
<24>前記視覚的刺激が、前記被験者が知る人物の頭部を含み、<24> The visual stimulus includes a head of a person known by the subject,
第二の視線データが、前記視線提供者が知らない人物の頭部を含む視覚的刺激に対する前記視線提供者の視線に関する視線データである<23>に記載の美容ポイント分析方法。  The beauty point analysis method according to <23>, wherein the second line-of-sight data is line-of-sight data related to the line-of-sight of the line-of-sight provider with respect to a visual stimulus including a head of a person unknown to the line-of-sight provider.

10 画像提示部
12 撮影部
14 シミュレーション部
20 視線取得部
30 蓄積部
31 画像蓄積部
32 視線データ蓄積部
40 表示部
50 視覚的刺激
55 サンプル画像
60 頭部
61 中心線
62 毛先
70 CPU
72 操作部
74 抽出部
76 画像調整部
80 バスライン
90 送受信部
91〜94 アドバイス装置
100 美容カウンセリングシステム
110 ネットワーク
CE 著名人
D1、D2 視線データ
DC 著名人視線データ
DS 専門家視線データ
DSH ヘア専門家視線データ
DSM メイク専門家視線データ
SP 美容専門家
SPH 頭髪専門家
SPM 化粧専門家
S1〜S3 被験者
DESCRIPTION OF SYMBOLS 10 Image presentation part 12 Image | photographing part 14 Simulation part 20 Gaze acquisition part 30 Accumulation part 31 Image accumulation part 32 Gaze data accumulation part 40 Display part 50 Visual stimulus 55 Sample image 60 Head 61 Center line 62 Hair tip 70 CPU
72 operation unit 74 extraction unit 76 image adjustment unit 80 bus line 90 transmission / reception unit 91-94 advice device 100 beauty counseling system 110 network CE celebrity D1, D2 gaze data DC celebrity gaze data DS expert gaze data DSH hair specialist gaze Data DSM Makeup specialist line-of-sight data SP Beauty specialist SPH Hair specialist SPM Makeup specialist S1-S3 Subject

Claims (7)

被験者の頭部を含む被験者画像を撮影部から取得する工程と、
前記被験者の頭部を含む被験者画像を目視する前記被験者の視線に関する第一の視線データを視線取得部で取得する工程と、
頭部をそれぞれ含む複数のサンプル画像と、該サンプル画像を個別に目視する視線提供者の視線に関する第二の視線データと、を互いに対応づけて保存する蓄積部から、前記取得された被験者画像に対応するサンプル画像を選択し、該選択されたサンプル画像に対応付けられた第二の視線データを取得する工程と、
前記取得された第一の視線データ及び前記取得された第二の視線データを前記取得された被験者画像と重ね合わせて表示部に表示出力する工程と、
を含む美容カウンセリング方法。
Acquiring a subject image including the head of the subject from the imaging unit;
A step of acquiring a first sight data about the line of sight of the subject viewing the subject image including a head of the subject at sight acquisition unit,
From the storage unit that stores a plurality of sample images each including the head and second line-of-sight data relating to the line-of-sight of the line-of-sight provider who individually views the sample images , the acquired subject images are stored in the storage unit. Selecting a corresponding sample image and obtaining second line-of-sight data associated with the selected sample image ;
A step of superimposing the acquired first line-of-sight data and the acquired second line-of-sight data on the acquired subject image and displaying and outputting them on a display unit;
Beauty counseling methods including.
前記蓄積部は、前記複数のサンプル画像を複数のカテゴリに分類して保存しており、
前記第二の視線データを取得する工程は、前記蓄積部に保存されている前記複数のサンプル画像の中から、前記取得された被験者画像と同じカテゴリに分類されているサンプル画像を選択し、該選択されたサンプル画像に対応付けられた前記第二の視線データを取得する、
請求項1に記載の美容カウンセリング方法。
The storage unit classifies and stores the plurality of sample images into a plurality of categories,
The step of acquiring the second line-of-sight data selects a sample image classified into the same category as the acquired subject image from the plurality of sample images stored in the storage unit, Obtaining the second line-of-sight data associated with the selected sample image;
The beauty counseling method according to claim 1 .
前記蓄積部は、前記第二の視線データを目視者識別情報と更に対応付けて保存する、
請求項1又は2に記載の美容カウンセリング方法。
The storage unit further stores the second line-of-sight data in association with viewer identification information;
The beauty counseling method according to claim 1 or 2 .
前記表示出力する工程は、前記取得された被験者画像と前記選択されたサンプル画像とに基づいて、前記取得された第二の視線データのサイズ調整及び位置合わせを行う、
請求項1から3のいずれか1項に記載の美容カウンセリング方法。
The display output step performs size adjustment and alignment of the acquired second line-of-sight data based on the acquired subject image and the selected sample image.
The beauty counseling method according to any one of claims 1 to 3 .
サンプル画像を画像処理してその髪型、髪色、化粧メイクのいずれか一以上を複数通りの中の一つに変化させる工程と、
前記変化されたサンプル画像を前記視線提供者が見る表示部に表示する工程と、
前記変化されたサンプル画像を目視する視線提供者の視線に関する第二の視線データを視線取得部で取得する工程と、
前記取得された第二の視線データを、前記視線提供者に関する目視者識別情報及び前記変化されたサンプル画像と互いに対応付けて前記蓄積部に保存する工程と、
を更に含む請求項1から4のいずれか1項に記載の美容カウンセリング方法。
Processing the sample image to change one or more of its hairstyle, hair color, and makeup into one of a plurality of ways;
Displaying the changed sample image on a display unit viewed by the line-of-sight provider;
A step of acquiring second line-of-sight data relating to the line of sight of the line-of-sight provider viewing the changed sample image by the line-of-sight acquisition unit;
Storing the acquired second line-of-sight data in the storage unit in association with the viewer identification information on the line-of-sight provider and the changed sample image;
The cosmetic counseling method according to any one of claims 1 to 4 , further comprising:
前記表示出力する工程は、前記第一の視線データ及び前記第二の視線データを、前記被験者画像又は前記サンプル画像における部位ごとの目視頻度を示す分布図、又は、目視順と各目視点での静止時間を可視化したプロット図として表示出力する、
請求項1から5のいずれか1項に記載の美容カウンセリング方法。
The step of displaying and outputting the first line-of-sight data and the second line-of-sight data is a distribution diagram showing a visual frequency for each part in the subject image or the sample image , or in a visual order and each eye viewpoint. Display and output as a plot diagram that visualizes the stationary time,
The beauty counseling method according to any one of claims 1 to 5 .
前記視線提供者は、頭髪専門家、化粧専門家を含む美容専門家、又は、著名人、若しくは、前記被験者である、
請求項1から6のいずれか1項に記載の美容カウンセリング方法。
The line-of-sight provider is a hair specialist, a beauty specialist including a makeup specialist, or a celebrity, or the subject.
The beauty counseling method according to any one of claims 1 to 6 .
JP2014051202A 2009-10-02 2014-03-14 Beauty counseling method Active JP5782540B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2014051202A JP5782540B2 (en) 2009-10-02 2014-03-14 Beauty counseling method

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009230563 2009-10-02
JP2009230563 2009-10-02
JP2014051202A JP5782540B2 (en) 2009-10-02 2014-03-14 Beauty counseling method

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2010148641A Division JP5503432B2 (en) 2009-10-02 2010-06-30 Beauty counseling system

Publications (2)

Publication Number Publication Date
JP2014149841A JP2014149841A (en) 2014-08-21
JP5782540B2 true JP5782540B2 (en) 2015-09-24

Family

ID=44113020

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2010148641A Active JP5503432B2 (en) 2009-10-02 2010-06-30 Beauty counseling system
JP2014051202A Active JP5782540B2 (en) 2009-10-02 2014-03-14 Beauty counseling method

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2010148641A Active JP5503432B2 (en) 2009-10-02 2010-06-30 Beauty counseling system

Country Status (1)

Country Link
JP (2) JP5503432B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6886773B2 (en) * 2015-03-31 2021-06-16 ポーラ化成工業株式会社 How to extract the part that determines the appearance of the face, how to extract the determinants of the appearance of the face, how to distinguish the appearance of the face
WO2017115453A1 (en) 2015-12-28 2017-07-06 パナソニックIpマネジメント株式会社 Makeup simulation assistance device, makeup simulation assistance method, and makeup simulation assistance program
JP6470438B1 (en) * 2017-08-10 2019-02-13 株式会社ミラーロイド Mirror device and program

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001216386A (en) * 2000-02-02 2001-08-10 Nippon Telegr & Teleph Corp <Ntt> Makeup support device
JP3550386B2 (en) * 2000-11-09 2004-08-04 株式会社セルムス・ジャパン Advice providing method, advice providing apparatus and advice providing system
JP5317415B2 (en) * 2006-03-27 2013-10-16 富士フイルム株式会社 Image output apparatus, image output method, and image output program
JP4876687B2 (en) * 2006-04-19 2012-02-15 株式会社日立製作所 Attention level measuring device and attention level measuring system
JP4826506B2 (en) * 2007-02-27 2011-11-30 日産自動車株式会社 Gaze estimation device
JP2011022939A (en) * 2009-07-17 2011-02-03 Spill:Kk Hair style counseling system
JP5555073B2 (en) * 2009-10-02 2014-07-23 花王株式会社 Beauty support device and beauty counseling method

Also Published As

Publication number Publication date
JP2014149841A (en) 2014-08-21
JP2011096230A (en) 2011-05-12
JP5503432B2 (en) 2014-05-28

Similar Documents

Publication Publication Date Title
US10292481B2 (en) Makeup application assistance device, makeup application assistance method, and makeup application assistance program
US10799010B2 (en) Makeup application assist device and makeup application assist method
US9986812B2 (en) Makeup application assistance device, makeup application assistance system, and makeup application assistance method
CN101779218B (en) Makeup simulation system, makeup simulation apparatus, makeup simulation method, and makeup simulation program
Kwart et al. Age and beauty are in the eye of the beholder
WO2014119242A1 (en) Makeup application assistance device, makeup application assistance method, and makeup application assistance program
CN109840825A (en) The recommender system of physical features based on user
WO2015122195A1 (en) Impression analysis device, game device, health management device, advertising support device, impression analysis system, impression analysis method, program, and program recording medium
US10559102B2 (en) Makeup simulation assistance apparatus, makeup simulation assistance method, and non-transitory computer-readable recording medium storing makeup simulation assistance program
EP3182362A1 (en) Method and sytem for evaluating fitness between eyeglasses wearer and eyeglasses worn thereby
US8885873B2 (en) Systems and methods for using curvatures to analyze facial and body features
US20190073025A1 (en) Method and device for carrying out eye gaze mapping
CN106951448A (en) A kind of personalization, which is worn, takes recommendation method and system
JP5782540B2 (en) Beauty counseling method
US20160371569A1 (en) Systems and methods of analyzing images
JP2006081847A (en) Skin analysis network system
JP5555073B2 (en) Beauty support device and beauty counseling method
JP7095849B1 (en) Eyewear virtual fitting system, eyewear selection system, eyewear fitting system and eyewear classification system
KR102425873B1 (en) Personal color diagnostic method and system based on machine learning and augmented reality
JP2016193175A (en) Extraction method of determination part for apparent face impression, extraction method of determining factor for apparent face impression, and differentiation method for apparent face impression
TW201945898A (en) Information processing device and program
JP7520679B2 (en) Method for estimating lively face degree, device for estimating lively face degree, and program for estimating lively face degree
Rojas-López et al. Evaluating product perception using eye-tracking and semantic scales: comparing real and virtual representations
KR20240009440A (en) Computer-based body part analysis methods and systems
Khalighy Product design methodology supporting aesthetic evaluation

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141219

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150203

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150317

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150714

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150717

R151 Written notification of patent or utility model registration

Ref document number: 5782540

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250