CN112233064B - 一种色素检测方法及电子设备 - Google Patents
一种色素检测方法及电子设备 Download PDFInfo
- Publication number
- CN112233064B CN112233064B CN202010962720.1A CN202010962720A CN112233064B CN 112233064 B CN112233064 B CN 112233064B CN 202010962720 A CN202010962720 A CN 202010962720A CN 112233064 B CN112233064 B CN 112233064B
- Authority
- CN
- China
- Prior art keywords
- channel
- image
- lab
- rgb
- electronic device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/90—Determination of colour characteristics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
- A61B5/004—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for image acquisition of a particular organ or body part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
- A61B5/442—Evaluating skin mechanical properties, e.g. elasticity, hardness, texture, wrinkle assessment
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
- A61B5/443—Evaluating skin constituents, e.g. elastin, melanin, water
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/44—Detecting, measuring or recording for evaluating the integumentary system, e.g. skin, hair or nails
- A61B5/441—Skin evaluation, e.g. for skin disorder diagnosis
- A61B5/444—Evaluating skin marks, e.g. mole, nevi, tumour, scar
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
- A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
- A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/74—Details of notification to user or communication with user or patient ; user input means
- A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/001—Texturing; Colouring; Generation of texture or colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/10—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to drugs or medications, e.g. for ensuring correct administration to patients
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2576/00—Medical imaging apparatus involving image processing or analysis
- A61B2576/02—Medical imaging apparatus involving image processing or analysis specially adapted for a particular organ or body part
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0062—Arrangements for scanning
- A61B5/0064—Body surface scanning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20024—Filtering details
- G06T2207/20028—Bilateral filtering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30088—Skin; Dermal
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Veterinary Medicine (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Dermatology (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Software Systems (AREA)
- Primary Health Care (AREA)
- Epidemiology (AREA)
- Computer Networks & Wireless Communication (AREA)
- Data Mining & Analysis (AREA)
- Chemical & Material Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Multimedia (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Medicinal Chemistry (AREA)
- Quality & Reliability (AREA)
- Image Processing (AREA)
- Controls And Circuits For Display Device (AREA)
- Image Analysis (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
一种色素检测方法及电子设备,涉及终端技术领域,其中方法具体包括:从待检测的RGB皮肤图像中提取第一图像(301),该第一图像用于表征该RGB皮肤图像中的体反射分量,该RGB皮肤图像由具备RGB图像拍摄功能的设备拍摄得到;根据色素的第一光谱响应曲线与具备RGB图像拍摄功能的设备的第二光谱响应曲线之间的对应关系,从该第一图像的R通道、B通道和G通道中提取色素(302);根据提取的色素生成伪彩色图像并显示(303)。基于该方案进行色素检测具有较好的普适性。
Description
本申请中要求在2018年7月16日提交中国专利局、申请号为201810776213.1、申请名称为“一种检测皮肤色素的方法和装置”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
技术领域
本申请涉及终端技术领域,尤其涉及一种色素检测方法及电子设备。
背景技术
皮肤色素的分布与皮肤的外观表现以及许多皮肤问题直接相关。比如,黑色素分布不均将导致皮肤出现黄褐斑、雀斑、晒斑等问题,再比如,血红素的含量变化与痤疮、敏感肌、炎症、毛细血管扩张等直接相关。因此,准确检测皮肤色素,既对研究、测试护肤品及护肤仪器的有效性有着重要作用,又对消费者的日常美容、护肤有着重要的指导意义。
目前,可以通过移动终端上的应用程序来检测皮肤色素,常用的皮肤色素检测方式为:针对不同肤色、不同场景下采集的皮肤图像进行离线训练,获得用于分离皮肤色素的检测模型,再采用检测模型对测试图像进行检测,分离皮肤色素。由于移动检测场景多变,无法针对每种场景都采集皮肤图像进行训练,因此该检测模型并不能适用于复杂多变场景下的皮肤色素的检测,导致检测模型的普适性差。
发明内容
本申请提供一种色素检测方法及电子设备,用以解决现有皮肤色素检测技术中存在的普适性差问题。
第一方面,本申请实施例提供一种色素检测的方法,该方法包括:从待检测的RGB皮肤图像中提取第一图像,该第一图像用于表征该RGB皮肤图像中的体反射分量,该RGB皮肤图像由具备RGB图像拍摄功能的设备拍摄得到;根据色素的第一光谱响应曲线与具备RGB图像拍摄功能的设备的第二光谱响应曲线之间的对应关系,从该第一图像的R通道、B通道和G通道中提取色素;根据提取的色素生成伪彩色图像,并显示。
基于该方案,从待检测的RGB皮肤图像中提取第一图像,而该第一图像用于表征该RGB皮肤图像中的体反射分量,该RGB皮肤图像由具备RGB图像拍摄功能的设备拍摄得到。进一步,根据色素第一光谱响应曲线和具备RGB图像拍摄功能的设备的第二光谱响应曲线之间的关系,从第一图像提取色素,如此,根据光谱响应关系提取色素,即可检测不同场景下拍摄的RGB皮肤图像中的色素,无需像现有技术那样需对不同场景采集的皮肤图像进行提前训练才能检测色素,故基于该方案进行色素检测具有较好的普适性。
进一步的,为了提高从RGB皮肤图像中提取的第一图像的保真度,作为一种可能的实现方式,将待检测的RGB皮肤图像转换为第一Lab图像;分别提取第一Lab图像的L通道、a通道和b通道中的体反射分量;合并从第一Lab图像的L通道、a通道和b通道中提取的体反射分量,得到第二Lab图像;将第二Lab图像转换为RGB图像,得到第一图像。
通过该方式提取体反射分量,可以将颜色相关的信息(a通道和b通道)和颜色不相关的信息(L通道)分离开来,以实现对颜色相关的信息进行单独处理,从而有助于提高第一图像的保真度。
在一种可能的设计中,第一Lab图像的L通道中的体反射分量为第一Lab图像的L通道中的初始值与第一Lab图像的L通道中的表面反射分量的差值;第一Lab图像的a通道中的体反射分量为第一Lab图像的a通道中的初始值与第一Lab图像的a通道中的表面反射分量的差值;第一Lab图像的b通道中的体反射分量为第一Lab图像的b通道中的初始值与第一Lab图像的b通道中的表面反射分量的差值;其中,第一Lab图像的L通道、a通道和b通道的表面反射分量是对第一Lab图像的L、a、b通道的初始值分别进行滤波处理得到的。通过该设计,可以过滤掉L通道、a通道、b通道的表面反射分量,从而准确地提取L通道、a通道、b通道的体反射分量。
在一种可能的设计中,为了提高色素检测的准确度,第一Lab图像的L通道、a通道和b通道的表面反射分量可以是对第一Lab图像的L、a、b通道的初始值分别进行双边滤波处理得到的。通过该设计,可以有助于进一步保留第一图像的边缘信息,提高色素检测的准确性。
在一种可能的设计中,所述色素包括但不限于以下任一项:血红素、黑色素、胡萝卜素、脂色素和胆色素。
第二方面,本申请实施例提供的一种电子设备,所述电子设备包括存储器、处理器和显示屏;所述存储器,用于存储程序指令;所述处理器,用于读取所述存储器中存储的所述程序指令,并执行:从待检测的RGB皮肤图像中提取第一图像,其中,所述第一图像用于表征所述RGB皮肤图像中的体反射分量,所述RGB皮肤图像由具备RGB图像拍摄功能的设备拍摄得到;根据色素的第一光谱响应曲线与所述具备RGB图像拍摄功能的设备的第二光谱响应曲线之间的对应关系,从所述第一图像的R通道、B通道和G通道中提取所述色素;根据提取的所述色素生成伪彩色图像;所述显示屏,用于显示所述伪彩色图像。
在一种可能的设计中,所述处理器,具体用于执行:将所述待检测的RGB皮肤图像转换为第一Lab图像;分别提取所述第一Lab图像的L通道、a通道和b通道中的体反射分量;合并从所述第一Lab图像的L通道、a通道和b通道中提取的体反射分量,得到第二Lab图像;将所述第二Lab图像转换为RGB图像,得到所述第一图像。
在一种可能的设计中,所述第一Lab图像的L通道中的体反射分量为所述第一Lab图像的L通道中的初始值与第一Lab图像的L通道中的表面反射分量的差值;所述第一Lab图像的a通道中的体反射分量为所述第一Lab图像的a通道中的初始值与第一Lab图像的a通道中的表面反射分量的差值;所述第一Lab图像的b通道中的体反射分量为所述第一Lab图像的b通道中的初始值与第一Lab图像的b通道中的表面反射分量的差值;其中,所述第一Lab图像的L通道、a通道和b通道的表面反射分量是对所述第一Lab图像的L、a、b通道的初始值分别进行滤波处理得到的。
在一种可能的设计中,所述第一Lab图像的L通道、a通道和b通道的表面反射分量是对所述第一Lab图像的L、a、b通道的初始值分别进行滤波处理得到的,包括:所述第一Lab图像的L通道、a通道和b通道的表面反射分量是对所述第一Lab图像的L、a、b通道的初始值分别进行双边滤波处理得到的。
在一种可能的设计中,所述色素包括但不限于以下任一项:血红素、黑色素、胡萝卜素、脂色素和胆色素。
第三方面,本申请实施例提供的一种计算机存储介质,该计算机存储介质存储有程序指令,当程序指令在电子设备上运行时,使得电子设备执行本申请实施例第一方面及其任一可能的设计的方法。
第四方面,本申请实施例提供的一种计算机程序产品,当计算机程序产品在电子设备上运行时,使得电子设备执行本申请实施例第一方面及其任一可能的设计的方法。
第五方面,本申请实施例提供的一种芯片,所述芯片与电子设备中的存储器耦合,控制电子设备执行本申请实施例第一方面及其任一可能的设计的方法。
另外,第二方面至第五方面所带来的技术效果可参见上述第一方面的描述,此处不再赘述。
需要说明的是,本申请实施例中“耦合”是指两个部件彼此直接或间接地结合。
附图说明
图1为本申请实施例适用的一种电子设备的结构示意图;
图2为本申请实施例提供的一种用户界面的示意图;
图3为本申请实施例提供的一种色素检测方法的流程示意图;
图4为本申请实施例提供的用户界面示意图;
图5为本申请实施例提供的用户界面示意图;
图6为本申请实施例提供的光谱响应曲线示意图;
图7为本申请实施例提供的黑色素对应的灰度图像示意图;
图8为本申请实施例提供的血红素对应的灰度图像示意图;
图9为本申请实施例适用的一种电子设备的结构示意图。
具体实施方式
下面将结合附图对本申请实施例作进一步地详细描述。
应理解,本申请实施例中“至少一个”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B的情况,其中A、B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一(项)个”或其类似表达,是指的这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a、b或c中的至少一项(个),可以表示:a,b,c,a和b,a和c,b和c,或a、b和c,其中a、b、c可以是单个,也可以是多个。
本申请公开的各个实施例可以应用于电子设备中。在本申请一些实施例中,电子设备可以是包含诸如个人数字助理和/或音乐播放器等功能的便携式电子设备,诸如手机、平板电脑、具备无线通讯功能的可穿戴设备(如智能手表)、车载设备等。便携式电子设备的示例性实施例包括但不限于搭载或者其它操作系统的便携式电子设备。上述便携式电子设备也可以是诸如具有触敏表面(例如触控面板)的膝上型计算机(Laptop)等。还应当理解的是,在本申请其他一些实施例中,上述电子设备也可以是具有触敏表面(例如触控面板)的台式计算机。
图1示例性示出了一种电子设备的结构示意图。
电子设备100可以包括处理器110、外部存储器接口120、内部存储器121、通用串行总线(universal serial bus,USB)接口130、充电管理模块140、电源管理模块141、电池142、天线2、无线通信模块160、音频模块170、扬声器170A、受话器170B、麦克风170C、耳机接口170D、传感器模块180、按键190、马达191、指示器192、摄像头193、以及显示屏194等。其中传感器模块180包括环境光传感器180L。此外,传感器模块180还可以包括压力传感器180A、陀螺仪传感器180B、气压传感器180C、磁传感器180D、加速度传感器180E、距离传感器180F、接近光传感器180G、指纹传感器180H、温度传感器180J、触摸传感器180K、骨传导传感器180M等。
在另一些实施例中,本申请实施例中的电子设备100还可以包括天线1、移动通信模块150、以及用户标识模块(subscriber identification module,SIM)卡接口195等。
处理器110可以包括一个或多个处理单元。例如:处理器110可以包括应用处理器(application processor,AP)、调制解调处理器、图形处理器(graphics processingunit,GPU)、图像信号处理器(image signal processor,ISP)、控制器、存储器、视频编解码器、数字信号处理器(digital signal processor,DSP)、基带处理器、和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
在一些实施例中,处理器110中还可以设置存储器,用于存储指令和数据。示例的,处理器110中的存储器可以为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在另一些实施例中,处理器110还可以包括一个或多个接口。例如,接口可以为USB接口130。又例如,接口还可以为集成电路(inter-integrated circuit,I2C)接口、集成电路内置音频(inter-integrated circuit sound,I2S)接口、脉冲编码调制(pulse codemodulation,PCM)接口、通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口、移动产业处理器接口(mobile industry processor interface,MIPI)、通用输入输出(general-purpose input/output,GPIO)接口、SIM接口等。可以理解的是,本申请实施例可以通过接口连接电子设备100的不同模块,从而使得电子设备100能够实现不同的功能。例如拍照、处理等。需要说明的是,本申请实施例对电子设备100中接口的连接方式不作限定。
其中,USB接口130是符合USB标准规范的接口。例如,USB接口130可以包括MiniUSB接口、Micro USB接口、USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如增强现实技术(augmentedreality,AR)设备等。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142、充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110、内部存储器121、外部存储器121、显示屏194、摄像头193和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电、阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1、天线2、移动通信模块150、无线通信模块160、调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器、开关、功率放大器、低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波、放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A、受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络)、蓝牙(bluetooth,BT)、全球导航卫星系统(global navigation satellite system,GNSS)、调频(frequency modulation,FM)、近距离无线通信技术(near field communication,NFC)、红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波信号,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM)、通用分组无线服务(general packet radio service,GPRS)、码分多址接入(codedivision multiple access,CDMA)、宽带码分多址(wideband code division multipleaccess,WCDMA)、时分码分多址(time-division code division multiple access,TD-SCDMA)、长期演进(long term evolution,LTE)、BT、GNSS、WLAN、NFC、FM、和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS)、全球导航卫星系统(global navigation satellite system,GLONASS)、北斗卫星导航系统(beidounavigation satellite system,BDS)、准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU、显示屏194、以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像、视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD)、有机发光二极管(organic light-emittingdiode,OLED)、有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED)、柔性发光二极管(flex light-emittingdiode,FLED)、MiniLed、MicroLed、量子点发光二极管(quantum dot light emittingdiodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP、摄像头193、视频编解码器、GPU、显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点、亮度、肤色进行算法优化。ISP还可以对拍摄场景的曝光、色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB、YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
DSP用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,DSP用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1、MPEG2、MPEG3、MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别、人脸识别、语音识别、文本理解等。
外部存储器接口120可以用于连接外部存储卡(例如,Micro SD卡),实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐、视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据、电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、通用闪存存储器(universal flash storage,UFS)等。
电子设备100可以通过音频模块170、扬声器170A、受话器170B、麦克风170C、耳机接口170D以及应用处理器等实现音频功能。例如音乐播放、录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐、或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个、四个或更多麦克风170C,实现声音信号采集、降噪、还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口、美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口等。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190可以包括开机键、音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照、音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒、接收信息、闹钟、游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态、电量变化,也可以用于指示消息、未接来电、通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件、软件或软件和硬件的组合实现。
下面以电子设备100为例对本申请实施例进行详细说明。
另外,应理解,本申请实施例中电子设备支持的应用程序可以包括拍照类的应用,例如相机。此外,电子设备支持的应用程序还可以包括其他多种应用,例如:绘图、游戏、电话、视频播放器、音乐播放器、照片管理、浏览器、日历、时钟等。
本申请实施例中的电子设备支持的应用又可以包括用于皮肤检测的应用。其中,用于皮肤检测的应用是通过对拍摄的人脸图像来检测用户面部皮肤的特征(例如面部皮肤的皱纹、毛孔、黑头、色斑、红区等),并可以为用户提供检测结果报告。例如,检测结果报告可以但不限于包括针对面部皮肤上各个特征的打分、对面部皮肤的综合分析等,还可以进而展示用户的人脸图片,并根据对各个特征的检测结果在人脸图像上分别标示出相应的问题,比如在鼻头区域标示有黑头,在额头区域标示有皱纹,在脸颊区域标示有色斑等等。可以理解的是,检测结果报告可以通过用户界面呈现给用户,例如,检测结果报告可以如图2所示的用户界面200,包括综合得分、肤龄、以及毛孔、黑头、细纹、色斑以及红区的得分。在另一些实施例中,用户界面200上还可以包括虚拟按钮201、虚拟按钮202、虚拟按钮203、虚拟按钮204和虚拟按钮205,其中以虚拟按钮201为例,电子设备100响应于对虚拟按钮201的操作,在显示屏194上显示针对毛孔的具体护理建议。虚拟按钮202、虚拟按钮203、虚拟按钮204和虚拟按钮205的功能可参见虚拟按钮201的功能,在此不再赘述。
为了使得电子设备对用户面部皮肤的检测更加准确,示例的,本申请实施例的用户皮肤检测方案,可以在处理器110中集成拍摄条件检测模块、图像质量检测模块、感兴趣区域(region of interest,ROI)检测模块、皮肤特征检测模块、结果分析模块等。在一些实施例中,可以在处理器110中的应用处理器上集成拍摄条件检测模块、图像质量检测模块、感兴趣区域(region of interest,ROI)检测模块、皮肤特征检测模块、结果分析模块等等。在另一些实施例中,在处理器110中集成人工智能(artificial intelligence,AI)芯片,在AI芯片上集成拍摄条件检测模块、图像质量检测模块、感兴趣区域(region of interest,ROI)检测模块、皮肤特征检测模块、结果分析模块等,来实现用户皮肤检测。
其中,拍摄条件检测模块可以实现对当前拍摄条件进行检测,以指导用户在要求的拍摄条件下进行拍摄,确保拍摄图像满足要求,从而保证基于图像对皮肤检测的准确性。例如,要求的拍摄条件包括:环境光照充足、人脸与电子设备之间的距离合适(例如25cm左右)、面部端正、睁眼闭眼、不佩戴眼镜、前额尽量无刘海遮挡、对焦准确、无明显抖动等。
当拍摄条件检测模块检测成功后,处理器110会启动智能补光。例如,当拍摄条件检测模块在当前拍摄条件满足要求时,确定检测成功。具体的,本申请实施例中电子设备可以采用不同的补光模式(例如闪光灯模式,手电筒模式)对用户的面部进行补光,以满足不同面部皮肤特征检测的要求。在对用户的面部补光后,处理器110就可以控制摄像头193对用户面部进行拍摄得到用户面部的人脸图像。
图像质量检测模块可以对人脸图像的质量进行检测,以确保拍摄的图像满足不同面部皮肤特征检测的要求。
ROI检测模块可以在图像质量检测模块检测到图像的质量满足要求后,从人脸图像中确定待检测的ROI,例如黑头的ROI是鼻头上的一小块区域。
皮肤特征检测模块可以分别对已经确定出的ROI中的面部皮肤特征进行检测,例如检测皮肤中的皱纹、毛孔、黑头、色斑、红区、出油程度等。
结果分析模块可以对皮肤特征检测模块检测得到的面部皮肤特征的检测结果进行分析,并针对各个皮肤特征给出各个检测项的打分、打分排序等。
另外,在一些实施例中,处理器110中还可以集成图像预处理模块。其中,图像预处理模块可以对拍摄到的人脸图像进行压缩、剪裁等,以便ROI检测模块、皮肤特征检测模块等进行后续处理。
为了输出人脸图像分析结果,或输出各个检测项的打分等,处理器110还可以将检测得到的检测报告(包含各个特征的检测结果在人脸图像上的区域,比如在鼻头区域标示有黑头,在额头区域标示有皱纹,在脸颊区域标示有色斑等等,各个检测项的打分等)显示在显示屏194上,供用户进行查看,提高用户体验。
下面结合图1所示的电子设备的结构对本申请实施例进行详细说明。
为了适应多种检测场景的变化,解决现有皮肤色素检测技术中存在的普适性差的问题,本申请实施例提供了一种色素检测方法。该方法可以由电子设备100从RGB皮肤图像中提取色素,鉴于皮肤中的色素(如黑色素、血红素等)具有特定的吸收光谱,因此在获得皮肤图像中提取体反射分量后,可利用光谱分析技术从体反射分量中分离出色素,进而采用该色素检测方法进行色素检测具有较好的普适性。
上述本申请实施例提供的色素检测方法可应用于电子设备100所支持的用于皮肤检测的应用程序。例如,如图5所示,电子设备100的显示屏194显示测肤应用的图标500。电子设备100检测到对图标500的操作(如,电子设备检测到用户点击图标500),则响应于对图标500的操作,在显示屏194显示测肤应用的用户界面510。其中测肤应用的用户界面510包括虚拟按钮511(在实施中,虚拟按钮可命名为“测试”或“拍照”等等)。电子设备100检测到对虚拟按钮511的操作(如,电子设备检测到用户点击虚拟按钮511),则响应于对虚拟按钮511的操作,根据本申请实施例提供的色素检测方法,对RGB皮肤图像中需要检测色素的区域进行色素检测。
其中,RGB皮肤图像,可由电子设备100响应于对虚拟按钮511的操作,通过摄像头193拍摄用户面部得到,这里的摄像头193,可以是电子设备100的前置摄像头,或者后置摄像头。或者,RGB皮肤图像也可以是电子设备100响应于对虚拟按钮511的操作,从内部存储器121或通过外部存储器接口120从外部存储器中读取的图像,此时RGB皮肤图像可以是事先拍摄并存储于内部存储器121或外部存储器中的RGB皮肤图像。
例如,RGB皮肤图像可以是电子设备通过摄像头193(这里的摄像头193可以是前置摄像头或者后置摄像头)拍摄用户面部得到的图像,在拍照后,电子设备100将得到的RGB皮肤图像存储于内部存储器121中,在电子设备100检测到对虚拟按钮511的操作后,电子设备100可从内部存储器121中读取该RGB皮肤图像。另外在实施中,内部存储器121存储的RGB皮肤图像,也可以是电子设备100通过移动通信模块150和/或无线通信模块160接收的图像。
进一步的,电子设备100检测到对虚拟按钮511的操作后,还可以由用户选择电子设备100通过摄像头193进行拍摄以获取RGB皮肤图像,还是由电子设备100从内部存储器121或外部存储器中读取RGB皮肤图像。例如,电子设备100检测到对虚拟按钮511的操作后,显示屏194显示照片选择区域512,其中,照片选择区域512可包括“如何选择照片”、“从哪里获取照片”等提示信息,用于提醒用户选择RGB皮肤图像的来源,照片选择区域512还可包括多个虚拟按键,用于通过用户对虚拟按键的操作,执行虚拟按键对应的操作以通过不同途径获取RGB皮肤图像,例如,虚拟按键可以是表示通过拍摄的方式获取RGB皮肤图像的第一按键513(第一按键513的名称可以是“拍摄”、“拍照”等等),或者,虚拟按键可以是表示通过从存储器中读取的方式获取RGB皮肤图像的第二按键514(第二按键514的名称可以是“存储”、“相册”等等)。电子设备100在检测到用户对第一按键513的操作后,可响应于用户对第一按键513的操作,通过摄像头193拍摄用户面部图像,作为RGB皮肤图像;电子设备100在检测到用户对第二按键514的操作后,可继续提示用户选择RGB皮肤图像的存储路径,并从用户选择的存储路径读取用户选择的图像作为RGB皮肤图像。其中,存储路径可以是电子设备100的“相册”的默认存储路径;存储路径可以包括内部存储器121的存储路径,也可以包括外部存储的存储路径。另外应理解,以上照片选择区域512的显示,也可通过电子设备100检测到对于虚拟按钮511的操作以外的方式触发,例如,可以在用户界面510设置新的功能虚拟按键,用于电子设备100检测到对于新的功能虚拟按键的操作后,显示照片选择区域512。
采用以上方法获取用户的RGB皮肤图像后,显示屏194可显示RGB皮肤图像预览界面520,并在RGB皮肤图像预览界面520的预览区域521显示RGB皮肤图像,电子设备100可以根据预览区域521中的RGB皮肤图像确定色素检测的ROI,比如,可以是电子设备100根据RGB皮肤图像中的人脸特征点定位分析自动选择ROI,也可以是用户自己手动画出的ROI,还可以是电子设备100给出了一个区域,用户再针对电子设备100给出的区域手动调整后得到的ROI。然后,将ROI作为RGB皮肤图像中需要检测色素的区域,用于通过本申请实施例提供的色素检测方法,进行色素的检测。
下面详细描述基于上述不同方式获取的RGB皮肤图像,电子设备100中的处理器110如何具体实现对RGB皮肤图像进行色素检测,具体方法请参见图3所示的流程示意图,包括以下步骤:
步骤301,处理器110从待检测的RGB皮肤图像中提取第一图像。
其中,该第一图像用于表征该RGB皮肤图像中的体反射分量,该RGB皮肤图像由具备RGB图像拍摄功能的设备拍摄得到。
此处,该RGB皮肤图像可以是待检测部位的皮肤图像,比如面部图像,再比如鼻头区域图像。
该RGB皮肤图像是由入射光经皮表反射,以及表皮、真皮、皮下组织吸收、散射后成像所得到的,主要包含两个分量:表面反射分量和体反射分量。
其中表面反射分量是由入射光照射皮肤表面时以类似镜面反射方式弹回来的能量所得到的,可用于分析皮肤表面的拓扑特征,比如皱纹、毛孔、黑头、皮肤纹理等。
体反射分量是由入射光能量进入皮肤内,由表皮、真皮等中的色素、胶原蛋白等吸收、散射后返回的能量所得到的,可用于分析皮下组织的光学性质,比如黑色素、血红素等色素的分布。示例性的,可以从待检测的RGB皮肤图像中提取体反射分量,得到第一图像。
该具备RGB图像拍摄功能的设备可以是电子设备100,也可以是与电子设备100连接的设备,还可以是与电子设备100不直接连接的设备。作为一个示例,不直接连接可以是无线连接,也可以是通过其他设备转接,以实现将具备RGB图像拍摄功能的设备拍摄到的RGB皮肤图像发送或传递至电子设备100。以该具备RGB图像拍摄功能的设备为电子设备100为例,该具备RGB图像拍摄功能通过电子设备100上的摄像头193实现,比如,通过摄像头193采集该RGB皮肤图像。示例性的,在需要采集图像时,可以针对电子设备100中安装的相机应用进行操作,以实现通过电子设备100启动摄像头193拍摄图像。该相机应用可以为电子设备100在出厂时预装的应用,也可以为用户下载的应用。需要说明的是,该RGB皮肤图像可以是预先存储于电子设备100中的图像,也可以是通过电子设备100启动摄像头193实时拍摄得到。
作为一个具体的示例,如图4所示,电子设备100的显示屏194显示主界面,主界面包括相机应用的图标400,此外主界面上还可以包括邮件图标、短消息图标、图库图标、微信图标等。在需要拍摄图像时,电子设备100的显示屏194可以响应于对图标400的操作,比如,对图标400进行触摸操作,显示屏194显示预览界面410,预览界面410包括预览区域411。其中,预览区域411可以用于显示摄像头193采集的RGB皮肤图像。以拍摄面部图像为例,可以在预览区域411显示待拍摄图像时,可以对虚拟按钮412进行触摸操作,以完成采集得到RGB皮肤图像。
作为另一个具体的示例,电子设备100还可以包括用于皮肤检测的应用,如图5所示,电子设备100的显示屏194显示用于皮肤检测的应用的图标500。电子设备100响应于对图标500的操作,在显示屏194显示用于皮肤检测的应用的用户界面510。其中用户界面510包括虚拟按钮511。电子设备100检测到对虚拟按钮511的操作,响应于对虚拟按钮511的操作,显示屏194显示相机应用的预览界面520,预览界面520包括预览区域521。预览区域521用于显示摄像头193采集的RGB皮肤图像。
步骤302,处理器110根据色素的第一光谱响应曲线与具备RGB图像拍摄功能的设备的第二光谱响应曲线之间的对应关系,从该第一图像的R通道、B通道和G通道中提取色素。
其中,上述色素可以包括但不限于以下任一项:血红素、黑色素、胡萝卜素、脂色素和胆色素。
具体的,处理器110根据色素的第一光谱响应曲线与具备RGB图像拍摄功能的设备的第二光谱响应曲线之间的对应关系,以及第一图像的R通道、G通道、B通道三个通道的通道值,从第一图像的R通道、B通道和G通道中提取色素。
示例性的,色素的第一光谱响应曲线反映色素对不同波长光谱段的吸收值,例如,图6中所示的黑色素(melanin)的吸收光谱曲线、氧合血红素(oxyhemoglobin)的吸收光谱曲线和脱氧血红素(deoxyhemoglobin)的吸收光谱曲线。具备RGB图像拍摄功能的设备的第二光谱响应曲线反映具备RGB图像拍摄功能的设备中的不同感光单元对不同光谱段的吸收值,例如,图6中所示的红色(R)感光单元的吸收光谱曲线、绿色(G)感光单元的吸收光谱曲线、蓝色(B)感光单元的吸收光谱曲线。
作为一个具体的示例,以从第一图像中提取黑色素和血红素为例,由于黑色素和血红素具有特定的吸收光谱,因此可利用光谱分析技术,从第一图像的体反射分量中分离出黑色素和血红素。下面提供分离黑色素和血红素的一种可能的实现方式。
基于图6所示的黑色素的第一光谱响应曲线和具有RGB图像拍摄功能的设备的第二光谱响应曲线,可以分别确定出黑色素的第一光谱响应曲线和具有RGB图像拍摄功能的设备的第二光谱响应曲线之间的第一函数关系,再根据具备RGB图像拍摄功能的设备的R通道的通道值、G通道的通道值和B通道的通道值、以及第一函数关系,可以确定出黑色素与R通道、G通道和B通道三个通道的通道值的对应关系,例如下述公式(1):
M=g(R、G、B)……(1)
上述公式(1)中,R、G、B分别代表RGB图像的R通道、G通道和B通道三个通道的通道值,M为黑色素的黑色素值,g为从R通道、G通道和B通道三个通道的通道值到黑色素值M的映射函数。
基于上述公式(1)和从如图5所示的预览区域521显示的RGB皮肤图像中提取的第一图像,根据第一图像的R通道、G通道和B通道等三个通道的通道值,可以从第一图像中提取黑色素,从而可得到如图7所示的黑色素对应的灰度图。
类似的,基于图6所示的血红素的第一光谱响应曲线和具备RGB图像拍摄功能的设备的第二光谱响应曲线,可以分别确定出血红素的第一光谱响应曲线和具备RGB图像拍摄功能的设备的第二光谱响应曲线之间的第二函数关系,再根据具备RGB图像拍摄功能的设备的R通道的通道值、G通道的通道值和B通道的通道值、以及第二函数关系,可以确定出血红素与R通道、G通道和B通道三个通道的通道值的对应关系,例如下述公式(2):
H=f(R、G、B)……(2)
上述公式(2)中,R、G、B分别代表RGB图像的R通道、G通道和B通道三个通道的通道值,H为血红素的血红素值,f为从R通道、G通道和B通道三个通道的通道值到血红素值H的映射函数。
基于上述公式(2)和从如图5所示的预览区域521显示的RGB皮肤图像中提取的第一图像,根据第一图像的R通道、G通道和B通道三个通道的通道值,可以从第一图像中提取血红素,从而可得到如图8所示的血红素对应的灰度图。
需要说明的是,上述公式(1)和公式(2),可以是现有研究提供的数学模型,也可以是通过机器学习算法训练得到的模型。
步骤303,处理器110根据提取的色素生成伪彩色图像,并显示。
作为一个具体的示例,处理器110根据提取的色素生成灰度图像(如图7所示的黑色素结果图和图8所示的血红素结果图),再将该灰度图像转化为伪彩色图像。如此,可以给用户呈现直观的色素检测结果,便于用户从伪彩色图像中获取更多信息。
具体的,伪彩色图像可通过预设的色彩查找表映射得到,比如,色彩查找表可以包括不同灰度值和R值、G值、B值的映射关系,如此,可以通过查找灰度图像中每个像素点的灰度值所对应的R值、G值、B值,得到伪彩色图像。
进一步的,为了得到更准确的色素检测结果,处理器110可以对生成的灰度图像进行后处理,比如归一化处理、对比度增强处理等,再将经过后处理之后的灰度图像转化为伪彩色图像。
通过上述方案,处理器110从待检测的RGB皮肤图像中提取第一图像,而该第一图像用于表征该RGB皮肤图像中的体反射分量,该RGB皮肤图像由具备RGB图像拍摄功能的设备拍摄得到,处理器110根据色素第一光谱响应曲线和具备RGB图像拍摄功能的设备的第二光谱响应曲线之间的关系,从第一图像提取色素,如此,处理器110根据光谱响应关系提取色素,即可检测不同场景下拍摄的RGB皮肤图像中的色素,无需像现有技术那样需对不同场景采集的皮肤图像进行提前训练才能检测色素,故基于该方案进行色素检测具有较好的普适性。
基于上述实施例,为了提高从RGB皮肤图像中提取的第一图像的保真度,以下提供一种可选的实施方式,通过以下步骤S1至S3实现上述步骤301:
S1,处理器110将待检测的RGB皮肤图像转换为第一Lab图像。
具体的,处理器110将待检测的RGB皮肤图像从RGB颜色空间转换至Lab颜色空间,得到第一Lab图像。RGB颜色空间到Lab颜色空间的转换采用业界公开算法即可。
其中,RGB颜色空间是由R、G、B三个通道组成,待检测的RGB皮肤图像中每个像素点的颜色由R值、G值和B值组成,所有像素点的R值组成R通道、所有像素点的G值组成G通道、所有像素点的B值组成B通道。
Lab颜色空间是由L、a、b三个通道组成。L表示像素的亮度,与颜色信息无关。而a和b与像素点的颜色相关,与像素点的亮度无关,a表示从洋红色至绿色的范围,b表示从黄色至蓝色的范围。第一Lab图像中每个像素点的颜色由L值、a值、b值组成,第一Lab图像中所有像素点的L值组成L通道、所有像素点的a值组成a通道、所有像素点的b值组成b通道。
如果针对RGB皮肤图像的R通道、G通道和B通道进行滤波处理,滤波结果可能会出现颜色交叠,导致得到的图像保真度差。通过将待检测的RGB皮肤图像转换为第一Lab图像,可以实现将颜色相关信息与颜色不相关信息分离开,从而实现单独处理第一Lab图像中的颜色相关信息。
S2,处理器110分别提取第一Lab图像的L通道、a通道和b通道中的体反射分量。
示例性的,处理器110可以分别针对第一Lab图像的L通道、a通道和b通道进行滤波处理,得到第一Lab图像的L通道、a通道和b通道中的体反射分量。
第一Lab图像的L通道、a通道和b通道中每个通道的初始值包括体反射分量和表面反射分量。一种实施方式中,对第一Lab图像的L通道、a通道和b通道的初始值分别进行滤波处理,得到第一Lab图像的L通道、a通道和b通道的表面反射分量,然后确定出体反射分量。其中,第一Lab图像的L通道中的体反射分量为第一Lab图像的L通道中的初始值与第一Lab图像的L通道中的表面反射分量的差值;第一Lab图像的a通道中的体反射分量为第一Lab图像的a通道中的初始值与第一Lab图像的a通道中的表面反射分量的差值;第一Lab图像的b通道中的体反射分量为第一Lab图像的b通道中的初始值与第一Lab图像的b通道中的表面反射分量的差值。如此,可以过滤掉L通道、a通道、b通道的表面反射分量,从而可以准确的提取L通道、a通道、b通道的体反射分量
进一步的,为了提高色素检测的准确度,第一Lab图像的L通道、a通道和b通道中每个通道的表面反射分量是对第一Lab图像的L、a、b通道的初始值分别进行双边滤波处理得到的。通过该方案,可以有助于进一步保留第一图像的边缘信息,从而可以提高色素检测的准确性。
S3,处理器110合并从第一Lab图像的L通道、a通道和b通道中提取的体反射分量,得到第二Lab图像。
S4,处理器110将第二Lab图像转换为RGB图像,得到第一图像。
具体的,处理器110将第二Lab图像从Lab颜色空间转换为RGB颜色空间,得到第一图像。Lab颜色空间至RGB颜色空间的转换采用业界公开算法即可。
通过上述步骤S1至S4,可以实现对颜色相关信息和颜色不相关信息进行单独处理,从而有助于提高第一图像的保真度。
应理解,本申请的上述各个实施例可以相互结合使用,也可以单独使用。
上述本申请提供的实施例中,从电子设备作为执行主体的角度对本申请实施例提供的方法进行了介绍。为了实现上述本申请实施例提供的方法中的各功能,电子设备可以包括硬件结构和/或软件模块,以硬件结构、软件模块、或硬件结构加软件模块的形式来实现上述各功能。上述各功能中的某个功能以硬件结构、软件模块、还是硬件结构加软件模块的方式来执行,取决于技术方案的特定应用和设计约束条件。
基于相同的构思,图9所示为本申请提供的一种电子设备900。示例的,电子设备900包括至少一个处理器910、存储器920、显示屏930,还可以包括显示屏930和摄像头940。其中,处理器910与存储器920、显示屏930和摄像头940耦合,本申请实施例中的耦合是装置、单元或模块之间的间接耦合或通信连接,可以是电性,机械或其它的形式,用于装置、单元或模块之间的信息交互。
具体的,存储器920用于存储程序指令。
处理器910用于调用存储器920中存储的程序指令,使得电子设备900执行图3所示的色素检测方法中由电子设备执行的步骤。
显示屏930用于显示处理器910得到的色素检测结果,例如显示上述步骤303中的伪彩色图像。显示屏还可以用于显示屏用于在摄像头940启动拍摄时,显示预览界面,预览界面包括摄像头940采集的图像,以及用于显示上述实施例中设计的用户界面。
应理解,该电子设备900可以用于实现本申请实施例的如图3所示的色素检测方法,相关特征可以参照上文,此处不再赘述。
所属领域的技术人员可以清楚地了解到本申请实施例可以用硬件实现,或固件实现,或它们的组合方式来实现。当使用软件实现时,可以将上述功能存储在计算机可读介质中或作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质,其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是计算机能够存取的任何可用介质。以此为例但不限于:计算机可读介质可以包括RAM、ROM、电可擦可编程只读存储器(electrically erasableprogrammable read only memory,EEPROM)、只读光盘(compact disc read-Only memory,CD-ROM)或其他光盘存储、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质。此外。任何连接可以适当的成为计算机可读介质。例如,如果软件是使用同轴电缆、光纤光缆、双绞线、数字用户线(digital subscriber line,DSL)或者诸如红外线、无线电和微波之类的无线技术从网站、服务器或者其他远程源传输的,那么同轴电缆、光纤光缆、双绞线、DSL或者诸如红外线、无线和微波之类的无线技术包括在所属介质的定影中。如本申请实施例所使用的,盘(disk)和碟(disc)包括压缩光碟(compact disc,CD)、激光碟、光碟、数字通用光碟(digital video disc,DVD)、软盘和蓝光光碟,其中盘通常磁性的复制数据,而碟则用激光来光学的复制数据。上面的组合也应当包括在计算机可读介质的保护范围之内。
总之,以上所述仅为本申请的实施例而已,并非用于限定本申请的保护范围。凡根据本申请的揭露,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。
Claims (15)
1.一种色素检测方法,其特征在于,所述方法包括:
显示第一应用的第一界面,所述第一界面包括第一按钮;
响应于对所述第一按钮的操作,获取待检测的RGB皮肤图像;
从所述待检测的RGB皮肤图像中提取第一图像,所述第一图像用于表征所述RGB皮肤图像中的体反射分量,所述RGB皮肤图像由具备RGB图像拍摄功能的设备拍摄得到;
根据色素的第一光谱响应曲线与所述具备RGB图像拍摄功能的设备的第二光谱响应曲线之间的对应关系,从所述第一图像的R通道、B通道和G通道中提取所述色素;
根据提取的所述色素生成伪彩色图像,并显示。
2.如权利要求1所述的方法,其特征在于,所述从所述待检测的RGB皮肤图像中提取第一图像,包括:
将所述待检测的RGB皮肤图像转换为第一Lab图像;
分别提取所述第一Lab图像的L通道、a通道和b通道中的体反射分量;
合并从所述第一Lab图像的L通道、a通道和b通道中提取的体反射分量,得到第二Lab图像;
将所述第二Lab图像转换为RGB图像,得到所述第一图像。
3.如权利要求2所述的方法,其特征在于,所述第一Lab图像的L通道中的体反射分量为所述第一Lab图像的L通道中的初始值与第一Lab图像的L通道中的表面反射分量的差值;所述第一Lab图像的a通道中的体反射分量为所述第一Lab图像的a通道中的初始值与第一Lab图像的a通道中的表面反射分量的差值;所述第一Lab图像的b通道中的体反射分量为所述第一Lab图像的b通道中的初始值与第一Lab图像的b通道中的表面反射分量的差值;
其中,所述第一Lab图像的L通道、a通道和b通道的表面反射分量是对所述第一Lab图像的L通道、a通道和b通道的初始值分别进行滤波处理得到的。
4.如权利要求3所述的方法,其特征在于,所述第一Lab图像的L通道、a通道和b通道的表面反射分量是对所述第一Lab图像的L通道、a通道和b通道中的初始值进行滤波处理得到的,包括:
所述第一Lab图像的所述L通道、所述a通道和所述b通道的表面反射分量是对所述第一Lab图像的所述L通道、所述a通道和所述b通道中的初始值进行双边滤波处理得到的。
5.如权利要求1所述的方法,其特征在于,响应于对所述第一按钮的操作,获取待检测的RGB皮肤图像,包括:
响应于对所述第一按钮的操作,通过摄像头拍摄用户面部的PGB皮肤图像,所述摄像头为前置摄像头。
6.如权利要求1所述的方法,其特征在于,响应于对所述第一按钮的操作,获取待检测的RGB皮肤图像,包括:
响应于对所述第一按钮的操作,从存储器中获取待检测的RGB皮肤图像。
7.如权利要求1所述的方法,其特征在于,还包括:
显示所述RGB皮肤图像的预览界面;
接收用户的选择操作,在所述预览界面上确定色素检测的感兴趣区域。
8.如权利要求1-7中任一项所述的方法,其特征在于,所述色素包括以下任一项:
血红素、黑色素、胡萝卜素、脂色素和胆色素。
9.一种电子设备,其特征在于,所述电子设备包括存储器、处理器和显示屏;
所述存储器,用于存储程序指令;
所述处理器,用于读取所述存储器中存储的所述程序指令,并执行:
显示第一应用的第一界面,所述第一界面包括第一按钮;
响应于对所述第一按钮的操作,获取待检测的RGB皮肤图像;其中,所述RGB皮肤图像由具备RGB图像拍摄功能的设备拍摄得到;
从所述待检测的RGB皮肤图像中提取第一图像,根据色素的第一光谱响应曲线与所述具备RGB图像拍摄功能的设备的第二光谱响应曲线之间的对应关系,从所述第一图像的R通道、B通道和G通道中提取所述色素;根据提取的所述色素生成伪彩色图像;其中,所述第一图像用于表征所述RGB皮肤图像中的体反射分量;
所述显示屏,用于显示所述第一界面及所述伪彩色图像。
10.如权利要求9所述的电子设备,其特征在于,所述处理器,具体用于执行:
将所述待检测的RGB皮肤图像转换为第一Lab图像;
分别提取所述第一Lab图像的L通道、a通道和b通道中的体反射分量;
合并从所述第一Lab图像的L通道、a通道和b通道中提取的体反射分量,得到第二Lab图像;
将所述第二Lab图像转换为RGB图像,得到所述第一图像。
11.如权利要求10所述的电子设备,其特征在于,所述第一Lab图像的L通道中的体反射分量为所述第一Lab图像的L通道中的初始值与第一Lab图像的L通道中的表面反射分量的差值;所述第一Lab图像的a通道中的体反射分量为所述第一Lab图像的a通道中的初始值与第一Lab图像的a通道中的表面反射分量的差值;所述第一Lab图像的b通道中的体反射分量为所述第一Lab图像的b通道中的初始值与第一Lab图像的b通道中的表面反射分量的差值;
其中,所述第一Lab图像的L通道、a通道和b通道的表面反射分量是对所述第一Lab图像的所述L通道、所述a通道和所述b通道中的初始值进行滤波处理得到的。
12.如权利要求11所述的电子设备,其特征在于,所述第一Lab图像的L通道、a通道和b通道的表面反射分量是对所述第一Lab图像的所述L通道、所述a通道和所述b通道中的初始值进行滤波处理得到的,包括:
所述第一Lab图像的L通道、a通道和b通道的表面反射分量是对所述第一Lab图像的所述L通道、所述a通道和所述b通道中的初始值进行双边滤波处理得到的。
13.如权利要求9-12中任一项所述的电子设备,其特征在于,所述色素包括以下任一项:
血红素、黑色素、胡萝卜素、脂色素和胆色素。
14.一种计算机存储介质,其特征在于,所述计算机存储介质存储有程序指令,当所述程序指令在电子设备上运行时,使得所述电子设备执行如权利要求1至8任一所述的方法。
15.一种芯片,其特征在于,所述芯片与电子设备中的存储器耦合,控制所述电子设备执行如权利要求1至8任一所述的方法。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810776213 | 2018-07-16 | ||
CN2018107762131 | 2018-07-16 | ||
PCT/CN2018/106216 WO2020015142A1 (zh) | 2018-07-16 | 2018-09-18 | 一种色素检测方法及电子设备 |
CN201880072559.1A CN111343907B (zh) | 2018-07-16 | 2018-09-18 | 一种色素检测方法及电子设备 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880072559.1A Division CN111343907B (zh) | 2018-07-16 | 2018-09-18 | 一种色素检测方法及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112233064A CN112233064A (zh) | 2021-01-15 |
CN112233064B true CN112233064B (zh) | 2022-05-20 |
Family
ID=69163856
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880072559.1A Active CN111343907B (zh) | 2018-07-16 | 2018-09-18 | 一种色素检测方法及电子设备 |
CN202010962720.1A Active CN112233064B (zh) | 2018-07-16 | 2018-09-18 | 一种色素检测方法及电子设备 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201880072559.1A Active CN111343907B (zh) | 2018-07-16 | 2018-09-18 | 一种色素检测方法及电子设备 |
Country Status (6)
Country | Link |
---|---|
US (1) | US11847798B2 (zh) |
EP (1) | EP3808252B1 (zh) |
JP (1) | JP7130839B2 (zh) |
KR (1) | KR102548317B1 (zh) |
CN (2) | CN111343907B (zh) |
WO (1) | WO2020015142A1 (zh) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020015142A1 (zh) | 2018-07-16 | 2020-01-23 | 华为技术有限公司 | 一种色素检测方法及电子设备 |
CN113749614B (zh) * | 2020-06-05 | 2023-03-10 | 华为技术有限公司 | 皮肤检测方法和设备 |
CN112163920A (zh) * | 2020-08-18 | 2021-01-01 | 广州市美图现电子有限公司 | 测肤美妆系统的使用方法、装置、存储介质和计算机设备 |
CN114827442B (zh) * | 2021-01-29 | 2023-07-11 | 华为技术有限公司 | 生成图像的方法和电子设备 |
CN113688752B (zh) * | 2021-08-30 | 2024-02-02 | 厦门美图宜肤科技有限公司 | 人脸色素检测模型训练方法、装置、设备及存储介质 |
CN113888540B (zh) * | 2021-12-06 | 2022-03-18 | 深圳市海谱纳米光学科技有限公司 | 一种用于人脸皮肤成分图像的分离方法和系统 |
US12028659B2 (en) | 2022-07-25 | 2024-07-02 | Dell Products L.P. | Information handling system camera visual image color tuning based on sensed ambient light color |
CN117379033B (zh) * | 2023-12-13 | 2024-02-20 | 深圳市宗匠科技有限公司 | 皮肤色素检测方法、装置、计算机设备和存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105844242A (zh) * | 2016-03-23 | 2016-08-10 | 湖北知本信息科技有限公司 | 图像中的肤色检测方法 |
CN105933607A (zh) * | 2016-05-26 | 2016-09-07 | 维沃移动通信有限公司 | 一种移动终端的拍照效果调整方法及移动终端 |
CN106388781A (zh) * | 2016-09-29 | 2017-02-15 | 深圳可思美科技有限公司 | 一种皮肤肤色及其色素沉淀情况的检测方法 |
CN106846421A (zh) * | 2017-02-14 | 2017-06-13 | 深圳可思美科技有限公司 | 一种肤色检测方法及装置 |
Family Cites Families (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7630006B2 (en) * | 1997-10-09 | 2009-12-08 | Fotonation Ireland Limited | Detecting red eye filter and apparatus using meta-data |
US8026942B2 (en) * | 2004-10-29 | 2011-09-27 | Johnson & Johnson Consumer Companies, Inc. | Skin imaging system with probe |
CN101175537A (zh) * | 2005-05-13 | 2008-05-07 | 拜埃尔斯多尔夫股份公司 | 自粘性的皮肤贴片和用于美容皮肤护理的组合套件 |
JP4818704B2 (ja) * | 2005-12-15 | 2011-11-16 | ポーラ化成工業株式会社 | 画像の色調整方法 |
GB2429523B (en) * | 2005-12-23 | 2008-03-26 | Astron Clinica Ltd | Method and apparatus for detecting the presence of dermal melanin in epithelial tissue |
CN101523169A (zh) * | 2006-10-02 | 2009-09-02 | 强生消费者公司 | 用于使用L*a*b*色空间来分析皮肤的装置和方法 |
KR101442313B1 (ko) * | 2008-05-22 | 2014-09-19 | 휴렛-팩커드 디벨롭먼트 컴퍼니, 엘.피. | 카메라 센서 교정 |
FR2944898B1 (fr) | 2009-04-23 | 2018-03-16 | Lvmh Recherche | Procede et appareil de caracterisation des imperfections de la peau et procede d'appreciation de l'effet anti-vieillissement d'un produit cosmetique |
JP6001245B2 (ja) * | 2011-08-25 | 2016-10-05 | 株式会社 資生堂 | 皮膚評価装置、皮膚評価方法、及び皮膚評価プログラム |
US8861847B2 (en) * | 2012-12-21 | 2014-10-14 | Intel Corporation | System and method for adaptive skin tone detection |
EP2781191A1 (en) | 2013-03-19 | 2014-09-24 | Schnidar, Harald | Methods for assessing erythema |
WO2014165820A1 (en) | 2013-04-05 | 2014-10-09 | University Of Massachusetts | Device and method for imaging collagen structure in vivo |
US9101320B2 (en) * | 2013-04-09 | 2015-08-11 | Elc Management Llc | Skin diagnostic and image processing methods |
US9256963B2 (en) * | 2013-04-09 | 2016-02-09 | Elc Management Llc | Skin diagnostic and image processing systems, apparatus and articles |
US10182757B2 (en) | 2013-07-22 | 2019-01-22 | The Rockefeller University | System and method for optical detection of skin disease |
JP6189716B2 (ja) * | 2013-10-31 | 2017-08-30 | シャープ株式会社 | 測定装置 |
CN103690149B (zh) * | 2013-12-30 | 2016-08-17 | 惠州Tcl移动通信有限公司 | 通过面部拍照识别身体健康状况的移动终端及其实现方法 |
CN104978707A (zh) * | 2014-04-03 | 2015-10-14 | 陈鹏飞 | 基于轮廓线的图像变形技术 |
JP6003963B2 (ja) | 2014-11-07 | 2016-10-05 | カシオ計算機株式会社 | 診断装置並びに当該診断装置における画像処理方法及びそのプログラム |
JP6138745B2 (ja) | 2014-11-19 | 2017-05-31 | 株式会社 資生堂 | シミ評価装置、及びシミ評価プログラム |
KR20170100717A (ko) | 2016-02-25 | 2017-09-05 | 한국전자통신연구원 | 분광반사율 추정을 이용한 피부 분석 장치 및 방법 |
US10282868B2 (en) * | 2016-03-21 | 2019-05-07 | The Procter & Gamble Company | Method and system for generating accurate graphical chromophore maps |
CN106127709A (zh) * | 2016-06-24 | 2016-11-16 | 华东师范大学 | 一种低照度彩色眼底图像判断方法与增强方法 |
CN206132659U (zh) * | 2016-08-29 | 2017-04-26 | 北京农业智能装备技术研究中心 | 用于检测柑橘表皮缺陷的在线图像采集系统 |
US10750055B2 (en) * | 2016-10-07 | 2020-08-18 | Canon Kabushiki Kaisha | Image processing apparatus with color conversion for reduced consumption of color materials, image processing method, and storage medium |
CN107371013B (zh) | 2017-07-12 | 2019-03-08 | 天津大学 | 基于色相角和差通道的立体图像质量评价方法 |
CN107835402A (zh) | 2017-11-08 | 2018-03-23 | 维沃移动通信有限公司 | 一种图像处理方法、装置及移动终端 |
WO2020015142A1 (zh) | 2018-07-16 | 2020-01-23 | 华为技术有限公司 | 一种色素检测方法及电子设备 |
-
2018
- 2018-09-18 WO PCT/CN2018/106216 patent/WO2020015142A1/zh unknown
- 2018-09-18 JP JP2021502561A patent/JP7130839B2/ja active Active
- 2018-09-18 US US17/259,626 patent/US11847798B2/en active Active
- 2018-09-18 CN CN201880072559.1A patent/CN111343907B/zh active Active
- 2018-09-18 EP EP18927006.9A patent/EP3808252B1/en active Active
- 2018-09-18 KR KR1020217004153A patent/KR102548317B1/ko active IP Right Grant
- 2018-09-18 CN CN202010962720.1A patent/CN112233064B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105844242A (zh) * | 2016-03-23 | 2016-08-10 | 湖北知本信息科技有限公司 | 图像中的肤色检测方法 |
CN105933607A (zh) * | 2016-05-26 | 2016-09-07 | 维沃移动通信有限公司 | 一种移动终端的拍照效果调整方法及移动终端 |
CN106388781A (zh) * | 2016-09-29 | 2017-02-15 | 深圳可思美科技有限公司 | 一种皮肤肤色及其色素沉淀情况的检测方法 |
CN106846421A (zh) * | 2017-02-14 | 2017-06-13 | 深圳可思美科技有限公司 | 一种肤色检测方法及装置 |
Non-Patent Citations (2)
Title |
---|
基于亮度变换的彩色皮肤图像黑色素浓度分析;黄展鹏等;《现代计算机(专业版)》;20150815(第23期);全文 * |
基于彩色图像的皮肤色素浓度提取算法;徐舒畅等;《浙江大学学报(工学版)》;20110215(第02期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN111343907B (zh) | 2022-06-10 |
US11847798B2 (en) | 2023-12-19 |
JP7130839B2 (ja) | 2022-09-05 |
KR102548317B1 (ko) | 2023-06-26 |
EP3808252B1 (en) | 2022-06-01 |
KR20210030437A (ko) | 2021-03-17 |
CN111343907A (zh) | 2020-06-26 |
CN112233064A (zh) | 2021-01-15 |
EP3808252A4 (en) | 2021-08-25 |
WO2020015142A1 (zh) | 2020-01-23 |
EP3808252A1 (en) | 2021-04-21 |
US20210319589A1 (en) | 2021-10-14 |
JP2021529634A (ja) | 2021-11-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112233064B (zh) | 一种色素检测方法及电子设备 | |
CN109793498B (zh) | 一种皮肤检测方法及电子设备 | |
JP7067697B2 (ja) | 肌の検出方法及び電子デバイス | |
CN111543049B (zh) | 一种拍照方法及电子设备 | |
CN111566693B (zh) | 一种皱纹检测方法及电子设备 | |
CN111147667A (zh) | 一种熄屏控制方法及电子设备 | |
CN111417982B (zh) | 一种色斑检测方法及电子设备 | |
CN113467735A (zh) | 图像调整方法、电子设备及存储介质 | |
CN111557007B (zh) | 一种检测眼睛睁闭状态的方法及电子设备 | |
CN114241347A (zh) | 皮肤敏感度的显示方法、装置、电子设备及可读存储介质 | |
CN113509145A (zh) | 睡眠风险监测方法、电子设备及存储介质 | |
CN114079725B (zh) | 视频防抖方法、终端设备和计算机可读存储介质 | |
CN115657992A (zh) | 一种屏幕显示的方法、装置、设备及存储介质 | |
CN113971823A (zh) | 外表分析的方法和电子设备 | |
CN118155384A (zh) | 一种防护提示方法和电子设备 | |
CN113660424A (zh) | 图像拍摄方法及相关设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20210426 Address after: Unit 3401, unit a, building 6, Shenye Zhongcheng, No. 8089, Hongli West Road, Donghai community, Xiangmihu street, Futian District, Shenzhen, Guangdong 518040 Applicant after: Honor Device Co.,Ltd. Address before: 518129 Bantian HUAWEI headquarters office building, Longgang District, Guangdong, Shenzhen Applicant before: HUAWEI TECHNOLOGIES Co.,Ltd. |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant |