KR102545144B1 - 딥러닝 알고리즘에 기반한 불량품 검사 솔루션 제공 장치 및 그 방법 - Google Patents
딥러닝 알고리즘에 기반한 불량품 검사 솔루션 제공 장치 및 그 방법 Download PDFInfo
- Publication number
- KR102545144B1 KR102545144B1 KR1020230005285A KR20230005285A KR102545144B1 KR 102545144 B1 KR102545144 B1 KR 102545144B1 KR 1020230005285 A KR1020230005285 A KR 1020230005285A KR 20230005285 A KR20230005285 A KR 20230005285A KR 102545144 B1 KR102545144 B1 KR 102545144B1
- Authority
- KR
- South Korea
- Prior art keywords
- client server
- artificial intelligence
- server
- image
- intelligence model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000004422 calculation algorithm Methods 0.000 title claims abstract description 52
- 238000007689 inspection Methods 0.000 title claims abstract description 45
- 238000000034 method Methods 0.000 title claims abstract description 43
- 230000002950 deficient Effects 0.000 title claims abstract description 39
- 238000013135 deep learning Methods 0.000 title claims abstract description 33
- 238000013473 artificial intelligence Methods 0.000 claims abstract description 70
- 238000004891 communication Methods 0.000 claims abstract description 43
- 230000007547 defect Effects 0.000 claims abstract description 19
- 238000013480 data collection Methods 0.000 claims abstract description 13
- 238000007781 pre-processing Methods 0.000 claims abstract description 9
- 230000004044 response Effects 0.000 claims abstract description 6
- 238000004519 manufacturing process Methods 0.000 claims description 12
- 238000001514 detection method Methods 0.000 claims description 7
- 230000003190 augmentative effect Effects 0.000 claims description 3
- 238000005259 measurement Methods 0.000 claims description 2
- 238000012360 testing method Methods 0.000 abstract description 4
- 238000002372 labelling Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000007635 classification algorithm Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 238000011179 visual inspection Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000000284 resting effect Effects 0.000 description 1
- 239000010454 slate Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
- G01N2021/8854—Grading and classifying of flaws
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
- G01N2021/8883—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges involving the calculation of gauges, generating models
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/8851—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges
- G01N2021/8887—Scan or image signal processing specially adapted therefor, e.g. for scan signal adjustment, for detecting different kinds of defects, for compensating for structures, markings, edges based on image processing techniques
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- Tourism & Hospitality (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computing Systems (AREA)
- Biochemistry (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Biophysics (AREA)
- Molecular Biology (AREA)
- Biomedical Technology (AREA)
- General Engineering & Computer Science (AREA)
- Mathematical Physics (AREA)
- Software Systems (AREA)
- Signal Processing (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Computational Linguistics (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Artificial Intelligence (AREA)
- Quality & Reliability (AREA)
- Economics (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Image Analysis (AREA)
Abstract
Description
도 2는 본 개시의 일 실시 예에 따른 마스터 서버 및 클라이언트 서버를 도시한 블록도이다.
도 3은 본 개시의 일 실시 예에 따른 불량품 검사 솔루션 제공 방법을 나타내는 흐름도이다.
도 4는 본 개시의 일 실시 예에 따른 딥러닝 알고리즘의 종류를 도시한 것이다.
도 5는 본 개시의 일 실시 예에 따른, 하드웨어를 포함하는 불량품 검사 솔루션 제공 방법을 나타내는 흐름도이다.
도 6a는 본 개시의 일 실시 예에 따른, 클라우드 서버를 도시한 블록도이다.
도 6b는 본 개시의 일 실시 예에 따른, 클라우드 서버의 데이터 베이스를 이용한 불량품 검사 솔루션 방법을 도시한 것이다.
도 7은 본 개시의 일 실시 예에 따른, 복수의 그룹으로 구성된 인공지능 모델을 도시한 것이다.
도 8은 본 개시의 일 실시 예에 따른, CCTV를 통한 생산 환경 모니터링을 도시한 것이다.
Claims (10)
- 적어도 하나의 클라이언트 서버와 통신을 수행하는 통신부; 및
상기 통신부를 통해 상기 적어도 하나의 클라이언트 서버로부터 데이터 수집을 요청하는 신호가 수신된 경우, 상기 적어도 하나의 클라이언트 서버로 검사 대상의 이미지 촬영을 요청하는 신호를 전송하고, 상기 이미지 촬영 요청에 대한 응답으로, 상기 통신부를 통해 상기 적어도 하나의 클라이언트 서버로부터 촬영된 검사 대상의 이미지가 수신된 경우, 상기 수신된 검사 대상 이미지에 대하여 지정된 방식에 따른 데이터 전처리를 수행하고, 상기 전처리된 이미지 데이터에 기반하여 불량 유형에 따른 딥러닝 알고리즘에 기반한 딥러닝 인공지능 모델을 생성하고, 상기 통신부를 통해 상기 생성된 인공지능 모델을 상기 적어도 하나의 클라이언트 서버에 제공하도록 설정되는 프로세서;를 포함하고,
상기 프로세서는, 상기 불량 유형에 기반하여 상기 클라이언트에 하드웨어를 제공하도록 더 설정되고,
상기 인공지능 모델은 Saas(Software as a Service)에 기반한 클라우드 서버를 통해 제공되고,
상기 프로세서는, 상기 클라우드 서버에 데이터베이스를 구축하도록 더 설정되고, 상기 데이터베이스에는 상기 적어도 하나의 클라이언트 서버에서 요청한 데이터가 복수의 기준 데이터들로 저장되고, 상기 복수의 기준 데이터들에 최적화된 인공지능 모델이 상기 복수의 기준 데이터들과 연계하여 저장되며,
상기 프로세서는, 신규 클라이언트 서버로부터 데이터 수집이 요청된 경우, 상기 신규 클라이언트 서버의 요청 데이터 및 상기 데이터베이스에 저장된 상기 복수의 기준 데이터들의 유사도를 계산하고, 상기 복수의 기준 데이터들 중 상기 계산된 유사도가 높은 기준 데이터에 최적화된 인공지능 모델을 상기 신규 클라이언트 서버에 제공하도록 더 설정된,
불량품 검사 솔루션 제공 장치. - 제1 항에 있어서,
상기 촬영된 이미지는 상기 클라이언트 서버의 클라이언트가 검사 중인 생산품의 이미지, 상기 클라이언트가 규칙 기반 알고리즘에 사용 중인 이미지, 및 증강된(augmented) 이미지를 포함하는,
불량품 검사 솔루션 제공 장치. - 제2 항에 있어서,
상기 지정된 방식은 지도 학습 방식 및 비지도 학습 방식을 포함하는,
불량품 검사 솔루션 제공 장치. - 삭제
- 삭제
- 삭제
- 삭제
- 제1 항에 있어서,
상기 프로세서에 의해 제공되는 인공지능 모델은, 제1 그룹 및 제2 그룹을 포함하고,
상기 제1 그룹 및 상기 제2 그룹은, 각각 지정된 개수의 인공지능 모델을 포함하고,
상기 제1 그룹의 인공지능 모델 중 기 설정된 기준을 기반으로 성능이 낮은 인공지능 모델은, 상기 클라이언트 서버에 의해 상기 제2 그룹으로 강등되고,
상기 제2 그룹의 인공지능 모델 중 상기 기 설정된 기준을 기반으로 성능이 높은 인공지능 모델은, 상기 클라이언트 서버에 의해 상기 제1 그룹으로 승격되는,
불량품 검사 솔루션 제공 장치. - 제1 항에 있어서,
상기 클라이언트 서버는, CCTV(closed circuit television)와 전기적으로 연결되고,
상기 프로세서는,
상기 CCTV에 의해 촬영된 영상에 기반하여 상기 클라이언트 서버의 생산 환경 내 작업자들에 대한 객체 감지, 행동 인지, 및 자세 측정 중 적어도 하나를 수행하도록 더 설정된,
불량품 검사 솔루션 제공 장치. - 적어도 하나의 클라이언트 서버와 통신을 수행하는 마스터 서버에 의해 수행되는 불량품 검사 솔루션 제공 방법에 있어서,
상기 적어도 하나의 클라이언트 서버로부터 데이터 수집이 요청된 경우, 상기 적어도 하나의 클라이언트 서버로 검사 대상의 이미지 촬영을 요청하는 단계;
상기 요청에 대한 응답으로, 상기 적어도 하나의 클라이언트 서버로부터 촬영된 검사 대상의 이미지가 수신된 경우, 상기 수신된 검사 대상 이미지에 대하여 지정된 방식에 따른 데이터 전처리를 수행하는 단계;
상기 전처리된 이미지의 데이터에 기반하여 불량 유형에 따른 딥러닝 알고리즘에 기반한 딥러닝 인공지능 모델을 생성하는 단계; 및
상기 생성된 인공지능 모델을 상기 적어도 하나의 클라이언트 서버에 제공하는 단계;를 포함하고,
상기 마스터 서버는, 상기 불량 유형에 기반하여 상기 클라이언트에 하드웨어를 제공하고,
상기 인공지능 모델은 Saas(Software as a Service)에 기반한 클라우드 서버를 통해 제공되고,
상기 마스터 서버는, 상기 클라우드 서버에 데이터베이스를 구축하고, 상기 데이터베이스에는 상기 적어도 하나의 클라이언트 서버에서 요청한 데이터가 복수의 기준 데이터들로 저장되고, 상기 복수의 기준 데이터들에 최적화된 인공지능 모델이 상기 복수의 기준 데이터들과 연계하여 저장되며,
상기 마스터 서버는, 신규 클라이언트 서버로부터 데이터 수집이 요청된 경우, 상기 신규 클라이언트 서버의 요청 데이터 및 상기 데이터베이스에 저장된 상기 복수의 기준 데이터들의 유사도를 계산하고, 상기 복수의 기준 데이터들 중 상기 계산된 유사도가 높은 기준 데이터에 최적화된 인공지능 모델을 상기 신규 클라이언트 서버에 제공하는,
불량품 검사 솔루션 제공 방법.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020230005285A KR102545144B1 (ko) | 2023-01-13 | 2023-01-13 | 딥러닝 알고리즘에 기반한 불량품 검사 솔루션 제공 장치 및 그 방법 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020230005285A KR102545144B1 (ko) | 2023-01-13 | 2023-01-13 | 딥러닝 알고리즘에 기반한 불량품 검사 솔루션 제공 장치 및 그 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR102545144B1 true KR102545144B1 (ko) | 2023-06-21 |
Family
ID=86989576
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020230005285A Active KR102545144B1 (ko) | 2023-01-13 | 2023-01-13 | 딥러닝 알고리즘에 기반한 불량품 검사 솔루션 제공 장치 및 그 방법 |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102545144B1 (ko) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20250012919A (ko) | 2023-07-18 | 2025-01-31 | 경남대학교 산학협력단 | 인공지능 기반 불량품 검사시스템 및 그 방법 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101237998B1 (ko) | 2011-07-28 | 2013-02-27 | 한국동서발전(주) | 볼트 및 볼트 홀 결함 검사 장치 |
JP2019087078A (ja) * | 2017-11-08 | 2019-06-06 | オムロン株式会社 | データ生成装置、データ生成方法及びデータ生成プログラム |
KR20190092975A (ko) * | 2018-01-31 | 2019-08-08 | 삼성전자주식회사 | 비전 검사 관리 방법 및 비전 검사 시스템 |
KR20210055560A (ko) * | 2019-11-07 | 2021-05-17 | 한국전자통신연구원 | 인공지능 서비스에 대한 성능 관리 장치 및 방법 |
KR20210157224A (ko) * | 2020-06-19 | 2021-12-28 | 주식회사 엘지에너지솔루션 | 결함 검출 장치 및 방법 |
JP2022088713A (ja) * | 2020-12-03 | 2022-06-15 | トヨタ自動車株式会社 | 物品の組立工程における検査システム |
JP2022107954A (ja) * | 2021-01-12 | 2022-07-25 | 株式会社コジマプラスチックス | 金型管理システム |
-
2023
- 2023-01-13 KR KR1020230005285A patent/KR102545144B1/ko active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101237998B1 (ko) | 2011-07-28 | 2013-02-27 | 한국동서발전(주) | 볼트 및 볼트 홀 결함 검사 장치 |
JP2019087078A (ja) * | 2017-11-08 | 2019-06-06 | オムロン株式会社 | データ生成装置、データ生成方法及びデータ生成プログラム |
KR20190092975A (ko) * | 2018-01-31 | 2019-08-08 | 삼성전자주식회사 | 비전 검사 관리 방법 및 비전 검사 시스템 |
KR20210055560A (ko) * | 2019-11-07 | 2021-05-17 | 한국전자통신연구원 | 인공지능 서비스에 대한 성능 관리 장치 및 방법 |
KR20210157224A (ko) * | 2020-06-19 | 2021-12-28 | 주식회사 엘지에너지솔루션 | 결함 검출 장치 및 방법 |
JP2022088713A (ja) * | 2020-12-03 | 2022-06-15 | トヨタ自動車株式会社 | 物品の組立工程における検査システム |
JP2022107954A (ja) * | 2021-01-12 | 2022-07-25 | 株式会社コジマプラスチックス | 金型管理システム |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20250012919A (ko) | 2023-07-18 | 2025-01-31 | 경남대학교 산학협력단 | 인공지능 기반 불량품 검사시스템 및 그 방법 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11341626B2 (en) | Method and apparatus for outputting information | |
US11276158B2 (en) | Method and apparatus for inspecting corrosion defect of ladle | |
CN112767366B (zh) | 基于深度学习的图像识别方法、装置、设备及存储介质 | |
US20210142467A1 (en) | Systems and methods of generating datasets for training neural networks | |
US11663711B1 (en) | Machine-learning framework for detecting defects or conditions of railcar systems | |
CN113642474A (zh) | 一种基于yolov5的危险区域人员监控方法 | |
CN115156093A (zh) | 电池外壳缺陷检测方法、系统及装置 | |
CN113516146A (zh) | 一种数据分类方法、计算机及可读存储介质 | |
KR102545144B1 (ko) | 딥러닝 알고리즘에 기반한 불량품 검사 솔루션 제공 장치 및 그 방법 | |
CN118521586B (zh) | 基于机器视觉的产品视觉检测装置及方法 | |
Wei et al. | Surface defects detection of cylindrical high-precision industrial parts based on deep learning algorithms: A review | |
CN108830833B (zh) | 工件识别项目的在线评估方法、服务器及终端 | |
CN115100110A (zh) | 一种偏光镜片缺陷检测方法、装置、设备及可读存储介质 | |
KR102569597B1 (ko) | 인공지능 모델 학습을 위한 데이터 파이프 라인 관리 방법 및 시스템 | |
Albanese et al. | Industrial visual inspection with tinyml for high-performance quality control | |
Ren et al. | A new small target defect detection algorithm for solar panels based on improved YOLOV7 | |
CN117911897A (zh) | 铁路桥梁检测方法、装置、电子设备及存储介质 | |
CN108073854A (zh) | 一种现场巡检的检测方法及装置 | |
CN115497152A (zh) | 基于图像识别的客户信息分析方法、装置、系统及介质 | |
CN117218053A (zh) | 一种图像的处理方法、装置以及存储介质 | |
Cao et al. | Deep discriminant learning-based asphalt road cracks detection via wireless camera network | |
KR20240056255A (ko) | 이미지 기반 이상 탐지 방법 및 장치 | |
CN116152169A (zh) | 基于改进YOLOv5s模型的印刷电路板缺陷检测方法 | |
Ahmed et al. | Ai-enhanced visual inspection systems for robust detection of product packaging defects in manufacturing environments | |
El Mazgualdi et al. | Artificial Intelligence for Product Quality Inspection in Manufacturing Industry-Online Detection of Edge Defects on Inorganic Solid Material |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PA0109 | Patent application |
Patent event code: PA01091R01D Comment text: Patent Application Patent event date: 20230113 |
|
PA0201 | Request for examination | ||
PA0302 | Request for accelerated examination |
Patent event date: 20230116 Patent event code: PA03022R01D Comment text: Request for Accelerated Examination Patent event date: 20230113 Patent event code: PA03021R01I Comment text: Patent Application |
|
PE0902 | Notice of grounds for rejection |
Comment text: Notification of reason for refusal Patent event date: 20230324 Patent event code: PE09021S01D |
|
E701 | Decision to grant or registration of patent right | ||
PE0701 | Decision of registration |
Patent event code: PE07011S01D Comment text: Decision to Grant Registration Patent event date: 20230608 |
|
GRNT | Written decision to grant | ||
PR0701 | Registration of establishment |
Comment text: Registration of Establishment Patent event date: 20230614 Patent event code: PR07011E01D |
|
PR1002 | Payment of registration fee |
Payment date: 20230614 End annual number: 3 Start annual number: 1 |
|
PG1601 | Publication of registration |