무화과 : 무해한 화장품의 과몰입

OCR을 활용한 화장품 라벨지 인식 및 배합제한성분 확인 어플리케이션

화장품 화학 성분에 민감한 소비자들을 위해 화장품 원료에 대한 객관적인 정보를 쉽게 제공하고자 서비스를 기획하게 되었습니다. 유해 성분을 파악하기 위해 검색이 아닌, 이미지 인식으로 절차를 단순화 하여 편리한 성분 안내 서비스를 제공합니다.

프로젝트 개요

• 일정 : 2023-03-02 ~ 2023-07- 06 (약 14주)
• 인원 (총 3명)
  • Frontend 1
  • Backend 2
  • AI 1

주요 기능

• 화장품 라벨지 이미지 스캔 : 카메라 이미지 촬영 기능 및 내장된 이미지 사용 가능
• 이미지 글자 탐지 및 인식 : OCR 모델을 제작하여 이미지 내 글자 탐지 및 인식
• 화장품 전성분 및 배합제한성분 안내 : 탐지된 글자를 식약처에 등록된 성분명에 기반하여 관련 정보 제공

대표 기술

AI

FrontEnd

Data

기술 스택

시스템 아키텍처

AI 아키텍처

E-R Diagram

정규화 전(2023.06)

정규화 후(2025.09)

서비스 시나리오

이미지 촬영 및 첨부

• 갤러리 사진 선택/ 카메라 촬영 모드 제공

이미지 편집

• 원하는 크기대로 사진 편집

성분 분석 결과

• 편집된 이미지 확인
• 이미지에 분석된 전성분/배합제한성분 확인
• 배합제한성분 (적색)표시 및 배합한도 정보 제공

논문 작성 및 수상

• 한국스마트미디어학회 2023년 종합학술대회 논문 작성(공동 제1저자)
• 한국스마트미디어학회 학부생논문경진대회 우수논문상
• 전남대학교 소프트웨어중심대학사업단 산학협력프로젝트 성과발표회(캡스톤디자인) 은상

참고 자료

AI-Detection

• NAVER Clova: Craft https://github.com/clovaai/CRAFT-pytorch

AI-Recognition

• NAVER Clova Research: deep-text-recognition benchmark PDF