[프로젝트] AI 상품 데이터 추출구조화 파이프라인 (검증형) 스크래핑한 HTML, 업체 엑셀, PDF, 혼합 통화다국어처럼 그대로는 쓰기 힘든 데이터를 바로 활용 가능한 CSVJSON으로 변환한 작업입니다. [진행 과정] 1) 추출 휴리스틱과 LLM을 결합해 상품명브랜드가격통화카테고리재고 등 필드를 정규화 2) 검증 행밄 신뢰도 점수를 매기고, 불확실한 행은 사람 검수 대상으로 자동 표시 3) 저장 idempotent 방식이라 재실행해도 중복이 생기지 않음 4) 리포트 커버리지플래그 요약 QC 리포트를 자동 생성 [결과] 단순히 AI가 찍는 방식이 아니라 진짜 검증 규칙으로 '조용히 틀린 데이터'를 걸러내, 믿고 쓸 수 있는 데이터셋으로 납품합니다. Python 기반 크롤링ETL자동화로 반복 업무도 함께 줄입니다.