■ 본 기술은 반도체 검사장비를 포함하는 제조업 장비 운용 시 작업자와의 SLM(Small Language Model) 기반 인터랙션에 필요한 "작업자 상태 대응형 자율질의 지원 SLM 기술"에 관한 것임
■ "3D 패키징 후공정 혁신을 위한 AI융합 지능형 광학검사 제어 인터랙션 기술개발" 과제에서는 반도체 후공정 비전검사 장비의 운용 지식, 장비 제어시스템의 안전 및 에러 이벤트, 작업자 상태 정보를 결합하여 작업자에게 필요한 설명과 조치 절차를 SLM 기반으로 제공하는 지능형 인터랙션 기술에 관한 연구를 수행하고 있음
■ 사용자 매뉴얼, 에러코드, 안전 지침 등 도메인 지식을 벡터 DB로 구축하고, 장비 상태 및 이벤트와 연동하여 장비 운용 중 발생하는 질문과 문제 상황에 대해 현장 맞춤형 응답을 생성하는 것이 주요 기능임
■ 특히 장비 이해도 차이가 큰 제조 환경에서 작업자 숙련도에 따라 다른 상세 수준의 안내를 제공하는 숙련도 대응형 응답 기능이 핵심 특징임
■ 안전 경고 또는 에러코드 이벤트 발생 시 사용자가 직접 질문하지 않아도 SLM이 자율적으로 질의문을 생성하고 도메인 지식 기반의 처리 절차를 응답하는 자율질의 기능이 본 기술이전의 주요 포함 기능임
1) 기술이전의 목적
■ 반도체 비전검사 장비 운용 중 발생하는 안전 경고, 에러코드, 비정상 조작 등 다양한 이벤트 상황에서 작업자 숙련도와 상태를 반영하여 맞춤형 조치 정보를 제공하는 SLM 기반 인터랙션 요소기술 확보를 목적으로 함
■ 특히, 도메인 지식 벡터 DB 구축 모듈(DKB)과 자율질의 응답 SLM 모듈(AQS)의 두 핵심 모듈을 통해 장비 특화 지식 기반의 자율질의 응답 시스템을 구현하여 비전검사 장비 운용의 지속가능성, 안전성, 사용성, 유지보수 효율 향상에 기여하고자 함
2) 기술이전의 필요성
■ 제조업 인력의 고령화와 다문화 근로자의 증가로 장비 이해도 격차가 심화되고 있으며, 사용자 친화적 운용 지원 기술의 필요성이 증대
■ 기존 장비는 정적 매뉴얼 참조 방식에 의존하여 에러 발생 시 작업자가 수동으로 원인을 파악하고 대응 절차를 확인해야 하므로 장비 다운타임이 길어지는 문제가 상존
■ 코로나19와 같은 팬데믹, 자연재해 등 돌발적 변수에 의한 인력 공백에 대비해 장비 자체의 자율적 대응과 작업자 지원 기능 강화 필요성이 증대
■ 인더스트리 5.0의 핵심 가치인 인간 중심(human-centric) 제조가 강조됨에 따라 작업자와 장비가 상호작용하는 직관적 인터페이스 기술이 핵심 구성요소로 부상
■ 저숙련 또는 비전문 작업자도 숙련자 수준의 장비 운용이 가능하도록 지원하는 AI 기반 인터랙션 에이전트 기술은 고객 범위를 확장하는 핵심 전략으로 기능할 수 있음
■ PDF 형태의 사용자 매뉴얼, 표준작업지침(SOP), 에러코드 문서 등을 업로드하여 텍스트, 표 파싱 및 임베딩 기반 벡터 DB를 구축하고, 구축 진행률과 결과를 GUI에 실시간으로 표출하며, 생성된 인덱스 및 청크 캐시 파일을 별도 경로에 저장 관리하는 도메인 지식 벡터 DB 구축 기능을 제공
■ 사용자의 자연어 질의를 분석하여 구축된 벡터 DB에서 관련 문서를 검색하고, 문서에 명시된 정보를 출처 페이지와 함께 신속하게 응답하며, 응답 도중 사용자가 원할 시 중단할 수 있는 제어 기능을 포함하는 SLM 기반 질의응답 기능을 제공
■ 작업자 숙련도 정보(비숙련자/숙련자)를 반영하여 동일한 질의에 대해 다른 상세도의 응답을 생성함으로써, 초급 작업자에게는 단계별 확인 절차와 안전 유의사항을 상세히 제공하고 숙련 작업자에게는 원인 후보와 조치 명령을 간결하게 제시하는 숙련도 대응형 응답 기능을 보유
■ 제어시스템으로부터 안전 경고 또는 에러코드를 수신할 경우 사용자의 명시적 질문 없이 SLM이 자동으로 자율질의문을 생성하고, 생성된 질의문을 GUI에 표출한 후 도메인 지식 기반의 처리 절차를 신속하게 응답하는 자율질의 생성 및 응답 기능을 제공
A. 기술명 : 작업자 상태 대응형 자율 질의 지원 SLM 기술
● 완전 오프라인으로 동작하는 RAG 기반 Q&A 시스템임. 외부 API 없이 로컬 LLM과 FAISS 벡터 DB를 사용하므로 매뉴얼 내용이 외부로 유출되지 않음
● 작업자 숙련도(비숙련/숙련)에 따라 답변의 깊이와 형식이 자동으로 달리
● 장비에서 발생한 오류 코드(E-XXX)가 시스템에 입력되면 별도의 사용자 입력 없이 자동으로 질의를 생성하여 대응 절차를 즉시 응답함
A. 기술명 : 작업자 상태 대응형 자율 질의 지원 SLM 기술
● 작업자 상태기반 자율 질의생성 및 응답 프로그램 소스코드
● 기술문서(2250-2026-00795): SLM 기능 검증용 장비 샘플 매뉴얼
● 기술문서(2250-2026-00777): 요구사항정의서
● 기술문서(2250-2026-00833): 시험절차결과서
● 특허(2026-0054166): 상태 인지형 자율 인터랙션 에이전트 시스템 및 방법
● 프로그램(PG20260101): 작업자 상태기반 자율 질의생성 및 응답 프로그램
■ [반도체 후공정 비전검사 장비 운용 지원] 3D 패키징 후공정 비전검사 장비의 에러 대응, 안전 경고 처리, 장비 운용 가이드 제공 등 현장 맞춤형 AI 인터랙션 에이전트 서비스로의 적용 및 상용화 모듈 제품화
■ [스마트 제조 HMI 고도화] 반도체 장비 외에도 디스플레이, 2차전지, MEMS, 의료 및 물류 자동화 등 정밀 제조 분야 장비 전반에 걸친 AI 기반 사용자 인터랙션 HMI 기술로의 확장 및 범용 운용 인텔리전스 플랫폼 구축
■ [인더스트리 5.0 대응 작업자 안전 및 생산성 향상] 고령자, 저숙련자, 다국적 작업자의 장비 이해도(Literacy) 격차를 해소하여 장애 대응 시간 단축, 재발 방지, 장비 정상 운용 시간 증가를 통한 생산성 향상 및 산업재해 예방 효과창출
■ [장비 다운타임 절감을 통한 경제적 효과] AI 기반 인터랙션 에이전트를 통한 에러 발생 후 작업자의 빠른 정상화 지원으로 장비 다운타임을 대폭 감소시켜 생산성 증대 및 유지보수 비용 절감이라는 실질적 경제효과 창출
■ [글로벌 다국적 인력 대응 시장 확대] 언어, 문화, 숙련도가 다양한 글로벌 인력이 혼재하는 제조 환경에서 직관적 사용자 인터페이스에 대한 수요를 충족시켜 반도체 장비 수출 시 차별화 경쟁력 확보 및 신시장 창출