[디지털경제뉴스 박시현 기자] 스켈터랩스(대표 조원규)가 인공지능(AI) 기반 대화엔진 시장의 공략에 본격 나섰다.
스켈터랩스는 최근 AI 기반 대화엔진의 인텐트 분류에 대한 자체 성능 테스트 결과, 글로벌 기업에 비해 높은 정확도를 기록한 점을 들어 이 시장의 공략에 자신감을 드러냈다.
이 회사는 지난 6월 한국정보화진흥원이 인공지능 학습용으로 공개한 250만건 데이터 중 소상공인 및 공공민원 분야에 대한 총 10만 건의 한국어 대화 데이터를 활용해 테스트를 진행했다.
이 테스트는 총 600개의 인텐트(intent, 질문의 의도)를 대상으로 스켈터랩스의 대화엔진을 글로벌 기업 A, B사의 엔진과 비교했다.
그 결과, 스켈터랩스는 72%, 글로벌 A사와 B사는 모두 65%의 F1 스코어(F1 Score)를 기록했다. F1 스코어는 정밀도(precision)와 재현율(recall)을 모두 고려한 종합값으로 인공지능 기술의 분류 평가 수치 중 하나이며, F1 스코어가 높다는 뜻은 그만큼 질문의 의도를 정확히 파악한다는 의미이다.
스켈터랩스의 대화엔진은 규칙 기반(Rule-based) 의도 분류와 머신러닝 기반(Machine learning-based)의 의도 분류를 복합적으로 활용해 높은 정밀도와 재현율을 모두 구현할 수 있게 했다.
규칙 기반 의도 분류는 소량의 샘플 문장만으로도 의도 규칙을 자동으로 생성하며, 머신러닝 기반 의도 분류는 규칙만으로 처리하기 난해한 문장 변이 패턴 모델링을 가능하게 한다.
따라서 대화형 에이전트 설계자가 예측한 샘플 문장의 수준을 넘어서, 사람의 자연스럽고 변칙적인 대화에 대해서도 그 의도를 최대한 정확하게 파악해 낼 수 있게 된다.
스켈터랩스는 이 같은 하이브리드 모델을 바탕으로 타사 엔진 대비 높은 정확도를 기록할 수 있었다.
이번 기술 성능 테스트를 총괄한 조성진 스켈터랩스 CTO는 “인공지능 기술 개발의 경쟁력이 데이터 확보 여부에 많이 달려있는 만큼 이번 한국정보화진흥원이 공개한 250만 여개 인공지능 학습용 데이터는 스타트업들의 기술 개발 과정에 커다란 자산이 됐다”라며, “이번 테스트로 글로벌 톱 기업 대비 탁월한 인텐트 분류 정확도를 확인했고, 특히 600개 인텐트로 70%가 넘는 수치를 기록한 것은 스켈터랩스 대화엔진의 높은 실용적 가치를 의미하는 고무적인 결과다. 앞으로도 한국어 외의 다양한 언어에 적용했을 때도 유사한 수준의 정확도를 실현할 수 있도록 기술 수준을 높여갈 계획”이라고 말했다.
스켈터랩스는 현재 국내 대기업 및 스타트업들과의 파트너십으로 대화형 에이전트 구축 프로젝트를 진행하고 있다. 앞으로 대화엔진 제품에 대한 브랜딩 구축 및 영업 강화로 한국은 물론 해외 시장을 적극적으로 공략할 예정이다.
