빅웨이브에이아이 기술블로그

빅웨이브에이아이 이원석 님의 리뷰입니다. LLM 모델인 GPT-4, PaLM, LLama 등은 범용적인 목적에 맞게, 매우 큰 모델 사이즈와 매우 방대한 양의 데이터로 사전 학습이 수행됨 일반적인 LLM의 경우 방대한 양의 데이터로 부터 매우 다양한 도메인 지식을 습득 But, 사전 학습 데이터에서 욕설, 편향적인 정보, 부정확한 정보를 담은 문서 등 적절치 못한 데이터를 다수 포함 데이터 클렌징 및 필터링 등 방대한 양의 데이터를 사람이 전부 처리하는 것은 한계가 존재 이에 따라, 모델이 부적절한 문장이나 단어를 선택하여 다음 문장을 생성하는 일이 빈번하게 발생 생성 모델 자체도 Next-token prediction 방식으로 학습 되기 때문에 최대한 확률적으로 높은 문장을 생성하는 것, 이로인한 환각..

안녕하세요! 빅웨이브에이아이 선임 연구원 이현상입니다. 지난 포스트에서는 차별 및 혐오 표현 탐지 솔루션에 대해서 소개드렸습니다. 이번에는 새로운 주제로 고객 등급을 과학적인 방법으로 분할하고 딥러닝 기술을 활용하여 고객 이탈을 방지할 수 있는 시스템에 대해서 소개드리겠습니다. 본 주제는 2020 AI Championship 위메프 부문 "고객 세부 등급화와 등급 변화 감지를 통한 맞춤 홍보 서비스 제공 AI"에서 2위를 수상했다는 점 미리 말씀드립니다. 2020 AI Championship 2020 AI Championship은 위메프, 네이버, 한국타이어 등 8개의 대기업이 다양한 인공지능 관련 주제를 가지고 경연하는 대회였습니다. 여타의 AI 경진대회와 다르게, 2020 AI Championship..