대규모 언어모델(LLM)의 환각현상을 줄이는 RAG(검색증강생성) 모델의 동작원리와 3가지 패러다임

정보 검색(Information Retrieval, IR)이란!? 지식 소스나 데이터 세트에서 관련 정보를 조회하고 추출하는 프로세스 예) 검색 엔진을 이용하여 인터넷에서 정보를 찾는 것 사용자가 쿼리를 입력하면 시스템은 사용자가 찾고 있는 정보를 포함할 가능성이 가장 높은 문서나 웹 페이지를 질의하여 응답 - 대규모 언어모델은 이러한 정보질의를 이용해 학습 데이터를 수집 및 학습에 적용 대규모 언어모델의 한계와 RAG의 의의 대규모 언어모델(Large Language Model, LLM)의 개념 사람들의 언어(자연어)를 학습하여 실제인간과 유사한 문장을 생성 하기 위한 언어모델 점차 규모가 커지며 초거대 AI로 진화 순차 데이터의 컨텍스트를 학습할 수 있는 신경망인 트랜스포머(Transformer)를 통해 비약적인 성능 발전 대규모 언어모델의 한계 환각이나 느린 지식의 업데이트, 답변의 투명성 부족 등과 같은 문제점 존재 지식의 시대에 뒤떨어짐, 특정 영역에 대한 지식 부족, 그리...

원문링크 : 대규모 언어모델(LLM)의 환각현상을 줄이는 RAG(검색증강생성) 모델의 동작원리와 3가지 패러다임