RAG Engine 개발을 위한 참고자료들

[YeonwooSung]

1. Advanced Rag Techniques

link

• 기본적인 RAG 구조와 응용 RAG 구조에 대한 전반적인 내용을 설명
• HyDE, Reranking, Hybrid Search, Auto-merging retriever, Query Transformation 등 다양한 개념 소개 및 설명
• llama-index 등의 연관 예제들 목록을 소개

[YeonwooSung]

2. A Guide on 12 Tuning Strategies for Production-Ready RAG Applications

link

• RAG를 ingestion stage와 inference stage로 나누어 각 스테이지 별 응용 기술에 대해 리뷰
• ingestion stage에서는 chunking, embedding, data cleaning, indexing algorithm 등에 대해 소개
• inference stage에서는 Query Transformation이나 HyDE, Reranker 등에 대해서 소개

전반적인 컨셉 및 느낌은 1번과 비슷

[YeonwooSung]

3. 12 RAG Pain Points and Proposed Solutions

link

• RAG 엔진을 구축할 때 흔히 겪는 12가지 pain point 들과 그들에 대한 주된 해결책들을 제시
• failure point가 아닌 pain point라고 부르는 이유는 모든 항목들이 다 해결책이 제시된 문제들이기 때문

Pain point 항목들

· Pain Point 1: Missing Content
· Pain Point 2: Missed the Top Ranked Documents
· Pain Point 3: Not in Context — Consolidation Strategy Limitations
· Pain Point 4: Not Extracted
· Pain Point 5: Wrong Format
· Pain Point 6: Incorrect Specificity
· Pain Point 7: Incomplete
· Pain Point 8: Data Ingestion Scalability
· Pain Point 9: Structured Data QA
· Pain Point 10: Data Extraction from Complex PDFs
· Pain Point 11: Fallback Model(s)
· Pain Point 12: LLM Security