RAG에서 Chunk 를 retrieval 할때, 그 Chunk의 위와 아랫부분을 확장해서 같이 리턴하는 방법으로, 더 상세한 컨택스트를 리턴할 수 있다. 언뜻 보면 Parent/Child Chunking 기법과 유사하기는 하지만, 구현이 간단해 보이고, 문장을 중심으로 확장해서 컨택스트를 추출한다는 면에서 훨씬 효과가 있어보인다.
출처 https://www.youtube.com/watch?v=TRjq7t2Ms5I
'빅데이타 & 머신러닝 > 생성형 AI (ChatGPT etc)' 카테고리의 다른 글
| RAG 성능 튜닝 - Embedding fine tuning (1) | 2024.12.25 |
|---|---|
| LLM 애플리케이션 아키텍처 (1/2) (4) | 2024.03.19 |
| #19 ChatGPT에서 질문과 관련된 웹페이지 크롤링하기 (0) | 2024.02.21 |
| #18.LangSmith를 이용한 Langchain agent 내부 동작 구조 이해 (1) | 2024.02.03 |
| Langchain을 이용한 LLM 애플리케이션 구현 #17-ChatGPT 구글 검색 엔진과 연동하기 (1) | 2024.02.02 |