[LangChain] 문서 로딩과 전처리 가이드

Document Loaders · Text Splitters · Cleaning & Normalization (LangChain)RAG 파이프라인의 핵심은 “좋은 문서 입력”입니다. 어떤 소스에서 어떻게 로드하고, 어떻게 잘게 나눠(청킹) 저장하느냐가 검색 품질을 좌우합니다. 이 글에서는 LangChain에서 자주 쓰는 Document Loader와 Text Splitter, 그리고 Cleaning/Normalization 팁을 실전 코드와 함께 정리합니다.본 글 예제는 LangChain 최신 구조를 기준으로 작성했습니다.로더: langchain_community.document_loadersGoogle Drive: langchain_google_community스플리터: langchain_text_sp..
RAG 2025. 8. 16. 22:08
1