LangChain RAG実装におけるデータ読み込みとチャンク分割の要点
1. 外部データの取得とRAGの役割
LLMの学習データに含まれない独自の外部知識を活用するためには、検索拡張生成(RAG)が不可欠です。RAGのプロセスでは、外部から情報を取得し、それをプロンプトに組み込んで回答生成を行います。この仕組みの中核をなすのがドキュメントの読み込みと分割処理です。
2. Document Loadersによるデータ取り込み
LangChainは、 ...
6月6日 21:22 投稿