🤖
AI・機械学習

2026年最新版!LangChainとPythonでRAGシステムを構築する手順

#RAG #LangChain #Python #LLM #ベクターストア #AI開発 #構築手順
AI

ヨミアゲAI編集部

AI音声・動画制作に関する情報をお届けします

RAG(Retrieval-Augmented Generation)は、大規模言語モデル(LLM)の幻覚(Hallucination)問題を解決し、最新かつ信頼性の高い情報を基に回答を生成する上で不可欠な技術です。2026年6月現在、LangChainとPythonは、このRAGシステムを効率的かつ柔軟に構築するための中心的なフレームワークとしてその地位を確立しています。LangChainは、ドキュメントの読み込みから埋め込み、検索、LLMへの連携まで、RAGに必要なあらゆるコンポーネントをモジュール化し、開発者が迅速にシステムを構築できるよう支援します。特に、LangChain v0.2.x以降のモジュール化されたアーキテクチャ(langchain-core, langchain-community, langchain)は、コンポーネントの選択肢と保守性をさらに向上させています。

RAG構築の主要コンポーネントと2026年の進化

RAGシステムは、主に以下のコンポーネントで構成されます。2026年現在、これらのコンポーネントは性能、コスト効率、そして統合の容易さにおいて大きく進化しています。

  1. ドキュメントローダーとテキストスプリッター:

    • ドキュメントローダー: PDF、Webページ、データベース、クラウドストレージなど、多様なデータソースから情報を取得します。LangChainのDocumentLoadersは、数百種類のリソースに対応しています。
    • テキストスプリッター: 取得したドキュメントをLLMが処理しやすいチャンク(断片)に分割します。2026年時点では、単なる固定長分割だけでなく、セマンティックチャンキングや再帰的チャンキング、Markdown構造を考慮した分割など、より高度な戦略が一般化しています。
  2. 埋め込みモデル (Embedding Model):

    • テキストチャンクを高次元のベクトル表現(埋め込み)に変換します。このベクトルがテキストの意味的な類似性を捉え、検索の精度を左右します。
    • 2026年現在、OpenAIのtext-embedding-4-large(架空、最新版を想定)やCohere Embed v4.0(架空、最新版を想定)のような高性能な商用モデルに加え、Hugging Faceで公開されているBGE-M3E5-Mistral-7Bの進化版など、コスト効率と性能を両立したオープンソースモデルが多数存在します。これらのモデルは、一般的に1024次元以上のベクトルを生成し、多言語対応も強化されています。
  3. ベクターストア (Vector Store):

    • 生成された埋め込みベクトルと元のテキストチャンクを保存し、高速な類似度検索を可能にするデータベースです。
    • スケーラビリティ、パフォーマンス、ハイブリッド検索(キーワード検索とベクトル検索の組み合わせ)が標準機能として提供されています。
ベクターストア タイプ 主な特徴(2026年時点) 無料枠/最小料金
Qdrant OSS/Cloud 高速な検索、フィルタリング、ハイブリッド検索。オンプレミスとクラウド(Qdrant Cloud)の両方で利用可能。Kubernetesとの親和性が高い。 Qdrant Cloud: 月額**$25**から(5GBストレージ、20万QPS)
Pinecone Cloud フルマネージド型で高いスケーラビリティと信頼性。リアルタイムインデックス更新に強み。 Freeプラン: 1インデックス、100kオブジェクトまで
Weaviate OSS/Cloud グラフベースの検索、セマンティック検索に特化。モジュールによる機能拡張が容易。 Weaviate Cloud: 月額**$30**から(100GBストレージ)
ChromaDB OSS 軽量で使いやすく、ローカル環境での開発や小規模なアプリケーションに適している。 無料(ローカル利用)
  1. LLM (Large Language Model):
    • 検索結果(コンテキスト)とユーザーの質問を基に、最終的な回答を生成します。
    • 2026年現在、OpenAIのgpt-4o-2026-06(架空、最新版を想定)やAnthropicのClaude 3.5 Sonnetなど、より大規模なコンテキストウィンドウ、高速な推論速度、コスト効率の改善が進んでいます。例えば、gpt-4o-2026-06のAPI料金は、入力1Mトークンあたり**$5.00**、出力1Mトークンあたり**$15.00**といった水準で提供されています。

LangChainとPythonによるRAG構築ステップバイステップ

ここでは、LangChainとPython 3.10以上を使用して、Qdrantをベクターストアとして利用するRAGシステムの基本的な構築手順を解説します。

1. 環境構築とライブラリの準備

必要なライブラリをインストールします。

pip install langchain langchain-openai langchain-community pypdf qdrant-client

APIキーを設定します。

import os
os.environ["OPENAI_API_KEY"] = "YOUR_OPENAI_API_KEY"
# Qdrant Cloudを使用する場合は、以下も設定
# os.environ["QDRANT_HOST"] = "YOUR_QDRANT_CLOUD_URL"
# os.environ["QDRANT_API_KEY"] = "YOUR_QDRANT_API_KEY"

2. ドキュメントの読み込みと分割

PDFファイルを読み込み、テキストチャンクに分割します。チャンクサイズは、LLMのコンテキストウィンドウと情報密度を考慮して調整します。

from langchain_community.document_loaders import PyPDFLoader
from langchain.text_splitter import RecursiveCharacterTextSplitter

# ドキュメントの読み込み
loader = PyPDFLoader("example_document.pdf")
documents = loader.load()

# テキストの分割
# chunk_size=1000文字、chunk_overlap=100文字で分割
text_splitter = RecursiveCharacterTextSplitter(chunk_size=1000, chunk_overlap=100)
chunks = text_splitter.split_documents(documents)

print(f"分割されたチャンク数: {len(chunks)}")
print(f"最初のチャンクの文字数: {len(chunks[0].page_content)}")

3. 埋め込みとベクターストアへのインデックス化

OpenAIの埋め込みモデルを使用してテキストチャンクをベクトル化し、Qdrantベクターストアに保存します。

from langchain_openai import OpenAIEmbeddings
from langchain_community.vectorstores import Qdrant
from qdrant_client import QdrantClient

# 埋め込みモデルの初期化
# 2026年時点ではより高性能なモデルが主流ですが、text-embedding-3-smallも依然として有効な選択肢です。
embeddings = OpenAIEmbeddings(model="text-embedding-3-small")

# Qdrantクライアントの初期化(ローカルメモリまたはQdrant Cloud)
# ローカルメモリでテストする場合
client = QdrantClient(":memory:")
# Qdrant Cloudを使用する場合
# client = QdrantClient(url=os.environ["QDRANT_HOST"], api_key=os.environ["QDRANT_API_KEY"])

# ドキュメントをQdrantにインデックス化
qdrant = Qdrant.from_documents(
    chunks,
    embeddings,
    client=client,
    collection_name="my_rag_collection",
)

print("ドキュメントがQdrantに正常にインデックス化されました。")

💡 ポイント: QdrantClient(":memory:") は開発やテストに便利ですが、本番環境では永続的なストレージ(ファイルシステム、Docker、Qdrant Cloudなど)を使用してください。

4. RetrieverとRAGチェーンの構築

ベクターストアから関連ドキュメントを検索するRetrieverを定義し、LLMと組み合わせてRAGチェーンを構築します。LangChain Expression Language (LCEL) を使用することで、モジュール式のチェーンを簡潔に記述できます。

from langchain_openai import ChatOpenAI
from langchain_core.prompts import ChatPromptTemplate
from langchain_core.runnables import RunnablePassthrough
from langchain_core.output_parsers import StrOutputParser

# Retrieverの定義
# 最も関連性の高い上位5つのドキュメントを検索 (k=5)
retriever = qdrant.as_retriever(search_kwargs={"k": 5})

# LLMの初期化
llm = ChatOpenAI(model="gpt-4o-2026-06", temperature=0.1) # 2026年時点の最新版を想定

# プロンプトテンプレートの定義
template = """以下のコンテキストのみを使用して質問に答えてください。
回答は簡潔かつ正確に、日本語で記述してください。

コンテキスト:
{context}

質問: {question}
"""
prompt = ChatPromptTemplate.from_template(template)

# RAGチェーンの構築 (LCELを使用)
rag_chain = (
    {"context": retriever, "question": RunnablePassthrough()}
    | prompt
    | llm
    | StrOutputParser()
)

# RAGチェーンの実行例
question = "このドキュメントの主要なテーマは何ですか?"
response = rag_chain.invoke(question)
print(f"質問: {question}")
print(f"回答: {response}")

⚠️ 注意: search_kwargs={"k": 5}k の値は、Retrieverが取得するドキュメントの数を指定します。この値はRAGの精度とパフォーマンスに大きく影響するため、適切な値を見つけるために実験が必要です。

5. RAGシステムの評価とデプロイ

RAGシステムを構築した後は、その性能を評価し、実際に利用可能な形にデプロイすることが重要です。

  • 評価: RAGシステムの品質を客観的に評価するためには、RAGASのような専用の評価フレームワークが有効です。忠実度(Faithfulness)、関連性(Relevance)、コンテキストのリコール(Context Recall)、コンテキストの精度(Context Precision)などの指標を用いて、システムの強みと弱みを特定します。
  • デプロイ: 構築したRAGチェーンは、LangServeを利用して簡単にAPIとして公開できます。または、FastAPIやFlaskなどのWebフレームワークと統合し、RESTful APIとしてデプロイすることも可能です。これにより、他のアプリケーションからRAG機能を利用できるようになります。

最適化と今後の展望

2026年におけるRAGシステムは、さらなる最適化と進化を続けています。

  • コスト最適化: 埋め込みモデルやLLMの選択、ベクターストアのプラン選定により、運用コストを大幅に削減できます。例えば、オープンソースの埋め込みモデルとオンプレミスまたは軽量なクラウドベクターストアを組み合わせることで、月額**$100以下**で小規模なRAGシステムを運用することも可能です。
  • パフォーマンス向上: キャッシング、非同期処理、Retrieverの最適化(再ランキング、ハイブリッド検索、マルチステージ検索)により、回答生成速度と精度を向上させます。
  • Agentic RAG: 単なる検索と生成を超え、LLMが複数のツール(データベース、外部API、計算ツールなど)と連携し、複雑なタスクを自律的に解決する「Agentic RAG」が主流になりつつあります。LangChainのAgent機能は、このAgentic RAG構築を強力にサポートします。
  • マルチモーダルRAG: テキスト情報だけでなく、画像、音声、動画などのマルチモーダルデータをコンテキストとして利用するRAGも進化しており、より豊かな情報源に基づく回答生成が可能になっています。

LangChainとPythonは、これらの最先端技術を取り込みながら、RAGシステムの開発を加速させるための強力な基盤を提供し続けるでしょう。

AI音声でナレーションを作ってみませんか?

ヨミアゲAIを試す(無料)