📝
FormaX Team2026年5月18日6 分
RAG テキストチャンク：オーバーラップ・JSONL・チューニング
ベクトル検索・RAG 向けに固定ウィンドウとオーバーラップで JSONL 出力。ブラウザ内完結。
RAGAIデータ処理
RAG におけるチャンクの役割
長文を検索可能な単位に分割し、質問時に関連部分だけをコンテキストに載せます。チャンク品質が回答精度を左右します。
FormaX RAG テキストチャンカー は文字数ベースの固定ウィンドウ＋オーバーラップ。本番ではトークン分割へ移行する前の検証に最適です。
JSONL
1 行 1 JSON。chunk_index と位置メタデータ付き。
ツールを開く（ブラウザ内処理）。