三言語の表記
日本語チャンク分割
EnglishChunking
中文文本分块

チャンク分割とは

チャンク分割は、RAGで文書を検索しやすくするために、長い文書を適切な大きさの断片に分ける処理です。分割が細かすぎると前後の文脈が失われ、大きすぎると無関係な情報が混ざって回答の精度が落ちます。製造業の手順書や仕様書では、章や表、手順の単位を保って分割することが重要です。

Definition (English)

Splitting long documents into appropriately sized pieces so they can be retrieved effectively in RAG. Chunks that are too small lose context while chunks that are too large add noise.

释义（中文）

为便于RAG检索而将长文档切分为适当大小片段的处理。切得过细会丢失上下文，过大则会混入无关信息。

関連する用語

この用語を引用・埋め込む

この釈義は CC BY 4.0（表示 4.0 国際）で提供しています。出典（このページへのリンク）を明記すれば、商用を含めて自由に複製・改変・再配布できます。

出典表記の例

株式会社サオス MFG-AI「製造業AI用語集：チャンク分割」https://mfg-ai.com/terms/chunking（CC BY 4.0）

HTMLで埋め込む

<blockquote cite="https://mfg-ai.com/terms/chunking">
  <p>チャンク分割は、RAGで文書を検索しやすくするために、長い文書を適切な大きさの断片に分ける処理です。</p>
  <footer>出典：<a href="https://mfg-ai.com/terms/chunking">株式会社サオス MFG-AI「製造業AI用語集：チャンク分割」</a>（<a href="https://creativecommons.org/licenses/by/4.0/deed.ja">CC BY 4.0</a>）</footer>
</blockquote>

用語集全体のデータは CSV / JSON でダウンロードできます。

この記事を書いた人

株式会社サオス

株式会社サオス 製造DX部

DELMIA Apriso を中核とした MES / 製造DX の導入・運用・人材育成と、製造業向けAIの調査・開発・教育を手がけるITコンサルティング企業。ISO 9001:2015 / ISO 27001:2022 認証取得。 日本・中国・米国で製造業のMES・データ基盤・AI導入を手がけた実務者が、欧米・中国の一次情報にあたって書いています。

運営者情報　編集方針　株式会社サオスのサイト