自然言語処理チャンキング読み方: チャンキングチャンキング とはRAGシステムにおいて、ドキュメントを適切なサイズの断片（チャンク）に分割する前処理技術。固定長分割・段落単位分割・意味的分割（Semantic Chunking）などの手法がある。チャンクサイズが大きすぎると検索精度が低下し、小さすぎると文脈が失われるトレードオフがある。関連用語RAG（検索拡張生成）自然言語処理埋め込みベクトル（Embedding）自然言語処理ベクトルデータベース自然言語処理意味検索開発チャンキングに関連するAIツールPerplexity AIリアルタイムウェブ検索とAIを組み合わせた次世代の検索エンジン。従来の検索と異なり、質問に対して出典付きの直接的な回答を...AlgoliaAI搭載のサイト内検索・レコメンドエンジン。超高速な検索体験とAIによるランキング最適化で、ECサイトやメディアサイトの...ConstructorEC特化のAI検索・商品発見プラットフォーム。機械学習で検索結果とレコメンドを自動最適化し、ECサイトの売上を向上。パー...PerplexityAI搭載の検索エンジン。ウェブ全体をリアルタイムで検索し、情報源付きの正確な回答を生成。学術論文・ニュース・Web全体を...自然言語処理の他の用語LLM（大規模言語モデル）自然言語処理（NLP）トランスフォーマーGPTBERTプロンプトエンジニアリング用語集一覧に戻る