メインコンテンツへスキップ
← 用語辞典に戻る
AI・機械学習

コンテキスト長(Context Length)(こんてきすとちょう)

AI が1回のやりとりでまとめて扱える文章の長さの上限。トークン数で表す。

概要

AI モデルが一度に扱える文章の長さの上限で、入力と出力を合わせたトークン数で表すのが一般的です。会話の履歴や読み込ませた資料も、この中に収まる必要があります。

ローカルで動かす時は、長いコンテキストを使うほど KV キャッシュのためのメモリが増え、GPU のメモリが足りなくなることがあります。モデルが対応している上限と、実際に設定して使う長さは別なので、Ollama などでは使う長さを設定で指定します。

関連製品カテゴリ

関連用語

← PCパーツ・AI用語辞典に戻る