トークン（Token）
トークン（Token）とは、LLM がテキストを処理する際の最小単位である。単語そのものではなく、単語の一部や記号、空白なども含まれ、モデルの語彙（ボキャブラリー）に基づいてテキストを分割した結果の断片を指す。
AI・DX・セキュリティ用語集
AI・DX・セキュリティに関する専門用語を図解つきでわかりやすく解説します
AI・DX・セキュリティに関する専門用語を図解つきでわかりやすく解説します
トークン（Token）とは、LLM がテキストを処理する際の最小単位である。単語そのものではなく、単語の一部や記号、空白なども含まれ、モデルの語彙（ボキャブラリー）に基づいてテキストを分割した結果の断片を指す。
エンティティとその関係性をグラフ構造で表現するデータモデル。RAGやAI検索の精度向上に活用される。
バイブコーディング（Vibe Coding）とは、開発者が自然言語で意図を伝え、AI がコードの生成・修正を担う開発スタイルの総称であり、2025 年の「Word of the Year」に選ばれた。
ハイブリッド検索とは、キーワードベースの全文検索（BM25 等）とベクトル検索（セマンティック検索）を組み合わせ、両者の長所を活かして検索精度を向上させる手法である。
84件 / 6/7
