複数の言葉を同時に出して AI を速くする工夫
30 秒で読む(ふつうに言うと)
Intel は、推論フレームワーク「OpenVINO GenAI 2026.4」において、複数トークンを同時に予測する手法(Multi-Token Prediction)を導入する手順を解説した。従来のローカル言語モデルでは 1 トークンずつ処理を繰り返していたが、投機的デコーディングなどの技術を活用することで推論速度を向上させている。
なにが起きた
すず
パソコンで動かす AI が、もっと速くお返事できるようになるの?
しおり
うん。言葉を 1 つずつではなく、一度にいくつも予想して出す仕組みの使い方が紹介されたよ
たとえると
すず
どういうこと?
しおり
文字を 1 文字ずつキーボードで打っていたのを、よく使う単語をまとめてポンと入力できるようにした感じだね
なぜ大事
すず
なにが便利になるの?
しおり
手元のパソコンで AI に文章を作ってもらうときの、待ち時間を減らせるよ
くわしく
しおり
インテルの発表(出典 5)。原文では『Multi-Token Prediction』と書かれているよ
近い話