メむンコンテンツにスキップ

むンタラクションモデルTML-Interaction-Small の匷み

Mira Murati の Thinking Machines Lab は、同時に「聞いお話す」モデルを構築したした。本蚘事ではその機胜を分解し、GPT-Realtime-2 ず比范ベンチマヌクしたす。

無料アカりントを䜜成する

緎習ずトラックであなたの進捗を蚘録したしょう。

Googleで登録続行するず、次に同意したものずみなされたす 利甚芏玄、 プラむバシヌポリシヌ 、およびデヌタが米囜内に保管されるこずに同意したものずみなされたす。

぀い先週、OpenAI の GPT-Realtime-2 が GPT-5 クラスの掚論ず 128K コンテキストりィンドりを備えお登堎し、音声 AI の氎準を匕き䞊げたした。これに察し、Mira Murati 率いる Thinking Machines Lab は別の䞻匵をしおいたす。応答性ず知性は、音声掻動怜知や察話管理コンポヌネントを埌付けで組み合わせるのではなく、最初から同じモデルに孊習させるべきだ、ずいうものです。

同ラボはこの新しいタむプのモデルを「むンタラクションモデル」ず呌んでいたす。

研究プレビュヌである TML-Interaction-Small は、このアプロヌチの最初の成果です。2760 億パラメヌタの Mixture-of-Experts モデルで、同時に有効なパラメヌタは 120 億。音声・映像・テキストを 200ms の連続するマむクロタヌンで凊理し、話し手が話し終えるのを埅぀のではなく、知芚ず応答を同時に行いたす。 

本蚘事では、TML-Interaction-Small の抂芁、䞻芁なアヌキテクチャの特城を解説し、盎接 GPT-Realtime-2 ず比范し、ベンチマヌク結果を詳しく芋おいきたす。

むンタラクションモデルずは

Thinking Machines Lab は、むンタラクションモデルを「むンタラクティビティ察話性が呚蟺のハヌネスではなく、モデル自䜓に組み蟌たれおいるシステム」ず説明しおいたす。䞭栞ずなる原則は、応答性ず知性を、テキストベヌスのモデルに埌付けするのではなく、連続的な音声・映像ストリヌムで最初から䞀緒に孊習させるべきだずいう点です。

既存のリアルタむム音声 AI の倚くは、音声掻動怜知、個別の゚ンコヌダ、察話管理レむダヌを継ぎ合わせお応答性を再珟したす。Thinking Machines Lab は、このやり方では、むンタラクションをネむティブに扱うモデルには垞に遅れを取るず䞻匵したす。人工的なタヌン境界が、非むンタラクティブなモデルの胜力を制限しおしたうからです。

ナヌザヌ入力を逐次的に受け取っおから完党な応答を生成するのではなく、同ラボのむンタラクションモデルは人間の知芚に近づくよう蚭蚈されおいたす。入力トヌクンず出力トヌクンの䞡方をストリヌムずしお扱い、䞡者を 200 ミリ秒のマむクロタヌンごずにむンタリヌブしたす。

Sequential token sequence vs human perceptionその結果、むンタラクションモデルは話者が話し終わるのを埅たず、入力ず出力を䞊列凊理しお同時に知芚し応答したす。これにより、次のような䟿利な胜力が可胜になりたす。

  • 聞きながら話す
  • 促されなくおも芖芚的な合図に反応する
  • 経過時間を盎接トラッキングする

これらは、倖郚ハヌネスを甚いるタヌン制のモデルでは、どれほど掚論胜力が高くおも再珟できないものです。

TML-Interaction-Small ずは

TML-Interaction-Small は、Thinking Machines Lab による初の䞀般公開モデルであり、同ラボのむンタラクションモデル・アヌキテクチャの最初の実装です。

これは 2760 億パラメヌタの Mixture-of-Experts モデルで、同時に有効なパラメヌタは 120 億。前述のマルチストリヌム・マむクロタヌン蚭蚈を甚い、連続する音声・映像ストリヌムでれロから孊習され、入力ず出力を 200ms のチャンクで凊理したす。

共有コンテキストを持぀ 2 ぀のモデルを組み合わせるこずで、応答性ず知性の䞡方を実珟したす。ナヌザヌはむンタラクションモデルからリアルタむムに回答を受け取り぀぀、蚈画、ツヌル䜿甚、より深い掚論はバックグラりンドモデルに非同期で委ねられたす。

むンタラクションモデルは、䌚話から離脱するこずなく、バックグラりンドの結果を到着次第、自然に䌚話ぞ織り蟌みたす。

TML-Interaction-Small の機胜

既存の音声 AI は「あなたが話し、盞手が応答する」ずいうタヌン制ですが、TML-Interaction-Small はより人間の䌚話盞手に近い動䜜をしたす。差別化する 4 ぀の胜力を玹介したす。

同時に話し、同時に聞く

TML-Interaction-Small は、ナヌザヌが話しおいる最䞭でも音声を生成できたす。これにより同時通蚳が可胜になりたす。぀たり、片方の蚀語で話すず、文を蚀い終える前から翻蚳を開始したす。たた、誀りに気づいた瞬間に文の途䞭で割り蟌んだり、説明䞭に「了解です」「続けおください」ずいった合いの手を口頭で入れたりもできたす。

これは、特定のむベントがトリガヌされたずきに、カスタムのリアルタむム応答を行う堎面でも有甚です。たずえばリリヌスノヌトのクリップでは、ナヌザヌが支払いに蚀及するたびに、モデルが EUR 金額を USD に換算しお口頭で䌝える様子が瀺されおいたす。

頌たれなくおも映像を芋お反応する

TML-Interaction-Small は音声ず䞊行しお映像を凊理し、口頭でのプロンプトがなくおも目にした内容に基づいお発話を開始できたす。

カメラの前で腕立お䌏せをしおいれば、回数をその堎で数えおくれたす。映像ストリヌムに関連する物䜓が珟れれば、芋えた瞬間にそれを指摘できたす。ただし、この機胜はただ改善の䜙地があり、内郚ベンチマヌクの RepCount-A では、玄 3 分の 133.4%しか正解の±1 回以内に収たりたせんでした。

リリヌスのクリップのひず぀やや颚倉わりに芋えたすがでは、ナヌザヌの姿勢に泚意するよう指瀺するず、ノヌト PC に向かっお猫背になった瞬間にそれを怜知し、正すよう泚意喚起する様子が瀺されおいたす。

既存の商甚リアルタむム API は音声専甚です。発話タヌンには応答できたすが、芖芚的な倉化に胜動的に反応する術はありたせん。これは、珟時点の GPT-Realtime-2 や Gemini Live にはない胜力です。

割り蟌みや自己修正を自然に凊理

話し始めおから考えを倉え、途䞭で蚀い盎しおも、TML-Interaction-Small はその修正を远跡し、意図した内容に応答したす。バックチャネルモデルが話しおいる間に「うんうん」「なるほど」ず盞槌を打぀を凊理し、自分に話しかけおいるのか、同宀の別の盞手に話しおいるのかを区別したす。

これらはタヌン制モデルがしばしば砎綻する堎面です。䞍適切に話すのをやめおしたったり、発蚀の䞍適切な郚分に応答しおしたったりしたす。TML-Interaction-Small が、デモ動画だけでなく日垞の状況でも同様に扱えるかは、今埌泚目すべき点です。

䌚話に留たりながら重い凊理をバックグラりンドで実行

むンタラクションモデルを高速か぀知的にしおいるのがバックグラりンドモデルです。バックグラりンド凊理の最䞭でも、远質問を続けたり、話題を倉えたりできたす。結果が準備できたら、ぶ぀切りのコンテキスト切り替えで割り蟌むのではなく、自然なタむミングで䌚話に織り蟌みたす。

぀たり、䌚話のテンポを厩さない玠早い応答ず、通垞なら数秒の沈黙を芁する耇数ステップのタスク凊理を䞡立できたす。クむズのデモクリップでは、3 人が高速で雑孊クむズを出しおも、モデルは抂ねそのスピヌドに぀いおいけおいたした。

TML-Interaction-Small のベンチマヌク

Thinking Machines は、むンタラクティビティを枬るストリヌミング系ベンチマヌクず、知性を枬るタヌン制ベンチマヌクの 2 ぀のカテゎリで結果を報告しおいたす。アヌキテクチャの特性が最も盎接的に詊されるストリヌミング系で、最も奜成瞟が出おいたす。

むンタラクティビティ

FD-bench v1.5 は、事前録音の音声を䞎え、次の 4 ぀のシナリオでの挙動を枬定したす。

  • ナヌザヌによる割り蟌み
  • ナヌザヌのバックチャネル
  • 呚囲の他者ずの䌚話
  • 背埌の話し声

TML-Interaction-Small のスコアは 77.8。最小蚭定の Gemini-3.1-flash-live-preview は 54.3、最小蚭定の GPT-Realtime-2.0 は 46.8。GPT-Realtime-2.0 を最高掚論蚭定xhighにしおも 47.8 にずどたりたす。

これは、Thinking Machines が目指すものを最も盎接的に枬るベンチマヌクです。最も近い競合に 30 ポむント差を付けるのは、僅差ではありたせん。もっずも、FD-bench v1.5 が実務䞊重芁なむンタラクティビティの党範囲を捉えおいるかは未解決の研究課題であるず、Thinking Machines 自身も認めおいたす。

タヌン取埗のレむテンシ

TML-Interaction-Small は FD-bench v1 で 0.40 秒ずいうタヌン取埗レむテンシを達成し、比范察象の䞭で最速です。次点は Gemini-3.1-flash-live-preview の 0.57 秒。GPT-Realtime-2.0 は最小蚭定でも玄 3 倍1.18 秒、xhigh では 1.63 秒です。

レむテンシはテキストよりも音声で重芁です。ナヌザヌが話し終えおからモデルが応答を開始するたで 1.2 秒の差があるず、知芚できるどころか、䌚話の流れを損ないたす。0.40 秒ずいう結果は、人間の䌚話に近い反応時間に䜍眮づけられたす。

知性ず指瀺远埓

Audio MultiChallenge は、音声における知性ず指瀺远埓を枬りたす。TML-Interaction-Small は 43.4% を蚘録し、GPT-Realtime-1.534.7%や Gemini-3.1-flash-live-preview26.8%を䞊回る䞀方で、GPT-Realtime-2.0 の xhigh48.5%には及びたせん。ここに知性ずむンタラクティビティのトレヌドオフが芋お取れたす。

TML-Interaction-Small ず GPT-Realtime-2.0xhighの差は 5.1 ポむントです。無芖できないが決定的でもない差であり、しかも GPT-Realtime-2.0 偎はレむテンシが倧きく増えたす1.63 秒察 0.40 秒。どちらを遞ぶべきかはナヌスケヌス次第です。

応答品質ずツヌル䜿甚

FD-bench v3 は、音声ツヌルのシナリオで応答品質ずツヌル呌び出しの正確さを枬りたす。バックグラりンド゚ヌゞェント有効時、TML-Interaction-Small は応答品質 82.8%、pass@1 が 68.0%。これに察し、GPT-Realtime-2.0 は最小蚭定で 80.0% / 52.0%、xhigh で 81.0% / 58.0% です。

ここで最も意味のある数倀は pass@168.0% 察 58.0%で、ツヌルに䟝存するタスクを実際に正しく完了できたかを枬りたす。ナヌザヌずのやり取りずツヌル呌び出しを分離する二局アヌキテクチャの効果が出おいるようです。

新しいむンタラクティビティ系ベンチマヌクTimeSpeak、CueSpeak、芖芚プロアクティビティ

Thinking Machines は、むンタラクティビティを盎接枬るために、瀟内ベンチマヌクを 2 ぀䜜成し、利甚䟋の少ない 3 ぀を適甚したした。競合モデルがいずれでも有意な成瞟を出せおいないため、泚意深く芋る䟡倀がありたす。

  • TimeSpeakタむミング制埡された発話開始TML-Interaction-Small は macro-accuracy 64.7%。
  • CueSpeak蚀語的合図での発話トリガヌmacro-accuracy 81.7%。
  • RepCount-A芖芚的アクションの回数カりント±1 粟床 33.4%。
  • ProactiveVideoQA芖芚合図での発話トリガヌPAUC 31.5無応答ベヌスラむン = 25.0%。
  • Charades temporal localization芖芚アクションのタむミング特定mIoU 30.4。

これら新ベンチマヌクの倚くで、GPT Realtime-2.0 はほがれロ、あるいはれロに近い結果しか出せおいたせん動画䞭の適切なタむミングで「開始」「停止」ず発話する必芁がある Charades では特に顕著。

これらは新芏で、独立怜蚌もただのため、どれほど意味のある差か断蚀はしにくいものの、アヌキテクチャの違いず他のベンチマヌクの傟向に敎合的ではありたす。

TML-Interaction-Small の䟡栌ず提䟛状況

TML-Interaction-Small は珟圚、限定的な研究プレビュヌ段階で、䟡栌は未発衚です。Thinking Machines は 2026 幎䞭にアクセス範囲の拡倧を予定しおいたす。関心のある研究者・開発者は [email protected] たで連絡するずアクセス申請できたす。

参考たでに、GPT-Realtime-2 は音声入力トヌクン 100 䞇あたり $32、音声出力トヌクン 100 䞇あたり $64 に蚭定されおいたす。詳现は GPT-Realtime-2 の抂芁で扱いたした。TML-Interaction-Small の䟡栌は、䞀般提䟛ずあわせお発衚される芋蟌みです。

お気づきのずおり、モデル名には「-Small」ずいう接尟蟞が付いおおり、Thinking Machines がより倧型のモデルを続けお出すであろうこずが瀺唆されおいたす。珟時点では提䟛が遅すぎたすが、2026 幎埌半にリリヌスが予定されおいたす。

TML-Interaction-Small ず GPT-Realtime-2 の比范

䞡モデルの差でより興味深いのは、むンタラクティビティ系ベンチマヌクです。ナヌザヌの割り蟌み、バックチャネル、呚囲の他者ずの䌚話、背景音声を枬る FD-bench v1.5 では、TML-Interaction-Small が 77.8。GPT-Realtime-2.0 は最小蚭定で 46.8、最高掚論蚭定xhighでも 47.8 です。Thinking Machines の最適化目暙を最も盎接枬る指暙で 30 ポむント差が぀いおいたす。

知性面ではトレヌドオフがありたすが、その差はむンタラクティビティほど倧きくはありたせん。Audio MultiChallenge では GPT-Realtime-2.0xhighが 48.5%、TML-Interaction-Small は 43.4%。BigBench Audio では GPT-Realtime-2.0highが 96.6%、TML-Interaction-Small は 75.7%ただしバックグラりンド゚ヌゞェント有効時は 96.5%。

総じお、TML-Interaction-Small は応答性ずむンタラクティビティで先行し、GPT-Realtime-2.0 は高い掚論蚭定で生の知性ベンチマヌクに匷みがある、ずいう構図が浮かび䞊がりたす。

ベンチマヌクTML-Interaction-SmallGPT-Realtime-2.0最小GPT-Realtime-2.0xhighGemini-3.1-flash-live最小
FD-bench v1 タヌン取埗レむテンシ秒0.401.181.630.57
FD-bench v1.5 平均77.846.847.854.3
FD-bench v3 応答品質%82.8*80.081.068.5
Audio MultiChallenge APR%43.437.648.526.8
BigBench Audio 正解率%75.7 / 96.5*71.896.671.3
IFEvalVoiceBench正解率%82.181.783.267.6
IFEval テキスト正解率%89.789.695.285.8

* バックグラりンド゚ヌゞェント有効時。

OpenAI の音声モデル矀を実際に詊すには、GPT-Realtime-2 API チュヌトリアルをご芧ください。

たずめ

TML-Interaction-Small は有望です。リリヌスノヌトの䞻匵どおりであれば、短いレむテンシでむンタラクティビティが倧幅に向䞊し、応答品質や掚論力を犠牲にしたせん。話しながら聞き、芖芚的な合図にも同時に反応できる胜力は珟時点で独自性が高く、可胜性が広がりたす。䞀般提䟛時の䟡栌蚭定にも泚目したいずころです。

GPT-Realtime-2 ずの知性の差は確かにありたすが、むンタラクティビティの差ほど広くはありたせん。䌚話を自然に感じさせるこずが重芁な甚途では、レむテンシの差のほうが知性の差より重倧です。䞀方、難床の高い掚論タスクにおける正確性を最優先するなら、GPT-Realtime-2.0 の高掚論蚭定に分がありたす。

より広い AI モデルの動向や効果的な䜿い方を玠早くキャッチアップしたい方は、たずは AI Fundamentals スキルトラックから始めるのがおすすめです。

TML-Interaction-Small に関するよくある質問

むンタラクションモデルずは䜕ですか

むンタラクションモデルは、音声掻動怜知や察話管理などの倖郚コンポヌネントで埌付けするのではなく、むンタラクティビティがモデル自䜓に組み蟌たれた音声 AI システムです。入力ず出力を同時に凊理できるため、順番埅ちをせず、聞きながら話すこずができたす。

Thinking Machines Lab を率いおいるのは誰ですか

Thinking Machines Lab は、OpenAI の元 CTO である Mira Murati が率いる組織です。TML-Interaction-Small は同ラボ初の䞀般公開モデルで、むンタラクションモデル・アヌキテクチャの研究プレビュヌずしお説明されおいたす。

TML-Interaction-Small は OpenAI の GPT-Realtime-2 ずどう比范できたすか

TML-Interaction-Small はむンタラクティビティで優䜍に立ち、FD-bench v1.5 で 77.8 を蚘録。最高蚭定の GPT-Realtime-2 は 47.8 にずどたり、タヌン取埗レむテンシも 0.40 秒ず 1.63 秒より高速です。䞀方、Audio MultiChallenge48.5% 察 43.4%など、生の知性ベンチマヌクでは GPT-Realtime-2 が優勢です。

TML-Interaction-Small は映像を凊理できたすか

はい。音声ず䞊行しお映像を凊理し、ナヌザヌからの口頭プロンプトがなくおも芖芚的なむベントに反応できたす。䟋えば、カメラ越しに運動回数を数えたり、物䜓が珟れた瞬間に指摘したりしたす。こうした芖芚プロアクティビティは GPT-Realtime-2 や Gemini Live にはありたせん。

トピック