元OpenAIの研究者が設立したTypeSafe AIは、テキストを一切生成せずに判断処理のみを高速・格安で行う新カテゴリのAIモデル「Jev」を発表しました。従来の自己回帰型LLM(大規模言語モデル)が抱える確証性の低さや出力パースのエラー、レイテンシーの課題を解決し、決定論的なソフトウェアシステムと柔軟なAI知能を直接接続します。
何が発表されたのか
ChatGPTの初期研究およびRLHF(人間のフィードバックによる機械学習)論文の共著者であるDiego Almeida氏が設立したTypeSafe AIは、テキスト生成を行わず判断処理に特化したAIモデル「Jev」を一般公開しました。
Jevは、フロンティアLLMが持つ柔軟な推論力と、従来のソフトウェアが求める確定的な意思決定との間にある溝を埋めるために開発されたモデルです。研究段階の概念実証にとどまらず、APIおよびエコシステム全体での利用を見据えたサービスとして提示されています。
既存の生成AIのように1トークンずつ文字列を出力する「自己回帰(Autoregressive)生成」を完全に排除し、入力データと選択肢をまとめて1回の順伝播(Forward Pass)で処理する「System One Model」という新たな分類を提唱しています。
発表された機能・アップデートの全容
1. テキストを生成しない「System One Model」の概念
心理学における「二重過程理論」では、速く直感的な思考を「システム1(System 1)」、遅く論理的で労力を要する思考を「システム2(System 2)」と定義します。既存のLLMは思考過程を文字として書き出すためシステム2に相当しますが、Jevはシステム1のように即座に判定を下します。テキストを構成するトークンを順番に予測するのではなく、学習済みの決定関数 $f(x)$ として機能し、ソフトウェアがそのまま利用できる構造化データを直接返します。
2. Jevが提供する3つの決定出力タイプ
Jevは用途に応じて3つの柔軟な出力フォーマットをサポートしています。
- Choice(選択): 最大255個の定義済み選択肢から最も適切なものをスコアリングし、全体の確率分布を出力します。例えばカスタマーサポートの問い合わせ内容から「請求(billing)」「不正利用(fraud)」「技術支援(technical support)」などの担当部署を即座に割り当てます。
- Score(スコア判定): 「Terrible」から「Excellent」のような連続的な順序尺度を定義し、期待値を計算して小数値(例: 3.3)で出力します。
- Noul(真偽・確率判定): 事象の真偽(true/false)だけでなく、その事象が真である確率(例: 不正取引である確率 87%)を直接返します。
3. 自己回帰の排除による高速化と低価格化
従来のLLMでJSONなどのフォーマットを指定して回答を得る場合、モデルは「The customer was charged twice, so...」といった無駄な中間テキストを含めて何十トークンも生成する必要がありました。Jevはこの生成工程を丸ごと削除しました。コンテキストと選択肢を入力すると、一度の計算処理で完了します。結果として端対端(End-to-End)のレイテンシーは70ms〜500msに収まり、同等の判断タスクにおいて既存LLMより約194倍高速化され、トークン単価コストも約445倍削減されました。
4. RLCDによる確率キャリブレーションとAIエージェント統合
Jevは「RLCD(Reinforcement Learning for Calibrated Decisions)」と呼ばれる独自手法で訓練されています。これにより、モデルが出力する確率数値のキャリブレーション(補正)が極めて正確に保たれます。Jevが「信頼度90%」と出力した判断は、統計的に10回中9回正確であることを意味します。AIエージェントの制御レイヤー(Harness)にJevを組み込むことで、「信頼度90%以上なら即座に自動実行」「70%〜90%なら人間へ承認要求」「70%未満なら大型LLMへエスカレーション」といった決定論的な条件分岐コードを安全に記述できます。
5. オープンソースにおける再現モデルの登場
Jevの発表後、同様の「非自己回帰型決定モデル」を再現するオープンソースプロジェクトが相次いで登場しました。
- Laya(Convai Innovations発): ModernBERT-large(395M)をベースに決定用ヘッドを追加した約421Mパラメータのモデル。特定のベンチマークで高精度を実証しています。
- Von: JevのAPI仕様と完全互換を目指したオープンソース実装。Brier Score Lossを組み合わせた損失関数で学習し、高精度な確率キャリブレーションを実現しています。
性能・ベンチマーク
動画内で提示された各決定モデルのベンチマーク比較データは以下の通りです。Jevは追加のファインチューニングなしで高い汎用性と精度を示しています。
| モデル名 |
パラメータ数 / 構造 |
Typed-Decisions精度 |
JevBench Calibration |
処理レイテンシー(平均) |
出典 |
| Jev |
非公開(小規模エンコーダー推定) |
72.7%(ファインチューニングなし) |
76.3 |
約117ms(API経由) |
TypeSafe AI公式(動画内) |
| Laya (Base) |
421M (ModernBERT-largeベース) |
36.0% |
63.7 |
約16ms(ローカル推論) |
Convai Innovations(動画内) |
| Laya (Fine-tuned) |
421M (ModernBERT-largeベース) |
76.6% |
63.7 |
約16ms(ローカル推論) |
Convai Innovations(動画内) |
| Von |
395M (ModernBERTベース) |
未報告 |
75.7 |
約18ms(ローカル推論) |
Vonプロジェクト(動画内) |
| GLiNER2.5-Decide |
340M (DeBERTa-v3-largeベース) |
60.2%(Fast Decisions指標) |
未報告 |
高速(非自己回帰) |
Fastino Labs(動画内) |
競合サービスとの比較
「文章を生成せず判断を下す」アプローチは、AI業界全体に大きな刺激を与えています。
- OpenAI (Decisions API): OpenAI DevDayにて、Jevに対抗する「Decisions API」のプレビューを公開しました。OpenAIの広大なモデル群と統合された決定専用APIであり、フロンティアモデルの知能を直接制御に利用できる点が強みですが、従量課金コストやベンダーロックインの課題が残ります。
- Liquid AI (d1): 独自のアーキテクチャを持つLiquid AIは、多言語対応の決定モデル「d1」を発表しました。英語に限定されがちな初期のJevに対し、多言語での構造的判断処理が可能な点を優位性として打ち出しています。
- 既存の大型LLM(GPT-4o / Claude 3.5 Sonnet等): 複雑な長文推論やコード記述では依然として最先端LLMが優位ですが、単なる「分類」「ツール選択」「条件判定」に大型LLMを使うのはオーバースペックであり、コストと速度の面で決定モデルに圧倒的な差をつけられます。(※競合動向に関する背景知識は編集部注を含む)
料金・提供プラン
TypeSafe AIが提示するJevの料金体系は以下の通りです。
- 入力トークン費用: 100万トークンあたり 0.042ドル($0.042 / MTok)
- 出力トークン費用: 無料(計算量が極めて少ないため、従量課金の対象外)
- 無料枠・ローカル実行: 公式API以外に、LayaやVonといったオープンソース代替モデルを利用すれば、自身のローカルPC(Apple Siliconや単体GPU)上で完全無料で無制限に実行可能です。
日本から使う方法
- TypeSafe AI公式APIの利用: TypeSafe AIの公式サイトから開発者アカウントを登録し、APIキーを取得します。JevのAPIエンドポイントに対してコンテキストと選択肢(choices)配列を送信するだけで利用可能です。
- オープンソースモデルのローカル導入: Hugging Faceから「Convai Innovations Laya」や「Von」のモデル重みをダウンロードします。Python環境またはOllama風のランタイムを準備し、ローカル環境で動作させます。
- 日本語対応の注意点: Jev初期版は英語に最適化されているため、日本語の入力を直接扱う場合は、Layaのファインチューニング版や、Liquid AIの「d1」など多言語に対応した代替モデルの活用(編集部注)を推奨します。
誰にどう効くのか
エンジニア・アーキテクト
AIエージェントの開発において、LLMが出力する不確実なJSONのパースエラー処理(乞食プロンプトやRetry処理)から解放されます。70ms以下の確定的な確率応答を活用し、堅牢な条件分岐コードをスマートに構築できます。
企画・プロダクトマネージャー
リアルタイム性が求められるWebサービスやゲームNPCの制御、リアルタイム試着システムなどのレスポンス速度を劇的に向上できます。APIコストを従来の数百分の1に抑えられるため、収益構造の改善に直結します。
経営層・CTO
大型LLMのAPI運用コスト増大という「AIの逆鞘リスク」を回避できます。推論と決定のレイヤーを分離し、定型判断を超軽量な決定モデルに移管することで、全体インフラコストの大幅削減を実現します。
まとめ
Jevの登場は、単に新しいAIモデルが出たこと以上の意味を持ちます。すべての処理を「テキスト生成」で行わせる従来のLLMの限界を認め、「柔軟な推論(LLM)」と「決定論的処理(ソフトウェア)」を繋ぐ「中間レイヤーとしての決定モデル」の必要性を証明しました。AIシステムを開発する読者は、まずオープンソースのVonやLayaをローカル環境で試し、自社システムの判断タスクを移行できるか検証することをお勧めします。