AI
2026年版AIゲートウェイ9選:Bifrost、Portkey、LiteLLMほかを徹底比較
2026/10/15
AIゲートウェイとは何か
AIゲートウェイは、アプリケーションとモデルプロバイダーの間に置かれるコントロールレイヤーだ。複数のモデルに対して単一のAPIエンドポイントを提供し、ルーティング・リトライ・フェイルオーバー・キャッシュ・予算管理・ログ収集を一元化する。MarkTechPostは2026年向けの本番運用に適したAIゲートウェイ9製品をランキング形式で紹介している。
2026年はこの市場が大きく動いた年でもある。Palo Alto Networksが5月29日にPortkeyの買収を完了し、MintlifyがHeliconeを買収してメンテナンスモードに移行。LiteLLMは3月にPyPIサプライチェーン侵害を生き延びた。ゲートウェイ選定はもはや機能リスクだけでなく、ベンダーリスクやセキュリティリスクも伴うと同記事は指摘している。
ランキング評価軸
記事では以下6つの基準を重視してランキングを構成したと説明されている。
- パフォーマンスの根拠:公開済みのオーバーヘッド数値と測定方法
- カバレッジ:1つのOpenAI互換APIで扱えるプロバイダー・モデル数
- ガバナンス:仮想キー・予算管理・RBAC・監査ログ・ガードレール
- デプロイ方式:自己ホスト・VPC・エアギャップ・マネージドの対応状況
- コストモデル:マークアップ・プラットフォーム料金・無料枠の制限
- ベンダー・サプライチェーンリスク:ライセンス・所有権変更・セキュリティ履歴
9製品ランキング詳細
1位:Bifrost(Maxim AI)
Goで書かれたオープンソースのAIゲートウェイ。Apache 2.0ライセンスで提供され、GitHub Stars数は8,700超。23以上のプロバイダーをOpenAI互換APIで束ねる。
最大の特長は自己ホスト型ゲートウェイ中で最も強力な公開パフォーマンス数値だとされている。README上では、t3.xlarge環境で5,000 RPSの負荷時に11マイクロ秒の追加レイテンシが報告されている。Maxim自身によるLiteLLMとの比較ベンチマークでは、500 RPSにおけるP99レイテンシがBifrostの1.68秒に対しLiteLLMは90.72秒と報告されているが、これはベンダー自身による数値であり独立検証が必要な点に注意したい。
機能面では、自動フォールバック・加重ロードバランシング・セマンティックキャッシュ・階層型予算管理・MCPゲートウェイ対応・PrometheusメトリクスおよびOpenTelemetryトレーシングなどが挙げられている。高スループットかつVPC内またはエアギャップ環境での自己ホストが必須なチームに向いているとされる。
2位:Portkey
MITライセンス、GitHub Stars 13,000超。1,600以上のモデルへのルーティングと1ミリ秒未満のレイテンシ、122KBのフットプリントを謳う。Gateway 2.0プレリリースではエンタープライズゲートウェイをオープンソースに統合する動きが見られる。Palo Alto Networksによる買収後はPrisma AIRSへの統合が進む見込みだ。ガードレールカタログが充実しており、入出力の検証・MCP Gatewayによる中央認証とアクセス制御・ツールコールログなどを備える。ホスト版の有料プランは月額49ドルからと報告されている。
3位:LiteLLM
最も広く採用されているオープンソースLLMゲートウェイで、GitHub Stars数は53,800超、100以上のプロバイダーに対応。Python SDKとプロキシサーバーの形で提供される。自社ベンチマークでは1,000 RPSでP95レイテンシ8ミリ秒と報告されている。チャット・埋め込み・画像・音声・バッチ・リランク・MCP・A2Aなどのエンドポイントを網羅し、エコシステムの深さが最大の強みだ。ただし3月のサプライチェーン侵害を踏まえ、リリースのピン留めと検証が強く推奨されている。
4位:Kong AI Gateway
KongのAPIゲートウェイをAIトラフィックに拡張したもの。LLM・MCP・エージェント間(A2A)トラフィックを一つのプラットフォームで管理する。GartnerのAPIマネジメント分野で7年連続リーダーに選出されているとKongのサイトは述べている。PII無害化・セマンティックプロンプトガード・トークンクォータ・A2Aテレメトリなどの機能を持つ。KongをAPIマネジメント基盤としてすでに採用しているエンタープライズに適している。
5位:TrueFoundry
1,600以上のモデルにアクセスできるエンタープライズ向けゲートウェイ。Gartner Peer InsightsのAIゲートウェイカテゴリでレビュー数最多で、210件の評価から4.8の評価を得ていると報告されている。VPC・オンプレミス・エアギャップ・マルチクラウド環境へのデプロイに対応し、SOC 2・HIPAA・GDPRコンプライアンスを備える。月間最初の3万リクエストは無料(最大3シート)。
6位:Cloudflare AI Gateway
Cloudflareのエッジネットワーク上で動作する管理型ゲートウェイ。1行のコードで導入可能で、アナリティクス・キャッシュ・レート制限などのコア機能は全プランで無料とされている。Llama Guard 3 8Bを使ったガードレール機能も提供されており、Workers AIの推論として課金される。Cloudflare Workers上で開発するチームに最適とされる。
7位:Vercel AI Gateway
Vercel以外のインフラからも呼び出せる管理型ゲートウェイ。トークンへのマークアップもプラットフォーム手数料もなく、BYOKでも同様と説明されている。テキスト・画像・動画・音声・リアルタイム・埋め込みなど多様なモダリティに対応。TypeScriptおよびNext.jsを使うチームで、管理型かつゼロマークアップを求める場合に向いているとされる。
8位:OpenRouter
主要ラボとオープンモデルプロバイダーへのルーティングを提供するホスト型API。推論マークアップなしでプロバイダー価格をそのまま転送する。スループット重視の:nitroと価格重視の:floorというルーティングバリアントを持ち、デフォルトではプロンプトや補完はログに記録されないとされる。クレジット購入前は1日50リクエストの無料モデルが利用可能。プロトタイピングやモデル比較に適している。
9位:Orq.ai Router
20以上のプロバイダーにわたる400以上のモデルにアクセスできる管理型ゲートウェイ。ルーティングを評価・モニタリング・予算管理と一体化したプラットフォームが特徴で、EUデータレジデンシーとEU AI Act対応を訴求している。SOC 2およびGDPR対応も備える。ゲートウェイ・評価・ガバナンスを一つのベンダーから調達したいEuropean向けとされる。
用途別の選び方
記事は以下のような指針を示している。
- コンプライアンス上の自己ホスト必須:Bifrost、Portkey、LiteLLM、TrueFoundry
- 高RPSでのレイテンシが最優先:まずBifrostを試し、自社トラフィックで検証する
- ガードレール・PII制御が必要:Portkey、Kong、TrueFoundry
- Kong・Cloudflare・Vercelをすでに利用中:そのプラットフォームのゲートウェイを優先
- 多様なモデルへの素早いアクセスが目的:OpenRouterまたはVercel
また、どの製品を選んでもハッシュチェックを使ってゲートウェイのバージョンをピン留めすることを強く推奨している。LiteLLMのインシデントが示すように、ゲートウェイは保有するすべてのプロバイダーキーを保持する存在だからだ。さらに「各ベンダーのベンチマーク数値はあくまで主張として扱い、自社ワークロードで必ず検証すること」と記事は締めくくっている。
出典: 9 Best AI Gateways in 2026: Bifrost, Portkey, LiteLLM, Kong and 5 More Ranked