OpenAIの音声スタックは、2026年7月時点では「一つの万能モデルを選ぶ」よりも、用途ごとにリアルタイム会話、リアルタイム翻訳、リアルタイム文字起こし、ファイル音声の文字起こし、TTSを切り分けて設計する方が実務的です。公式ガイドでも speech-to-speech、live translation、realtime transcription、speech-to-text、text-to-speech が別々の導線で案内されており、役割分担がかなり明確になっています。
OpenAIの新しい音声モデルで何が変わったのか
いちばん大きな変化は、Realtime系が“音声入力をそのまま低遅延で扱う基盤”として成熟したことです。Using realtime models の案内では gpt-realtime-2 が strongest realtime reasoning voice model と整理されており、単なる読み上げではなく、会話しながら判断し、必要に応じてツール連携する前提で使われています。
同時に、音声翻訳や文字起こしも別モデル・別セッションで最適化されています。Audio and speech guide では、live translation には dedicated realtime translation session、realtime transcription には gpt-realtime-whisper、text-to-speech には gpt-4o-mini-tts を推奨しています。つまり 2026 年の設計では、「Realtime Voice = 全部これでやる」ではなく、要件に合うセッションを分けるのが基本です。
文字起こしは『精度』より先に運用条件で選ぶ
文字起こしで最初に決めるべきなのは、低遅延が必要か、録音後の処理でよいかです。会議アシスタントや通話監視のように途中経過を出したいなら realtime transcription が向いています。一方、面談録音、サポート通話の事後解析、動画字幕の生成のようにファイル単位で処理できるなら、speech-to-text guide の transcription API を使う方が運用が安定します。
精度だけで選ぶと失敗しやすい理由は、句読点の扱い、話者切り替え、ノイズ環境、再送制御、途中欠損のリカバリなど、実運用で重要な要素が多いからです。日本語の会議なら「多少遅くてもまとまった文で返る方が編集しやすい」ケースもありますし、コンタクトセンターなら「途中の認識誤差があっても1秒未満で返る」方が価値になることもあります。
選び方の目安
リアルタイム字幕や介入支援なら gpt-realtime-whisper、録音ファイルの高精度処理や後続ワークフロー連携なら transcription API、要約まで含めて欲しいなら文字起こしと要約を別工程に分ける、という整理が扱いやすいです。公式にも summarization workload は retrieval や transcription そのものとは分けて設計した方がよい示唆があります。
音声翻訳は“単体モデル選び”ではなく3段構成で考える
音声翻訳は、1. 入力音声の認識、2. 言語変換、3. 出力音声の再生成、の3段で考えると失敗が減ります。OpenAIの guide でも live translation は dedicated realtime translation session として切り出されており、単なる ASR + TTS の寄せ集めではなく、会話体験を保つための専用経路として扱われています。
この3段構成で見ると、設計論点も整理しやすくなります。たとえば同時通訳に近い体験が欲しいなら、途中までの文脈で仮訳を返し、後から安定化させる仕組みが要ります。逆に動画翻訳なら、遅延は許容しても用語統一と自然な音声の方が重要です。つまり「翻訳モデルが優秀か」だけでなく、文脈確定のタイミング、固有名詞辞書、読み上げ速度制御まで設計対象になります。
Realtime Voice導入で設計し直すべきポイント
Realtime Voice を導入すると、プロンプト設計より先にセッション設計が必要になります。どのイベントで応答を開始するか、無音区間をどう扱うか、途中でツール呼び出しが必要になったら音声応答を止めるのか続けるのか、割り込みが入ったときに前の発話をキャンセルするのか、といった制御が品質を大きく左右します。
また、音声エージェントでは “正しい答え” と同じくらい “話し方の制御” が重要です。短く返す、確認してから返す、聞き取れないときは言い換えを求める、PIIを口にしない、録音中であることを明示するなど、会話の安全設計をセッション単位で埋め込む必要があります。gpt-realtime-2 のような強いモデルを使っても、ここを詰めないと実運用では不安定です。
gpt-4o-mini-ttsは“自然さ”より“制御しやすさ”で見る
gpt-4o-mini-tts は、最高級の感情表現だけを狙うモデルというより、アプリケーションに組み込みやすい controllable TTS として見るのが実務的です。読み上げ速度、抑揚、用途別のボイス選定、応答の長さ制御など、UIと一緒に調整しやすいことが価値になります。
たとえばFAQ読み上げ、IVR、学習アプリ、受付ボットでは、極端に人間らしい声よりも、聞き取りやすく、短文で、失敗時の再試行がしやすいことが重要です。gpt-4o-mini-tts はそうした用途で扱いやすく、Realtime翻訳や転記結果の読み上げなど、他の音声パイプラインと組み合わせやすいのが利点です。
導入前に確認したいFAQ
Q. まず選ぶべきはどのモデルですか。 A. リアルタイム会話なら gpt-realtime-2、リアルタイム文字起こしなら gpt-realtime-whisper、ファイル音声の文字起こしなら transcription API、読み上げなら gpt-4o-mini-tts から始めるのが分かりやすいです。翻訳は dedicated realtime translation session を起点に考えると設計しやすくなります。
Q. 一つのモデルで統一した方がよいですか。 A. 2026年7月時点では、統一より分業の方が安全です。ASR、translation、TTS で求める遅延や制御性が違うため、無理に一本化するとどこかで品質かコストが崩れやすくなります。
Q. PoCで最低限チェックすべき項目は何ですか。 A. レイテンシ、誤認識率、聞き返し率、ノイズ環境での安定性、固有名詞の扱い、途中割り込み、ログ保管方針、個人情報の発話制御です。音声はデモ映えしやすい一方で、運用設計を詰めないと本番で事故りやすい領域です。
Realtime Voice や音声翻訳・文字起こし基盤の設計を相談したい場合は、 お問い合わせ からご連絡ください。要件に合わせてモデル構成と運用フローを整理できます。