600msも待てない音声エージェントのために

Soniox: Soniox STT Realtime v5

soniox/stt-rt-v5
提供中 stt 1プロバイダー
Playground

Soniox real-time speech-to-text model for live audio with speaker separation, language identification, translation, and semantic endpointing.

作成者Soniox
言語multilingual
ステータス提供中

プロバイダー

同じモデルを複数のプロバイダーがホストしている場合があります。バックエンドを固定したい場合は1つのプロバイダーを選び、そうでなければルーティングに選択を任せられます。

プロバイダーSlug1時間あたりレイテンシiTTSのレイテンシは音声の最初のバイトが届くまでの時間、STTのレイテンシは最初のトークンが届くまでの時間で計測しています。モード稼働率
Soniox 10個のパラメーター
soniox
$0.12から
—
ストリーミング

対応言語

このモデルの確認済み言語リストはまだありません。

機能

Speech to text

Transcribes spoken audio to text.

speech_to_text
Streaming

Real-time streaming transcription over WebSocket.

streaming
Multilingual transcription

Supports 60+ languages.

multilingual_transcription
Speaker diarization

Identifies and separates multiple speakers.

speaker_diarization
Word-level timestamps

Returns word-level timestamps.

word_timestamps
Language identification

Automatically identifies the spoken language.

language_identification
Speech translation

Supports real-time / async speech translation.

translation
Semantic endpointing

Provides fast semantic end-of-turn detection.

endpointing

コード

クライアント
モード
言語

ElevenLabs SDKでのストリーミングSTT

マイクまたはファイルの音声を、ElevenLabs互換のAllModelsルート経由でストリーミングします。

import { ElevenLabsClient } from "elevenlabs";

const client = new ElevenLabsClient({
  apiKey: process.env.ALLMODELS_API_KEY,
  baseUrl: "https://api.allmodels.io/el"
});

const connection = await client.speechToText.realtime.connect({
  modelId: "soniox/stt-rt-v5",
  languageCode: "en"
}, {
  queryParams: {
    provider: {
      "only": [
        "soniox"
      ]
    }
  }
});

// Send audio frames to connection, then handle transcript events.