Hecho para agentes de voz que no pueden esperar 600ms

OpenAI: GPT-Realtime-Whisper

openai/gpt-realtime-whisper
activo stt 1 proveedor
Playground

Natively-streaming low-latency speech-to-text for live audio with tunable latency versus accuracy, streaming only.

AutorOpenAI
Idiomas1 idiomas
Estadoactivo

Proveedores

Distintos proveedores pueden alojar el mismo modelo. Elige un proveedor cuando necesites un backend fijo, o deja que el enrutamiento elija entre ellos.

ProveedorSlugPor horaLatenciaiEn TTS, la latencia se mide como el tiempo hasta el primer byte de audio. En STT, se mide como el tiempo hasta el primer token.ModosDisponibilidad
OpenAI 2 parámetros
openai
$1,02
—
Streaming

Idiomas admitidos

1 idiomas
English en

Funciones

Speech to text

Transcribes spoken audio to text.

speech_to_text
Streaming

Real-time transcription over the WebSocket Realtime API.

streaming
Multilingual transcription

Supports 99 languages.

multilingual_transcription

Código

Cliente
Modo
Lenguaje

STT en streaming con el ElevenLabs SDK

Transmite audio del micrófono o de un archivo a través de la ruta de AllModels compatible con ElevenLabs.

import { ElevenLabsClient } from "elevenlabs";

const client = new ElevenLabsClient({
  apiKey: process.env.ALLMODELS_API_KEY,
  baseUrl: "https://api.allmodels.io/el"
});

const connection = await client.speechToText.realtime.connect({
  modelId: "openai/gpt-realtime-whisper",
  languageCode: "en"
}, {
  queryParams: {
    provider: {
      "only": [
        "openai"
      ]
    }
  }
});

// Send audio frames to connection, then handle transcript events.