AssemblyAI : Universal-3.5 Pro Realtime

Name: Universal-3.5 Pro Realtime
Author: AssemblyAI

assemblyai/universal-3-5-pro-realtime

actif stt 1 fournisseur

Playground

AssemblyAI's most accurate realtime model (u3-rt-pro) with keyterm prompting, disfluency control, code-switching and realtime diarization.

AuteurAssemblyAI

Languesmultilingual

Statutactif

Démarrage rapide

Universal-3.5 Pro Realtime

Créez une clé API

Inscrivez-vous sur AllModels, créez une clé API et définissez-la dans ALLMODELS_API_KEY.

Créer une clé API

Envoyez une requête

Choisissez un SDK, un mode de requête et un langage. Le modèle et la route fournisseur sont déjà renseignés.

STT en streaming avec l’ElevenLabs SDK

Diffuse l’audio du micro ou d’un fichier via la route AllModels compatible ElevenLabs.

import { ElevenLabsClient } from "elevenlabs";

const client = new ElevenLabsClient({
  apiKey: process.env.ALLMODELS_API_KEY,
  baseUrl: "https://api.allmodels.io/el"
});

const connection = await client.speechToText.realtime.connect({
  modelId: "assemblyai/universal-3-5-pro-realtime",
  languageCode: "en"
}, {
  queryParams: {
    provider: {
      "only": [
        "assemblyai"
      ]
    }
  }
});

// Send audio frames to connection, then handle transcript events.

Transmettez les paramètres du fournisseur

Transmettez les préférences provider via les options de requête du SDK compatible lorsque vous voulez fixer une route sur un fournisseur.

{
  queryParams: {
    provider: {
      only: ["assemblyai"]
    }
  }
}

Fournisseurs

Plusieurs fournisseurs peuvent héberger le même modèle. Choisissez-en un lorsque vous avez besoin d’un backend fixe, ou laissez le routage choisir parmi eux.

FournisseurSlugPar heureLatenceiModesDisponibilité

AssemblyAI 12 paramètres

assemblyai

$0,45

—

Streaming

AssemblyAI

12 paramètres fournisseur documentés pour cette route.

Tarifs

ModeLanguePar heure

Streaming Toutes $0,45

+ Speaker Diarization (Streaming) Toutes $0,12

+ Medical Mode Toutes $0,15

Paramètres

domain body · unknown · facultatif

Correspond au paramètre AllModels « domain ».

encoding body · unknown · facultatif

Correspond au paramètre AllModels « response_format ».

inactivity_timeout body · unknown · facultatif

Correspond au paramètre AllModels « inactivity_timeout ».

keyterms_prompt body · unknown · facultatif

Correspond au paramètre AllModels « keyterms_prompt ».

max_speakers body · unknown · facultatif

Correspond au paramètre AllModels « max_speakers ».

max_turn_silence body · unknown · facultatif

Correspond au paramètre AllModels « max_turn_silence ».

min_turn_silence body · unknown · facultatif

Correspond au paramètre AllModels « min_turn_silence ».

prompt body · unknown · facultatif

Correspond au paramètre AllModels « prompt ».

sample_rate body · unknown · facultatif

Correspond au paramètre AllModels « sample_rate ».

speaker_labels body · unknown · facultatif

Correspond au paramètre AllModels « diarization ».

speech_model body · unknown · facultatif

Correspond au paramètre AllModels « model ».

vad_threshold body · unknown · facultatif

Correspond au paramètre AllModels « vad_threshold ».

Langues prises en charge

Aucune liste de langues vérifiée pour ce modèle pour le moment.

Fonctionnalités

Speech to text

Transcribes spoken audio to text.

speech_to_text

Streaming

Real-time streaming transcription over WebSocket.

streaming

Multilingual transcription

Multilingual code-switching.

multilingual_transcription

Speaker diarization

Identifies and labels multiple speakers.

speaker_diarization

Word-level timestamps

Returns word-level timestamps.

word_timestamps

Code

STT en streaming avec l’ElevenLabs SDK

Diffuse l’audio du micro ou d’un fichier via la route AllModels compatible ElevenLabs.

import { ElevenLabsClient } from "elevenlabs";

const client = new ElevenLabsClient({
  apiKey: process.env.ALLMODELS_API_KEY,
  baseUrl: "https://api.allmodels.io/el"
});

const connection = await client.speechToText.realtime.connect({
  modelId: "assemblyai/universal-3-5-pro-realtime",
  languageCode: "en"
}, {
  queryParams: {
    provider: {
      "only": [
        "assemblyai"
      ]
    }
  }
});

// Send audio frames to connection, then handle transcript events.