AssemblyAI : Universal-Streaming Multilingual

Name: Universal-Streaming Multilingual
Author: AssemblyAI

assemblyai/universal-streaming-multilingual

actif stt 1 fournisseur

Playground

Realtime speech-to-text across 6 languages in one unified streaming model.

AuteurAssemblyAI

Langues6 langues

Statutactif

Démarrage rapide

Universal-Streaming Multilingual

Créez une clé API

Inscrivez-vous sur AllModels, créez une clé API et définissez-la dans ALLMODELS_API_KEY.

Créer une clé API

Envoyez une requête

Choisissez un SDK, un mode de requête et un langage. Le modèle et la route fournisseur sont déjà renseignés.

STT en streaming avec l’ElevenLabs SDK

Diffuse l’audio du micro ou d’un fichier via la route AllModels compatible ElevenLabs.

import { ElevenLabsClient } from "elevenlabs";

const client = new ElevenLabsClient({
  apiKey: process.env.ALLMODELS_API_KEY,
  baseUrl: "https://api.allmodels.io/el"
});

const connection = await client.speechToText.realtime.connect({
  modelId: "assemblyai/universal-streaming-multilingual",
  languageCode: "en"
}, {
  queryParams: {
    provider: {
      "only": [
        "assemblyai"
      ]
    }
  }
});

// Send audio frames to connection, then handle transcript events.

Transmettez les paramètres du fournisseur

Transmettez les préférences provider via les options de requête du SDK compatible lorsque vous voulez fixer une route sur un fournisseur.

{
  queryParams: {
    provider: {
      only: ["assemblyai"]
    }
  }
}

Fournisseurs

Plusieurs fournisseurs peuvent héberger le même modèle. Choisissez-en un lorsque vous avez besoin d’un backend fixe, ou laissez le routage choisir parmi eux.

FournisseurSlugPar heureLatenceiModesDisponibilité

AssemblyAI 14 paramètres

assemblyai

$0,15

—

Streaming

AssemblyAI

14 paramètres fournisseur documentés pour cette route.

Tarifs

ModeLanguePar heure

Streaming Toutes $0,15

+ Speaker Diarization (Streaming) Toutes $0,12

+ Medical Mode Toutes $0,15

+ Keyterms Prompting Toutes $0,04

Paramètres

domain body · unknown · facultatif

Correspond au paramètre AllModels « domain ».

encoding body · unknown · facultatif

Correspond au paramètre AllModels « response_format ».

end_of_turn_confidence_threshold body · unknown · facultatif

Correspond au paramètre AllModels « end_of_turn_confidence_threshold ».

format_turns body · unknown · facultatif

Correspond au paramètre AllModels « format_turns ».

inactivity_timeout body · unknown · facultatif

Correspond au paramètre AllModels « inactivity_timeout ».

keyterms_prompt body · unknown · facultatif

Correspond au paramètre AllModels « keyterms_prompt ».

language_detection body · unknown · facultatif

Correspond au paramètre AllModels « language_detection ».

max_speakers body · unknown · facultatif

Correspond au paramètre AllModels « max_speakers ».

max_turn_silence body · unknown · facultatif

Correspond au paramètre AllModels « max_turn_silence ».

min_turn_silence body · unknown · facultatif

Correspond au paramètre AllModels « min_turn_silence ».

sample_rate body · unknown · facultatif

Correspond au paramètre AllModels « sample_rate ».

speaker_labels body · unknown · facultatif

Correspond au paramètre AllModels « diarization ».

speech_model body · unknown · facultatif

Correspond au paramètre AllModels « model ».

vad_threshold body · unknown · facultatif

Correspond au paramètre AllModels « vad_threshold ».

Langues prises en charge

6 langues

English en

Spanish es

French fr

German de

Italian it

Portuguese pt

Fonctionnalités

Speech to text

Transcribes spoken audio to text.

speech_to_text

Streaming

Real-time streaming transcription over WebSocket.

streaming

Multilingual transcription

Supports 6 languages (en, es, fr, de, it, pt).

multilingual_transcription

Speaker diarization

Identifies and labels multiple speakers.

speaker_diarization

Word-level timestamps

Returns word-level timestamps.

word_timestamps

Code

STT en streaming avec l’ElevenLabs SDK

Diffuse l’audio du micro ou d’un fichier via la route AllModels compatible ElevenLabs.

import { ElevenLabsClient } from "elevenlabs";

const client = new ElevenLabsClient({
  apiKey: process.env.ALLMODELS_API_KEY,
  baseUrl: "https://api.allmodels.io/el"
});

const connection = await client.speechToText.realtime.connect({
  modelId: "assemblyai/universal-streaming-multilingual",
  languageCode: "en"
}, {
  queryParams: {
    provider: {
      "only": [
        "assemblyai"
      ]
    }
  }
});

// Send audio frames to connection, then handle transcript events.