Naar hoofdinhoud gaan
OpenClaw gebruikt ElevenLabs voor tekst-naar-spraak, batchgewijze spraak-naar-tekst met Scribe v2, en streaming-STT met Scribe v2 Realtime.
MogelijkheidOpenClaw-oppervlakStandaard
Tekst-naar-spraakmessages.tts / talkeleven_multilingual_v2
Batchgewijze spraak-naar-teksttools.media.audioscribe_v2
Streaming spraak-naar-tekstVoice Call-streaming of Google Meet realtime.transcriptionProviderscribe_v2_realtime

Authenticatie

Stel ELEVENLABS_API_KEY in de omgeving in. XI_API_KEY wordt ook geaccepteerd voor compatibiliteit met bestaande ElevenLabs-tools.
export ELEVENLABS_API_KEY="..."

Tekst-naar-spraak

{
  messages: {
    tts: {
      providers: {
        elevenlabs: {
          apiKey: "${ELEVENLABS_API_KEY}",
          speakerVoiceId: "pMsXgVXv3BLzUgSXRplE",
          modelId: "eleven_multilingual_v2",
        },
      },
    },
  },
}
Stel modelId in op eleven_v3 om ElevenLabs v3 TTS te gebruiken. OpenClaw behoudt eleven_multilingual_v2 als standaard voor bestaande installaties. Discord-spraakkanalen gebruiken het streaming-TTS-eindpunt van ElevenLabs wanneer ElevenLabs de geselecteerde voice.tts/messages.tts-provider is. Afspelen start vanaf de geretourneerde audiostream in plaats van te wachten tot OpenClaw eerst het volledige audiobestand heeft gedownload en weggeschreven. latencyTier wordt toegewezen aan de queryparameter optimize_streaming_latency van ElevenLabs voor modellen die deze accepteren; OpenClaw laat die parameter weg voor eleven_v3, dat deze weigert.

Spraak-naar-tekst

Gebruik Scribe v2 voor inkomende audiobijlagen en korte opgenomen spraaksegmenten:
{
  tools: {
    media: {
      audio: {
        enabled: true,
        models: [{ provider: "elevenlabs", model: "scribe_v2" }],
      },
    },
  },
}
OpenClaw stuurt multipart-audio naar ElevenLabs /v1/speech-to-text met model_id: "scribe_v2". Taalhints worden toegewezen aan language_code wanneer aanwezig.

Streaming-STT

De gebundelde elevenlabs-plugin registreert Scribe v2 Realtime voor Voice Call en Google Meet-streamingtranscriptie in agentmodus.
InstellingConfiguratiepadStandaard
API-sleutelplugins.entries.voice-call.config.streaming.providers.elevenlabs.apiKeyValt terug op ELEVENLABS_API_KEY / XI_API_KEY
Model...elevenlabs.modelIdscribe_v2_realtime
Audio-indeling...elevenlabs.audioFormatulaw_8000
Samplefrequentie...elevenlabs.sampleRate8000
Commit-strategie...elevenlabs.commitStrategyvad
Taal...elevenlabs.languageCode(niet ingesteld)
{
  plugins: {
    entries: {
      "voice-call": {
        config: {
          streaming: {
            enabled: true,
            provider: "elevenlabs",
            providers: {
              elevenlabs: {
                apiKey: "${ELEVENLABS_API_KEY}",
                audioFormat: "ulaw_8000",
                commitStrategy: "vad",
                languageCode: "en",
              },
            },
          },
        },
      },
    },
  },
}
Voice Call ontvangt Twilio-media als 8 kHz G.711 u-law. De realtime-provider van ElevenLabs gebruikt standaard ulaw_8000, zodat telefonieframes kunnen worden doorgestuurd zonder transcodering.
Voor Google Meet-agentmodus stelt u plugins.entries.google-meet.config.realtime.transcriptionProvider in op "elevenlabs" en configureert u hetzelfde providerblok onder plugins.entries.google-meet.config.realtime.providers.elevenlabs.

Gerelateerd