
Fala de entrada, fala de saída, em um único soquete, no nível maior do Omni, com taxas separadas de token de texto e áudio e faturamento por turno.
Fala de entrada, fala de saída, em um único soquete, no nível maior do Omni, com taxas separadas de token de texto e áudio e faturamento por turno.
A sessão é configurada com eventos session.update pelo socket em vez de parâmetros de requisição. Tokens de texto e áudio faturam a taxas separadas, e uma resposta falada fatura apenas seus tokens de áudio.
Também conhecido como Qwen3.5 Omni Realtime, Alibaba Cloud Qwen3.5 Omni Plus Realtime
qwen3-5-omni-plus-realtime/v1/realtimeqwen3.5-omni-plus-realtimealibaba/qwen3-5-omni-plus-realtimeTarifas pay-as-you-go ao vivo do catálogo EmpirioLabs. Você paga só pelo que usa, sem mínimo mensal.
Qwen3.5 Omni Plus Realtime mantém uma conversa ao vivo por um WebSocket em wss://api.empiriolabs.ai/v1/realtime?model=qwen3-5-omni-plus-realtime, e não pelos endpoints HTTP. Conecte-se com o id de modelo qwen3-5-omni-plus-realtime e envie sua chave de API da EmpirioLabs como cabeçalho Authorization: Bearer no handshake. O áudio trafega nos dois sentidos como PCM de 16 bits em base64. Um navegador não consegue definir cabeçalhos em um WebSocket, então abra esta conexão a partir do seu servidor e repasse o áudio ao navegador pelo seu próprio socket. Obtenha uma chave de API no painel EmpirioLabs.
import asyncio, json, os, websockets
async def main():
async with websockets.connect(
"wss://api.empiriolabs.ai/v1/realtime?model=qwen3-5-omni-plus-realtime",
additional_headers=[
("Authorization", f"Bearer {os.environ['EMPIRIOLABS_API_KEY']}"),
],
max_size=None,
) as ws:
print(json.loads(await ws.recv())["type"]) # session.created
await ws.send(json.dumps({
"type": "conversation.item.create",
"item": {
"type": "message",
"role": "user",
"content": [{"type": "input_text", "text": "Say hello."}],
},
}))
await ws.send(json.dumps({"type": "response.create"}))
async for raw in ws:
event = json.loads(raw)
if event["type"] == "response.audio.delta":
... # base64 audio chunk, append to your playback buffer
elif event["type"] == "response.done":
break
asyncio.run(main())Parâmetros de requisição suportados pela API Qwen3.5 Omni Plus Realtime na EmpirioLabs. Os padrões valem quando um campo é omitido.
| Parâmetro | Tipo | Padrão | Intervalo / valores | Descrição |
|---|---|---|---|---|
| voice | enum | Tina | Tina, Serena, Ethan, Dylan, Sunny, Peter, Kiki, Eric | Falando voz durante a sessão. Configure com session.update antes que o modelo produza qualquer áudio. |
| instructions | string | - | - | Orientação do sistema sobre como o modelo deve se comportar e falar durante a conversa. |
| modalities | string | ["text","audio"] | - | Quais tipos de saída o modelo retorna por um turno. Coloque "áudio" para uma resposta apenas de texto. |
| input_audio_format | enum | pcm | pcm | Codificação do áudio que você adiciona ao buffer de entrada: base64 PCM de 16 bits a 16 kHz. Com a versão beta do protocolo, defina session.audio.input.format antes... |
| output_audio_format | enum | pcm | pcm | Codificação do áudio que o modelo transmite de volta: base64 PCM de 16 bits a 24 kHz. Com a versão beta do protocolo, defina session.audio.output.format antes do... |
| turn_detection | string | {"type":"server_vad"} | - | Detecção de atividade de voz: decide quando você terminou de falar e o modelo deve responder. Está ativado por padrão como server_vad, o que encerra seu turno após... |
| max_response_output_tokens | number | - | 1 a 65536 | Maior número de tokens de saída que uma resposta pode usar: de 1 a 65536, onde um número maior é 65536, ou "inf" para o limite próprio do modelo. Também aceito como... |
| temperature | number | - | 0 a 1.99 | Temperatura de amostragem. 0 é determinístico e 1,99 é a aleatoriedade máxima. Quando omitido, aplica-se o padrão do próprio modelo. |
| top_p | number | - | 0.01 a 1 | Amostragem do núcleo com massa de probabilidade. Valores mais baixos tornam as saídas mais focadas. Quando omitido, o padrão do próprio modelo se aplica. |
| top_k | integer | - | 1 a 100 | Amostre apenas dos K tokens mais prováveis. Quando omitido, o padrão do modelo se aplica. |
| repetition_penalty | number | - | 0.1 a 2 | Valores mais altos desencorajam a repetição da frase, e 1 não aplica penalidade. Quando omitido, o padrão do modelo se aplica. |
| presence_penalty | number | - | -2 a 2 | Penalidade para tokens que já apareceram no texto gerado. Valores positivos incentivam novos tópicos. Quando omitidos, o padrão do modelo se aplica. |
| seed | integer | - | 0 a 2147483647 | Semente aleatória para amostragem mais reproduzível. Reutilizar uma semente com a mesma solicitação retorna uma saída semelhante, nem sempre idêntica. |
Voz full-duplex por WebSocket em wss://api.empiriolabs.ai/v1/realtime?model=qwen3-5-omni-plus-realtime, autenticada com o cabeçalho Authorization Bearer comum. Configure a sessão com session.update pelo socket: voz, instruções, modalidades, detecção de turno, amostragem e o limite de duração da resposta, max_response_output_tokens. Envie quadros de câmera ou vídeo como imagens JPEG com input_image_buffer.append, após o primeiro áudio. Para WAV ou outra taxa de amostragem com a versão beta do protocolo, defina session.audio.input.format e session.audio.output.format antes do primeiro áudio. As vozes deste modelo diferem da geração anterior do Omni, então defina uma que aceite ou deixe o padrão; uma voz desconhecida encerra a sessão em vez de devolver um erro. Tokens de texto e áudio são precificados separadamente, uma resposta falada é cobrada apenas pelos tokens de saída de áudio, e cada turno concluído é faturado separadamente pelo uso que o modelo reporta.
Na EmpirioLabs, Qwen3.5 Omni Plus Realtime é cobrado por uso: Entrada: áudio $33.00 por 1M de tokens de entrada de áudio; Entrada $4.20 por 1M de tokens de prompt; Saída $24.80 por 1M de tokens gerados, respostas apenas de texto; Saída: áudio $124.00 por 1M de tokens de áudio gerados. A tabela de tarifas ao vivo desta página sempre corresponde ao que a API cobra.
Qwen3.5 Omni Plus Realtime suporta uma janela de contexto de 192K tokens com até 65.536 tokens de saída por resposta.
Qwen3.5 Omni Plus Realtime é servido por WEBSOCKET /v1/realtime em api.empiriolabs.ai com autenticação padrão por token Bearer.
Abra o playground da EmpirioLabs e clique em Start session para testar no navegador. Qwen3.5 Omni Plus Realtime funciona sobre um WebSocket em vez de requisição e resposta, então para integrar comece pelo guia rápido de voz em tempo real. Conecte-se do seu servidor com sua chave de API da EmpirioLabs e o id de modelo qwen3-5-omni-plus-realtime e transmita áudio nos dois sentidos.
Crie uma conta EmpirioLabs e gere uma chave em API Keys no painel. A cobrança usa créditos pay-as-you-go, então você paga apenas pelas requisições que faz.
Confira nossos preços ou entre em contato se quiser que seu próprio modelo seja implementado em nossa pilha.