La API en tiempo real proporciona múltiples protocolos de transporte, cada uno optimizado para diferentes requisitos como rendimiento, latencia, resistencia a redes débiles y costo de integración.
Selección de protocolo
La API en tiempo real admite tres protocolos de transporte: AOQ (AI sobre QUIC), WebRTC y WebSocket. Elija el protocolo que mejor se adapte a su escenario empresarial.
| Dimensión | AOQ | WebRTC | WebSocket |
|---|---|---|---|
Casos de uso | Interacción multimodal de IA en tiempo real, condiciones de red débil, transmisión mixta de datos | Interacción basada en navegador, llamadas tradicionales de audio y video | Integración del lado del servidor, creación rápida de prototipos |
Compatibilidad con navegadores | No compatible | Soportado nativamente | Soportado nativamente |
Dificultad de integración | Bajo | Medio | Mínimo |
Resiliencia en redes débiles | Excelente | Buena | Deficiente |
Tipos de datos | Audio/video + texto | Audio/video + texto | Texto/audio/imagen |
Velocidad de establecimiento de conexión | Rápida | Lento | Lento |
Cancelación de eco y supresión de ruido | Integrado | Integrado | None; el cliente debe gestionarlos |
Adecuación para escenarios de IA | Diseñado específicamente para las características de datos multimodales de IA | Diseño tradicional; requiere adaptación adicional para escenarios de IA | Básico; adecuado para escenarios de solo texto o escenarios con bajos requisitos de tiempo real |
Soporte de plataformas cliente | Android / iOS / HarmonyOS | Navegadores, clientes móviles | Todas las plataformas (cualquier entorno que soporte WebSocket) |
Plan de tokens | Compatible | Compatible | Compatible |
Seleccione un protocolo según sus requisitos:
- AOQ: Ideal para escenarios de interacción en tiempo real con IA con los requisitos más exigentes en cuanto a latencia, resistencia a redes débiles y transmisión de datos multimodales, especialmente para aplicaciones móviles nativas. Incluye cancelación de eco y supresión de ruido integradas.
- WebRTC: Ideal para escenarios tradicionales de llamadas de audio y video que requieren compatibilidad nativa con el navegador o que ya se ejecutan en una infraestructura WebRTC. Incluye cancelación de eco y supresión de ruido integradas.
- WebSocket: Ideal para integración del lado del servidor, creación rápida de prototipos y escenarios que requieren una barrera de integración mínima. Utilice el SDK de DashScope para implementar rápidamente conversaciones de voz en tiempo real.
Modelos y aplicaciones soportados
La siguiente tabla muestra cómo cada protocolo admite diferentes modelos y aplicaciones:
| Tipo de modelo/aplicación | Modelo | AOQ | WebRTC | WebSocket |
|---|---|---|---|---|
qwen3.8-omni-flash-realtime, qwen3.5-omni-plus-realtime, qwen3.5-omni-flash-realtime | Compatible | Compatible | Compatible | |
qwen-audio-3.1-tts-plus, qwen-audio-3.1-tts-flash, qwen-audio-3.0-tts-flash, qwen-audio-3.0-tts-plus | Compatible | No compatible | Compatible | |
Modelos de la serie CosyVoice | Compatible | No compatible | Compatible | |
Modelos de las series qwen-audio-3.1-asr-flash-message, qwen-audio-3.1-asr-flash-streaming, qwen-audio-3.0-asr-flash-streaming, Fun-ASR-Realtime | Compatible | No compatible | Compatible | |
qwen-audio-3.1-realtime-plus, qwen-audio-3.0-realtime-plus, qwen-audio-3.0-realtime-flash | Compatible | Compatible | Compatible | |
Modelos de la serie Qwen-Livetranslate-Realtime | Compatible | Compatible | Compatible |
NotaPara obtener información como nombres de modelos, ventanas de contexto, precios y versiones de instantáneas, consulte la consola de Alibaba Cloud Model Studio. Para conocer los límites de velocidad, consulte Limitación de velocidad.
Mejores prácticas
- Uso de WebRTC con qwen3.8-omni-flash-realtime para llamadas en tiempo real
- Uso de AOQ con qwen3.8-omni-flash-realtime para llamadas en tiempo real
- Creación de conversaciones de voz pulsar para hablar con qwen3.8-omni-flash-realtime sobre AOQ
- Síntesis de voz con qwen-audio-3.0-tts-flash sobre AOQ
- Transcripción de voz en tiempo real con fun-asr-realtime sobre AOQ
- Creación de conversaciones de voz en tiempo real con qwen-audio-3.1-realtime-plus sobre AOQ