¿Qué es CyberVerse?

CyberVerse es una plataforma de agente humano digital de código abierto que permite la interacción de audio/video en tiempo real con personajes impulsados por IA. Construida sobre tecnología WebRTC, permite a los usuarios crear un agente de IA realista a partir de una sola foto y mantener conversaciones cara a cara a través de videollamadas en vivo de baja latencia. La plataforma admite animación facial en tiempo real, sincronización labial natural, componentes de IA basados en complementos y backends configurables para sistemas LLM, TTS, ASR y avatares.

Para quién es

• Desarrolladores y entusiastas que quieran construir agentes de IA de voz o video personalizados con flexibilidad de código abierto
• Creadores de contenido y narradores que busquen dar vida a personajes ficticios o figuras históricas a través de humanos digitales interactivos
• Investigadores y entusiastas de la IA que exploren la interacción multimodal, avatares en tiempo real y arquitecturas de agentes

Características clave

Videollamadas en tiempo real con humanos digitales

CyberVerse utiliza WebRTC para transmisión de audio/video de baja latencia, compatible con conexiones P2P directas o modo LiveKit SFU. El agente puede recibir fotogramas de la cámara del usuario o entrada de pantalla compartida, lo que permite una interacción cara a cara donde la IA te ve y te escucha simultáneamente.

Arquitectura multiagente para conversaciones fluidas

La plataforma separa el procesamiento en primer y segundo plano: PersonaAgent maneja la conversación en tiempo real, interrupciones y cambios de contexto, mientras que SubAgents procesan de forma asíncrona tareas de larga duración como búsqueda, investigación, resumen y generación de informes. Esto mantiene las interacciones de voz receptivas incluso durante operaciones complejas.

Componentes modulares y reemplazables

Cada parte del agente (cerebro, voz, oído, herramientas, memoria y rostro) es un módulo reemplazable. Puedes combinar diferentes modelos omni, LLM, TTS, ASR, embeddings, RAG, llamadas a herramientas y backends de avatar a través de un único archivo de configuración, y luego cambiar proveedores y combinaciones de modelos por escenario mediante la interfaz web.

Memoria persistente e integración de conocimiento

El historial de conversaciones se guarda en el disco local y se carga automáticamente al reanudar una sesión. Puedes importar bases de conocimiento, documentos y material biográfico para cada personaje, que el sistema indexa para generación aumentada por recuperación, manteniendo las respuestas alineadas con la personalidad del personaje.

Lo que destaca

Solo una foto. CyberVerse les da vida. Esto captura la magia central de la plataforma: transformar una única imagen de referencia en un humano digital completamente interactivo con animación facial en tiempo real, sincronización labial y reproducción de video inactivo en caché. A diferencia de muchos agentes de IA que se limitan a texto o solo audio, CyberVerse ofrece una presencia visible y emocionalmente atractiva que puede verte, oírte y responder con expresiones naturales.

Vale la pena echarle un vistazo si…

Quieres construir un agente de IA personalizado que vaya más allá del chat de texto, uno que pueda mantener conversaciones de voz en tiempo real, ver tu rostro y mostrar un avatar digital realista. CyberVerse es especialmente atractivo si valoras la flexibilidad del código abierto, la arquitectura modular y la capacidad de cambiar entre modo de solo voz (sin necesidad de GPU) y modo de avatar de video completo según tu hardware y caso de uso.