NTT Communications Corporation, Toei Company, Ltd. y NTT QONOQ, INC. han anunciado conjuntamente el lanzamiento inmediato de una demostración de servicio al cliente que utiliza un humano digital para comunicarse con la gente. En la demostración, un humano digital realista, llamado "CONN", creado mediante la combinación de elementos visuales similares a los humanos generados por la tecnología humana digital1 del Laboratorio Zukun de Toei y personalidades similares a las humanas (comportamiento y voz) desarrolladas con la tecnología de IA de generación de movimiento corporal y síntesis de voz de los Laboratorios de Informática Humana de NTT, interactuará con las personas que visiten el espacio virtual OPEN HUB Park2 de NTT Com. Los resultados se utilizarán para determinar la posibilidad de utilizar humanos digitales como nuevos puntos de contacto para servicios comerciales.

CONN se desarrolló a partir de los rostros de nueve personas reales, o "catalizadores", que fueron escaneados con la última versión de LightStage3 del Laboratorio Toei Zukun, a partir de la cual se creó un humano realista (humano digital) utilizando gráficos por ordenador. Para la personalidad de CONN, incluidos el comportamiento y la voz, se utilizaron los datos de captura de movimiento y los datos de voz de los catalizadores para entrenar un motor de IA desarrollado con NTT Human Informatics Laboratories, que reprodujo las características de comportamiento y voz de personas reales en CONN. En el último paso, un software patentado desarrollado por NTT Com convirtió los puntos característicos de los datos faciales y de personalidad capturados en 3DCG.4 A continuación, el software generó el movimiento digital y la voz basándose en un programa aprendido.

Cuando las personas visiten el OPEN HUB Park, CONN se comunicará con ellas con un estilo natural, mostrando diversas expresiones faciales, comportamientos y tonos de voz, como si realmente estuviera pensando, mientras guía a las personas por las distintas zonas del parque virtual. Zona de recepción: CONN presentará el concepto del OPEN HUB Park mediante información mostrada en siete monitores LED que los visitantes verán mientras llevan puestas unas gafas de realidad aumentada. Zona de presentación: CONN aparecerá en un monitor LED de tamaño natural para explicar el contenido del vídeo mostrado en el monitor, y también llevará a cabo una breve sesión interactiva de preguntas y respuestas con los visitantes.

Zona de la biblioteca5: Los animales que simbolizan las iniciativas de Smart World aparecerán en las gafas AR de los visitantes para guiar a la gente por la zona de la biblioteca. El catalizador digital 3DCG CONN estará optimizado para que varios dispositivos puedan moverse sin problemas entre las gafas AR, los siete monitores LED y el monitor de tamaño real. Para la demostración, se han asignado funciones específicas a cada empresa: NTT Com: Puesta a disposición del recinto de demostración OPEN HUB Park, preparación del escenario de evaluación, arquitectura e infraestructura, y gestión del control de calidad.

Toei: Supervisión, producción y construcción del sistema de catalizador digital. QONOQ: Desarrollo de software, contenido de demostración y futuras oportunidades de negocio. Las tres empresas utilizarán lo aprendido en la demostración para explorar oportunidades de utilizar humanos digitales dentro de sus propias empresas y en soluciones para clientes de una amplia gama de industrias y sectores, como A medida que crecen en Japón los retos de la escasez de mano de obra y las necesidades de mejorar la productividad, las empresas intentan crear soluciones que incorporen tecnologías avanzadas como la RX, el metaverso y la robótica.

Los chatbots y los personajes virtuales, por ejemplo, se han implantado ampliamente en los centros de contacto y las tiendas. Pero mucha gente sigue prefiriendo tratar con personas reales, o al menos con personajes virtuales que puedan moverse y comunicarse como personas reales. Con este telón de fondo, las tres empresas crearon CONN, un humano digital que se comporta como un humano natural.

CONN combina la tecnología de generación de humanos digitales del Laboratorio Zukun de Toei con la tecnología de IA de generación de movimiento corporal6 y la tecnología de IA de síntesis de voz7 de los Laboratorios de Informática Humana de NTT. CONN servirá de catalizador digital8 para prestar servicios a los clientes en el OPEN HUB for Smart World,9 sobre cuya base se explorarán las posibilidades de utilizar humanos digitales, desarrollados hasta ahora principalmente para el entretenimiento, como nuevos puntos de contacto para los servicios corporativos.