WiMi Hologram Cloud Inc. ha anunciado el desarrollo de un sistema HRI basado en algoritmos de aprendizaje automático. El sistema HRI multimodal fusiona voz y gestos, lo que convierte la voz y los gestos del usuario en órdenes que el robot puede ejecutar. Utilizar los gestos para el HRI es una forma ideal de hacerlo. Esto se debe a que los gestos expresan una rica semántica y son fáciles de reconocer.

La interacción por voz basada en la comprensión del lenguaje natural es la más directa y cómoda. El sistema HRI, basado en algoritmos de aprendizaje automático, utiliza una combinación de gestos y voz para controlar el robot. La voz se utiliza como método de interacción natural para controlar el robot, y los gestos se emplean como complemento de la voz para mejorar la precisión de las órdenes.

La combinación de gestos y voz reduce las desventajas de utilizar sólo gestos o voz y hace que la comunicación entre humanos y robots sea más natural, eficiente y precisa. Mediante la interacción por voz, el robot entiende lo que dicen las personas y se comunica con los humanos con emoción. El sistema de diálogo humano-robot presenta características de interacción humanizada e inteligente.

El reconocimiento de gestos se basa en la trayectoria de movimiento de las manos humanas y simula imágenes o sílabas según el cambio de gestos. De este modo, se forman ciertos significados o palabras para expresar los pensamientos con claridad, lo que permite al robot comprender el lenguaje humano e interactuar con él. Con la madurez gradual de la HRI y la aplicación del reconocimiento de emociones por voz en la vida de las personas, la necesidad de que la inteligencia de las máquinas comprenda las emociones humanas se ha hecho más urgente.

El sistema HRI de WiMi proporciona una experiencia de interacción más rápida, eficiente y diversa mediante la fusión de información conceptual multimodal. Utilizando los gestos y la voz para una interacción paralela en tiempo real, la comunicación visual y la información vocal se asocian y comparten en tiempo real durante la interacción. Los múltiples modos de interacción se complementan entre sí para formar un sistema de interacción completo.

El sistema lidera el desarrollo gradual de la HRI en la dirección de la inteligencia y la humanización y ayuda a construir un entorno humano-robot armonioso y natural.