¡Participa de la Maratón Behind the Code, la competencia de programación más desafiante! Inscríbete aqui

Archivado | Cree un entorno de realidad virtual speech sandbox

Contenido archivado

Fecha de archivo: 2019-08-08

Este contenido ya no se actualiza ni se mantiene.
El contenido se proporciona “como está”.
Dada la rápida evolución de la tecnología, algunos contenidos, instrucciones o ilustraciones pueden haber cambiado.

Resumen

Este patrón de código le mostrará cómo construir sistemas interactivos de voz avanzados para realidad virtual con tan sólo dos servicios de Watson: Watson Speech-to-Text para la transcripción y Watson Conversation para analizar el significado de las palabras. Descubra cómo aprovechar Watson Unity SDK para implementar los servicios directamente desde el entorno de desarrollo de Unity.

Descripción

La realidad virtual (VR) permite a los usuarios sentirse que habitan en un espacio verdaderamente diferente. En un ambiente de realidad virtual, la voz es una interfaz más natural que otros métodos para ciertas interacciones. Usted no quiere interrumpir una experiencia para mirar hacia un control, ni por supuesto, escribir un comando; quiere estar inmerso en ese momento. La capacidad de sencillamente decir las instrucciones le mantiene dentro de ese momento y le ayuda a brindar a los usuarios un grado de inmersión totalmente nuevo.

Al aprender cómo añadir controles de voz a entornos VR, usted puede construir experiencias más interactivas y posicionar sus propias habilidades para la siguiente gran revolución tecnológica. Cuando complete este patrón de código entenderá cómo añadir los servicios IBM Watson Speech-to-Text y Conversation a un entorno de realidad virtual construido en Unity, la popular plataforma de desarrollo 3D.

Hay varios dispositivos populares de VR que se ponen en la cabeza VR y que ofrecen a los usuarios potentes experiencias envolventes. Su popularidad y versatilidad les hacen candidatos ideales para la interacción por voz. Este patrón de código le muestra cómo implementar los controles de voz para Google Cardboard y HTC Vive, dos de los dispositivos VR más populares que se montan en la cabeza.

Flujo

flujo

  1. El usuario lanza el espacio aislado de la Voz utilizando Unity y un sistema de hardware de VR.
  2. Al hablar dentro de la unidad VR, el usuario emite comandos que se traducen utilizando el servicio Speech-to-Text de Watson.
  3. Watson Speech-to-Text convierte el audio en texto y lo devuelve a la aplicación en ejecución que alimenta el hardware VR.
  4. La aplicación envía el texto a Watson Assistant. Watson Assistant devuelve la intención reconocida «Crear» y las entidades «large,» «black,» y «box». La aplicación de realidad virtual luego muestra la gran black box (que cae del cielo).

Aviso

El contenido aquí presentando fue traducido de la página IBM Developer US. Puede revisar el contenido original en este link.