El laboratorio de interfaces informáticas inteligentes para interacciones futuras (SciFi) de la Universidad de Cornell ha desarrollado una interfaz de anteojos impulsada por inteligencia artificial que puede leer el habla silenciosa del usuario.
Llamado ecohablalas gafas reconocen hasta 31 comandos no vocalizados basados ​​en movimientos de labios y boca, y utilizan sensores acústicos e inteligencia artificial para hacerlo.
La IA lee comandos de voz silenciosos
La interfaz portátil requiere sólo unos minutos de datos de entrenamiento del usuario antes de que pueda detectar y activar comandos en un teléfono inteligente. Es ideal para personas que no pueden vocalizar sonidos, ya que les permite utilizar la tecnologÃa de voz silenciosa como una excelente entrada para un sintetizador de voz.
Utilizando herramientas de diseño como CAD, la interfaz de voz silenciosa también se puede utilizar con un lápiz, eliminando casi la necesidad de un teclado y un mouse.
El uso de tecnologÃas como EchoSpeech hace posible comunicarse con otras personas mediante un teléfono inteligente en entornos ruidosos.
La tecnologÃa portátil tiene parlantes y un par de micrófonos no más grandes que borradores de lápices.
Las gafas reconocen los movimientos de la boca, transmiten y reciben ondas sonoras a través del rostro y las analizan en tiempo real con una precisión de aproximadamente el 95% mediante un algoritmo de aprendizaje profundo.
Los datos de audio se pueden comunicar a un teléfono inteligente a través de Bluetooth en tiempo real y utilizan menos ancho de banda que los datos de imagen o video porque son significativamente más pequeños.
Además, los datos se procesan localmente en el teléfono inteligente en lugar de enviarse a la nube, lo que garantiza que la información sensible a la privacidad nunca salga de las manos del usuario.
Siguiente paso: comercialización
El equipo está intentando comercializar la tecnologÃa subyacente a EchoSpeech con financiación adicional de Ignite: Cornell Research Lab to Market.
El SciFi Lab ha creado varios dispositivos portátiles que utilizan pequeñas cámaras de vÃdeo y aprendizaje automático para rastrear los movimientos del cuerpo, las manos y la cara.
Para rastrear los movimientos de la cara y el cuerpo, el laboratorio recientemente pasó de las cámaras a la detección acústica, citando una mejor duración de la baterÃa, mayor seguridad y privacidad, y equipos más pequeños.
EchoSpeech se basa en el auricular portátil del laboratorio que registra los movimientos faciales denominado EarIO, que de manera similar utiliza detección acústica. En su próximo estudio, los investigadores de SciFi Lab están investigando aplicaciones de gafas inteligentes para monitorear los movimientos faciales, oculares y de la parte superior del cuerpo.
El laboratorio cree que el vidrio será una plataforma informática personal crucial para comprender el comportamiento humano en entornos naturales. De ahà surgió el EchoSpeech.
â“’ 2023 . .
