¿Cómo funciona el dispositivo de habla de Stephen Hawking?

STEPHEN HAWKING FIRST conoció a Gordon Moore, cofundador de Intel, en una conferencia en 1997. Moore notó que la computadora de Hawking, que solía comunicarse, tenía un procesador AMD y le preguntó si prefería una “computadora real” con un Microprocesador Intel. Intel ha estado proporcionando a Hawking PC personalizadas y soporte técnico desde entonces, reemplazando su computadora cada dos años.

(Lo anterior es el párrafo inicial de un artículo en wired.com)

El sintetizador de voz de Hawking es un procesador de palabras predictivo especialmente desarrollado para él por un equipo de cinco ingenieros de Intel. Las soluciones que el equipo ha desarrollado a lo largo de los años han tenido que adaptarse a los requisitos particulares que Hawking tiene, entre otras cosas, que es un hombre mayor que no se adapta fácilmente al uso de parte de la tecnología y que ha mantenido durante mucho tiempo preferencias para algunas de las características de los sistemas anteriores que utilizó.

La limitación más severa es que su interfaz consiste en el equivalente de un teclado de una sola tecla , que activa al tensar un músculo de su mejilla. El sistema informático escanea a través de una lista de personajes y opciones y Hawking tensa el músculo de la mejilla para seleccionar el personaje o la operación que se está escaneando actualmente. ¡Uno solo puede imaginar la paciencia que requiere esta práctica!

A medida que se deletrean las palabras, el sistema comienza a predecir cuál podría ser la siguiente palabra. Como se trata de Stephen Hawking, si deletrea “el”, el sistema predice “negro” como la siguiente palabra. Si se selecciona “negro” como correcto (en lugar de que él lo ignore y comience a escribir una palabra diferente), entonces el sistema selecciona “agujero” como la palabra después de eso.

Aquí hay una foto que muestra el sensor de los músculos de las mejillas que se adjunta al marco de sus gafas. Naturalmente, movimientos como la masticación provocarán respuestas aleatorias.

El equipo de Intel ha probado otras interfaces en un intento de procesar una gama más amplia de entradas. Por ejemplo, movimiento ocular y seguimiento. Desafortunadamente, los párpados de Hawking se caen con demasiada frecuencia para que tal interfaz funcione prácticamente.

Para la historia de cómo el sistema y el software han estado en desarrollo regular, aquí hay un artículo muy interesante de la revista Wired: Cómo Intel le dio voz a Stephen Hawking

El sistema de voz de Stephen Hawking ha sido lanzado por Intel como código de código abierto. La compañía espera que los desarrolladores jueguen con ella y amplíen su aplicación a una gama más amplia de discapacidades.

El kit de herramientas de asistencia contextual (ACAT) brinda a los usuarios con capacidades diferentes la oportunidad de usar computadoras con muy poco movimiento, y fue desarrollado para ayudar a Hawking, que tiene esclerosis lateral amiotrófica (ELA) a comunicarse traduciendo sus movimientos faciales en texto.

La tecnología consta de tres partes: la entrada de un sensor de infrarrojos o cámara web que detecta movimientos faciales, la interfaz que selecciona letras para formar palabras y el software de autocompletado que predice lo que el usuario está escribiendo. El teclado virtual del software también se puede usar para seleccionar y utilizar diferentes programas y navegar por Internet. El software solo está disponible para PC.

El software y la guía del usuario, que incluye técnicas avanzadas de navegación, se pueden encontrar en Github. 01org / acat

Así es como el propio Hawking describe el sistema:

Desde 1997, mi sistema de comunicación basado en computadora ha sido patrocinado y proporcionado por Intel® Corporation. Una tableta que está montada en el brazo de mi silla de ruedas funciona con baterías de la silla de ruedas, aunque la batería interna de la tableta mantendrá la computadora funcionando si es necesario.

Mi interfaz principal para la computadora es a través de un programa llamado EZ Keys, escrito por Words Plus Inc. Esto proporciona un teclado de software en la pantalla. Un cursor explora automáticamente este teclado por fila o por columna. Puedo seleccionar un personaje moviendo la mejilla para detener el cursor. Mi movimiento de la mejilla es detectado por un interruptor de infrarrojos que está montado en mis gafas. Este interruptor es mi única interfaz con la computadora. EZ Keys incluye un algoritmo de predicción de palabras, por lo que generalmente solo tengo que escribir los primeros caracteres antes de poder seleccionar la palabra completa. Cuando construyo una oración, puedo enviarla a mi sintetizador de voz. Yo uso un sintetizador de hardware separado, hecho por Speech +. Es lo mejor que he escuchado, aunque me da un acento que se ha descrito de diversas maneras como escandinavo, estadounidense o escocés.

A través de EZ Keys también puedo controlar el mouse en Windows. Esto me permite operar toda mi computadora. Puedo revisar mi correo electrónico usando el cliente de correo electrónico de Eudora, navegar por Internet usando Firefox o escribir conferencias usando el Bloc de notas. Mi última computadora de Intel, basada en un procesador Intel® Core ™ i7 y la unidad de estado sólido Intel® serie 520, también contiene una cámara web que uso con Skype para mantenerme en contacto con mis amigos. Puedo expresar mucho a través de mis expresiones faciales a quienes me conocen bien.

También puedo dar conferencias. Escribo la conferencia de antemano y la guardo en el disco. Luego puedo enviarlo al sintetizador de voz una oración a la vez usando el software Equalizer escrito por Words Plus. Funciona bastante bien y puedo probar la conferencia y pulirla antes de darla.

Configuración actual (puede haber actualizaciones)

Tableta Lenovo ThinkPad X220 (2 copias)

CPU Intel® Core ™ i7-2620M a 2.7GHz

Unidad de estado sólido Intel® 150Gb serie 520

Windows 7

Sintetizadores de voz (3 copias):

Fabricante – Speech Plus (Incorporated 1988, Mountain View, CA)

Modelo – CallText 5010

Stephen Hawking – Inicio

hay una pequeña pantalla unida a la silla de ruedas de stephen hawking y en esta pantalla las palabras parpadean, stephen selecciona una palabra a la vez de la pantalla usando un dispositivo señalador que funciona con la ayuda de la fingura de stephen.

Entonces, al seleccionar palabra por palabra, Stephen enmarca la oración completa que está conectada a un dispositivo de respuesta que da la salida en forma de voz.

Hoy SwiftKey se unió a Intel y al profesor Hawking en el escenario de Londres para hablar sobre este trabajo . El profesor Hawking tiene una enfermedad de la neurona motora y, como tal, solo puede comunicarse mediante el uso de un pequeño sensor que se activa mediante un músculo en la mejilla. Él usa este sensor para “escribir” caracteres y números en su teclado.

¿Por qué otras personas que no pueden hablar no usan este dispositivo?