Los prototipos de reconocimiento de voz asistido por el asistente (ABSR) para controladores de tráfico aéreo han demostrado reducir la carga de trabajo de los controladores y los tiempos de vuelo de las aeronaves como resultado. Sin embargo, dos aspectos del ABSR podrían mejorar los beneficios, es decir, (1) los comandos de controlador predichos que utilizan los motores de reconocimiento de voz pueden ser más precisos, y (2) el proceso de confirmación de la salida de reconocimiento del ABSR, como las señales de llamada, los tipos de comandos y los valores por parte del controlador, puede ser menos intrusivo. Ambas tareas pueden ser apoyadas por el seguimiento ocular y del mouse no intrusivo al utilizar los datos de la mirada e interacción de los operadores. Primero, las probabilidades de los comandos predichos deben considerar el enfoque visual de los controladores en la pantalla de datos de la situación. Los controladores probablemente darán comandos a las aeronaves en las que se concentran o donde hubo una interacción con el mouse en la pantalla. Además, es más probable que den ciertos tipos de comandos dependiendo de las características de múltiples aeronaves que están siendo escaneadas. En segundo lugar, se puede determinar a través del seguimiento ocular en lugar de clics adicionales del mouse si la salida del ABSR mostrada ha sido verificada por el controlador y permanece sin corregir durante un cierto período de tiempo. Luego, se asume que la salida es correcta y es utilizable por otros sistemas de control de tráfico aéreo, por ejemplo, alerta de conflicto a corto plazo. Si la salida del ABSR permanece sin verificar, una funcionalidad de guía de atención activa diferentes niveles de escalada para mostrar señales visuales. En un estudio experimental de un solo caso con dos controladores para las dos técnicas implementadas, (1) las probabilidades de predicción de comandos mejoraron en un factor de cuatro, (2) las tasas de error de predicción basadas en una métrica de precisión para las tres aeronaves más probables disminuyeron en un factor de 25 al combinar datos de seguimiento ocular y del mouse, y (3) la confirmación visual de la salida del ABSR promete ser una alternativa a la confirmación manual.