Cognitive Pilot presentó el asistente de voz de IA, Cognitive Voice Assistant, para un mini-tractor completamente autónomo y sin cabina. Con él, el operador puede, con palabras comunes, saber qué le sucede a la máquina, cómo va su tarea y qué hará a continuación, y si es necesario, dar una orden al robot por voz.
El desarrollo surgió después de las solicitudes de los usuarios de mini-tractores. Para los clientes es importante asegurarse en cualquier momento de que la máquina funciona según lo previsto, conocer su estado y comprender las próximas acciones. Sin embargo, introducir comandos constantemente en una tableta o computadora portátil mientras el robot está trabajando es inconveniente, por lo que los desarrolladores apostaron por el control por voz.
Cognitive Voice Assistant se basa en la red neuronal generativa de Cognitive Pilot, "Ippolit". El asistente percibe el habla humana común, comprende la solicitud y la procesa en tiempo real en un entorno de computación en la nube.
A diferencia de los servicios públicos basados en grandes modelos de lenguaje, el sistema funciona en un entorno de nube aislado en las propias capacidades de computación de la empresa. No depende de proveedores externos y, según los desarrolladores, no está sujeto a posibles amenazas por parte de ellos.
La particularidad del sistema es que comienza a analizar el habla incluso antes de que la persona termine la frase, afirman los desarrolladores. Por lo tanto, el operador no tiene que esperar la finalización de cada etapa de procesamiento, y la conversación puede transcurrir prácticamente sin pausas.
Si no hay suficiente información para la respuesta, el asistente recurre a los sistemas internos del robot. Puede obtener datos sobre el estado del equipo, diagnóstico, telemetría, navegación o parámetros de la operación en curso y solo después de eso formar una respuesta.
Por ejemplo, el operador puede preguntar sobre el estado de la máquina, la calidad de la conexión, las misiones actuales, las características de la tarea o la etapa de su ejecución. El asistente es capaz de analizar la telemetría, informar el nivel de carga de la batería, dar pronósticos y evaluar si el robot podrá realizar una tarea específica.
El sistema es capaz de tener en cuenta varios parámetros a la vez
Por ejemplo, a la pregunta sobre un viaje al punto "B" a una distancia de 50 km, puede determinar que, con un terreno complejo, una gran cantidad de subidas y el equipo adjunto instalado, la tarea es imposible de realizar debido a la baja carga de la batería.
El robot también puede informar al operador sobre el resultado del trabajo. Por ejemplo, explicar: "No pude quitar la basura de la entrada porque había un obstáculo". Las funciones exactas que estarán disponibles para el usuario se configuran en los ajustes del sistema.
Cognitive Voice Assistant se puede personalizar adicionalmente para un cliente específico. Esto incluye la capacidad de crear funciones especiales y elegir el tono de voz del robot.
En uno de los campamentos infantiles, el robot se utiliza para limpiar el área. Además de información sobre su trabajo, puede responder a preguntas de los niños como "¿Por qué la nieve es blanca y la hierba verde?" o contar un chiste. Para comunicarse con los niños, el robot utiliza una voz infantil.
El asistente también puede aceptar comandos de gestión. Por ejemplo, el operador puede pedirle al robot que se detenga, continúe moviéndose, señale con los faros o emita una señal sonora.
Los desarrolladores prestaron especial atención a la seguridad. Según la empresa, el sistema incorpora escenarios que deben evitar situaciones en las que, debido a las acciones de un atacante o un error del usuario, el robot atropelle a una persona o dañe una máquina.
Se propone controlar Cognitive Voice Assistant desde un smartphone a través de una interfaz sencilla. En un futuro próximo, los desarrolladores planean completar la imagen gráfica del robot de IA y el módulo responsable de sus expresiones faciales.
En Cognitive Pilot creen que los asistentes de voz ayudarán a adaptar más rápidamente a los robots de IA para trabajar en la agricultura, los servicios públicos, el transporte de carga y otras áreas. La empresa califica el proyecto como un posible primer ejemplo de interacción masiva y "amistad" entre el ser humano y el robot industrial.