Новый подход к тестированию ИИ предложили в МГУ

Классификаторы для определения авторства текстов могут заменить Тесты Тьюринга

В МГУ создали классификатор для определения авторства текста. Он поможет определить, написан ли фрагмент человеком или искусственным интеллектом. В перспективе этот метод может заменить Тест Тьюринга, с помощью которого тестируются возможности ИИ по имитации человеческого общения и речи.

Тест Тьюринга, разработанный британским учёным Аланом Тьюрингом, проверяет способность компьютера имитировать человеческое мышление. В ходе теста человек-испытатель взаимодействует с машиной и человеком, пытаясь выяснить, кто из них кто. Современные языковые модели могут успешно проходить этот тест, но только в ограниченных условиях.

В ограниченном наборе вопросов эти модели достаточно долго могут продержаться [при прохождении теста Тьюринга]. Чтобы отличить синтетический текст от обычных можно набирать большие коллекции текстов, раз языковые модели много сочиняют.
Наталья Лукашевич, заведующий кафедрой алгоритмических языков факультета вычислительной математики и кибернетики МГУ имени Ломоносова

Учёный отметила, что для более точного различия между синтетическими и естественными текстами необходимо создавать большие коллекции языковых данных. Однако, нейросети «деградируют» без участия человека, поскольку при использовании собственных произведений для обучения модели ИИ теряют в качестве.

Лукашевич добавила, что текущие технологии не позволяют ИИ достичь уровня, показанного в фильмах, поскольку он часто делает ошибки, указывающие на его имитационные способности.

Читайте ещё по теме:

Учёные создали ИИ для обработки данных о Солнце

Учёные обучили нейросеть «песням» кашалотов

В МГУ хотят имплантировать ИИ в мозг примата