В далеком 1950 году британский научный журнал «Mind» опубликовал тест известного логика и основателя информатики Алана Тьюринга. Эксперимент длительностью всего 5 минут заключался в одновременном общении пользователя с двумя невидимыми собеседниками в текстовом режиме. По окончании теста экспериментатор давал ответ: кто из них программа, а кто человек.
Проверка для компьютерной программы считалась пройденной, если ее признали человеком более 30% независимых экспертов или судей.
«Нейросети Ашманова» и «Наносемантика» продолжают эксперимент
Ведущие разработчики чат-ботов и диалоговых интерфейсов для бизнеса при поддержке инновационного центра «Сколково» и компании «DM Solutions» продолжили эксперимент.
Первое тестирование по методике Тьюринга для ботов, знающих русский язык, состоялось в 2015 году. Тогда победила «Соня Гусева», за живого человека ее приняли 47% судей. В 2016 году кроме «Сколково» партнеров поддержала компания Microsoft, а главный приз взял бот «Иван Шумилов».
В 2019 победу одержала «Волчица», на этом конкурсе был поставлен рекорд: программы были признаны людьми в 58% случаев. По условиям конкурса человек имел право притвориться ботом. Условия были проще, но гораздо интереснее, чем в прошлых соревнованиях.
В 2020 организаторы учли недостатки прошлых мероприятий и предлагают ознакомиться с условиями проведения четвертого онлайн тестирования.
Условия проведения конкурса
Пройти тест и угадать, человек или машина ваш собеседник, может каждый пользователь сети. Разработчикам чат-ботов для участия нужно зарегистрировать своих ботов, разрешается выставить до трех чат-ботов.
Остальным желающим пообщаться с ботами регистрация не нужна.
В дни тестирования 23–26 марта 2021 года с 9.00 до 19.00 участникам нужно зайти в телеграм-канал Теста Тьюринга @turing_test_competition_bot, нажать кнопку start, чтобы выбрать случайного собеседника и начать с ним анонимный диалог.
Конкурс уже стартовал и пройдет в несколько этапов:
10.11 — начало приема заявок от разработчиков и регистрация ботов;
20.11 — запуск электронной программы в режиме тестирования;
4.12 — предоставление API разработчикам;
20.02 — Окончание регистрации команд-участников. Отсев команд, не подключившихся к API.;
24.02 — Внутреннее Тестирование БОТОВ разработчиков. Тренинг Разработчиков;
23.03 — Старт Теста Тьюринга;
26.03 — Окончание Теста Тьюринга;
31.03 — Подведение итогов, награждение победителей.
Разработчики чат-ботов, настало ваше время!
Итогом Теста Тьюринга станет награждение тех ботов, которых большинство пользователей признает людьми, и трех команд с лучшими результатами.
1-е место: 200 тыс., 2-е место: 125 тыс., 3-е место: 75 тыс.
Также соорганизаторы нашего мероприятия компания «DM Solutions» подготовила специальный приз - 50 000 тыс. руб. получит команда, которая сделает бота с лучшим чувством юмора! Спецприз может получить даже обладатель первого места.
Для всех желающих в марте пообщаться с ботами у нас тоже предусмотрена награда —номинация «Nanotalk», в рамках которой мы наградим пользователя, который на четвертом Тесте Тьюринга проведет больше всего осмысленных диалогов. Он получит толстовку с уникальным дизайном «Тест Тьюринга 2020».
Помимо денежных призов и возможности заявить о себе, разработчики виртуальных собеседников смогут замерить динамику качества своих ботов. В процессе тестирования определятся лучшие сценарии для разговорного интерфейса. А учет нюансов – акцента, возраста и сленга бота – поможет создать идеального цифрового помощника, которого никто не отличит от человека.
Зарегистрировать своего чат-бота для участия в конкурсе можно на сайте мероприятия.
После проведения мероприятия экспертный совет огласит результаты, статистику и лучшие диалоги участников.
Недавно мы провели вебинар по теме: «Люди против ботов. Что на самом деле измеряет Тест Тьюринга». Спикером выступила Анна Власова, руководитель отдела лингвистики компании «Наносемантика». На вебинаре Анна рассмотрела Тест Тьюринга со всех сторон: рассказала историю создания теста, показала самые интересные диалоги победителей предыдущих Тестов Тьюринга и дала ответ о том, что же ждет Тест Тьюринга в ближайшем будущем.
Если вы хотите узнать, почему судьи Теста Тьюринга принимают ботов за людей, то обязательно посмотрите запись вебинара.
Мы ждем вас, разработчики и поклонники технологий искусственного интеллекта!
До встречи и удачи!
