Содержание
Третий Тест Тьюринга на русском языке / Хабр
Всем привет! Компании «Нейросети Ашманова» и «Наносемантика» приглашают всех желающих принять участие в 3-м всероссийском Тесте Тьюринга в 2019 году, который мы организуем.
Мы ранее проводили этот конкурс в 2015 и 2016 годах вместе с Фондом Сколково и Microsoft.
В 2019 году Тест Тьюринга пройдёт на крупнейшей конференции по искусственному интеллекту OpenTalks.ai.
Под катом – даты, подробности проведения и ссылка на регистрацию участников.
Тест Тьюринга в 2015 и 2016
Тест Тьюринга на русском языке проводился два раза: в 2015 году его провела Лаборатория Наносемантика совместно с Фондом Сколково на конференции Startup Village. Победителем стал робот “Соня Гусева” – за человека ее приняли 47% судей. Создатели – команда “Инобот”, возглавлял которую Иван Голубев. Сейчас он является руководителем проектов в компании Just AI.
В 2016 году Тест Тьюринга мы проводили вместе с Microsoft и Сколково. Призёром стал Иван Шумилов. Где и что сейчас делает Иван – мы не знаем, надеемся, он всё так же трудится на благо роботов.
Что такое Тест Тьюринга?
Напомним, что тест назван в честь английского математика Алана Тьюринга: тест предлагает способ оценки того, насколько робот может адекватно вести диалог с человеком. Тест считается пройденным, если независимый эксперт в процессе анонимного параллельного общения с роботом или человеком не сможет определить, кто есть кто.
Правила конкурса в 2019
Новый Тест Тьюринга будет отличаться от тех, что мы проводили ранее. Мы решили изменить правила в сторону менее научного, но более весёлого соревнования.
После регистрации на конкурс участники получают анонимные логины-пароли, с которыми они подключат своих чат-ботов к единому API, который предоставит “Наносемантика” за три недели до мероприятия.
Каждый участник может выставить на конкурс до 3-х ботов. Каждый чат-бот должен обладать своей уникальностью и индивидуальность (например, личности «Блондинка Пенни», «Всезнайка Шелдон», «Илон Маск», «Владимир Жириновский»).
Для каждого уникального бота будет обеспечена пара человека-добровольца. Задача этого представителя человеческой расы – сыграть роль с такой же индивидуальностью, общаясь с собеседниками. Т. е. люди попытаются пройти Антитест Тьюринга, притворившись роботом.
Чаты со всеми ботами и гуманоидами будут доступны для любого собеседника во время проведения конференции OpenTalks.ai 14-16 февраля 2019 года через Телеграм. Каждый желающий сможет выступить экспертом, поговорить с несколькими собеседниками и попробовать угадать, с кем он разговаривает, задав 6 вопросов. Эксперту будет видно лишь имя собеседника, который может оказаться или ботом, или человеком.
Лучшим будет признан бот, которого максимальное количество независимых экспертов признало человеком.
Призами будет награждены 3 команды с чат-ботами, 3 добровольца за лучшую роль бота и 3 эксперта с лучшими результатами угадывания.
Такой Тест Тьюринга, конечно, близок к грубому нарушению закона штата Калифорния (мы об этом законе писали ранее), но мы ведь не в Калифорнии, да и чат-боты участников ничего не будут пытаться продать посетителям конференции. Шутка.
Мы лично («Наносемантика») в конкурсе не участвуем, предоставляем платформу и нескольких базовых ботов-участников теста.
Роудмэп конкурса
- 29 декабря 2018 – Объявление конкурса и правил. Старт регистрации заявок на участие.
- 24 января 2019 – Открытие API для компаний-участников.
- 7 февраля 2019 – Окончание регистрации команд-участников.
- 12 февраля 2019 – Тестирование ботов. Тренинг добровольцев.
- 14 февраля 2019 – Старт Теста Тьюринга.
- 16 февраля 2019 – Окончание Теста Тьюринга. Подведение итогов и награждение победителей.
За всеми обновлениями по конкурсу вы можете следить на сайте мероприятия.
Все желающие принять участие в Тесте Тьюринга смогут это сделать 14-16 февраля через Телеграм-бота @TuringTestRussiaBot.
Все подробности напишем в январе. Хороших вам праздников!
Обратный тест Тьюринга
Что такое тест Тьюринга
Тест Тьюринга был разработан в 1950 году английским математиком Аланом Тьюрингом – пионером компьютерных наук, который помог расшифровать код машины Enigma. Задачей теста было изучить интеллект машин и понять, смогут ли люди отличить мышление робота и человека. Эксперименты проводили в текстовом виде, общаться можно было опосредованно. Человек вел беседу с другим человеком и компьютером, и в результате должен был догадаться, кто из двух собеседников – робот. Создание теста Тьюринга – одно из ключевых событий в истории ИИ. Почитать о других значимых открытиях можно в нашем материале.
Впервые пройти тест Тьюринга удалось в 2014 году Жене из Одессы или чат-боту «Евгению Густману», которого разработали российские и украинские программисты.
Способности компьютеров проверяют до сих пор. Например, с 2015 года в России ежегодно устраивают онлайн-тестирование, где группа экспертов в ходе индивидуального общения с роботом голосует за его «человечность». Кстати, попробовать отличить человеческий перевод от сделанного компьютером можно в тесте Тьюринга от СБъ.
Обратный тест Тьюринга: что это и зачем он нужен
На самом деле мы сталкиваемся с тестом Тьюринга довольно часто, только теперь не люди, а компьютер проверяет нашу с вами человечность и интеллект, поэтому он и называется обратным. Мы решаем его при регистрации на сайтах или в социальных сетях, при смене паролей или выгрузке файлов. Тест помогает предотвратить взломы аккаунтов и баз данных, несанкционированный сбор информации, подмену голосов в социальных опросах. Для защиты данных система придумывает задачи, с которыми легко может справиться человек, а компьютер – нет. Такой обратный тест Тьюринга называют CAPTCHA.
CAPTCHA и ее виды
Использовать термин CAPTCHA (Completely Automated Public Turing Test to Tell Computers and Humans Apart) начали в 2000 году в институте Карнеги-Меллона.
Дословно он переводится как «полностью автоматизированный публичный тест Тьюринга для различия компьютеров и людей». Чаще всего мы решаем вот эти капчи:
Текстовые капчи
В этом тесте пользователю необходимо ввести символы, изображенные на рисунке. Система искажает и перечеркивает надписи, использует несколько видов шрифтов, добавляет шумы и прозрачность на текст. Компьютеру тяжело правильно считать символы из-за отсутствия четких границ, размытия и других помех.
Источник
Капчи с изображениями
Здесь пользователю предлагают отметить определенный тип объектов на картинке. Например, выбрать все изображения с природой или те, где есть светофор. Такие тесты считаются более сложными, так как требуют смыслового анализа.
Источник
Арифметические капчи
Ну, здесь все просто. Алгоритм предлагает решить легкие примеры, при этом цифры тоже могут быть заблюрены или искажены.
Источник
ReCAPTCHA
Кроме текста содержит аудиодорожку, в которой воспроизводит символы с картинки.
Такой вариант подходит и для людей с ограниченными возможностями. Поэтому крупные корпорации, например, Google, используют именно этот тип.
Источники
- Коробкова С., Скрибцов П. Обратный тест Тьюринга – противостояние естественного и искусственного интеллекта
- Машенков И. Автоматический тест Тьюринга «CAPTCHA»
- Робсон Д. Минимальный тест Тьюринга: докажи одним словом, что ты – человек
Теги:тест тьюринга
Computer AI проходит тест на Тьюринга в «World First ‘
Опубликовано
Источник изображения, Владимир Веселов
. Компьютерная программа под названием «Юджин Густман», которая имитирует 13-летнего украинского мальчика, прошла тест Тьюринга на мероприятии, организованном Университетом Рединга.
Тест проверяет, могут ли люди определить, разговаривают ли они с машинами или с людьми.
Эксперимент основан на игре вопросов и ответов Алана Тьюринга Могут ли машины думать?
Сообщается, что ни один компьютер ранее не проходил тест в этих условиях.
Однако некоторые эксперты по искусственному интеллекту оспорили победу, предполагая, что состязание было в пользу чат-бота.
Тест Тьюринга 65-летней давности считается успешно пройденным, если компьютер ошибочно принимается за человека более 30% времени во время серии пятиминутных разговоров по клавиатуре.
7 июня Юджин убедил 33% судей Королевского общества в Лондоне, что это был человек.
Image caption,
Человек или машина? Взгляд на один из разговоров.
Другие системы искусственного интеллекта (ИИ) также участвовали в соревнованиях, включая Cleverbot, Elbot и Ultra Hal.
Среди судей были актер Роберт Ллевеллин, сыгравший интеллектуального робота в научно-фантастическом ситкоме BBC Two «Красный карлик», и лорд Шарки, возглавивший в 2013 году успешную кампанию за посмертное помилование Алана Тьюринга, обвиненного в гомосексуализме.
0005
Евгений был создан Владимиром Веселовым, который родился в России и сейчас живет в США, и уроженцем Украины Евгением Демченко, который сейчас живет в России.
Стенограммы разговоров в настоящее время недоступны, но могут появиться в будущих научных статьях.
Судей и скрытые контрольные группы людей держали отдельно на протяжении всего теста.
Это видео невозможно воспроизвести
Чтобы воспроизвести это видео, вам необходимо включить JavaScript в вашем браузере.
Медиа-заголовок,
Ученые соревнуются в тесте Тьюринга
Мероприятие было организовано Школой системной инженерии Университета Рединга в партнерстве с RoboLaw, организацией, финансируемой ЕС, которая занимается изучением регулирования новых робототехнических технологий.
Алан Тьюринг был английским математиком, дешифровальщиком военного времени и пионером информатики.
Историческое
Мероприятие было названо организаторами «историческим», заявив, что ни один компьютер ранее не проходил тест.
«Некоторые утверждают, что Тест уже пройден», — сказал Кевин Уорвик, приглашенный профессор Университета Рединга и заместитель проректора по исследованиям Университета Ковентри.
«Тест Тьюринга применялся к аналогичным соревнованиям по всему миру. Однако это событие включало в себя больше одновременных сравнительных тестов, чем когда-либо прежде, было независимо проверено и, что особенно важно, разговоры были неограниченными.
«Настоящий тест Тьюринга». не задает вопросы или темы до разговоров. Поэтому мы с гордостью заявляем, что тест Алана Тьюринга был впервые пройден в субботу».0005
Профессор Ноэль Шарки, ведущий эксперт в области робототехники и искусственного интеллекта, сказал: «Это действительно большое достижение для Юджина. Это была очень умная уловка — притвориться 13-летним украинским мальчиком, что сдерживает разговор. Но эти соревнования действительно хороши для развития».
Но другие раскритиковали это утверждение.
«Это чепуха, — сказал профессор Стеван Харнад газете Guardian.
«Мы не прошли тест Тьюринга. Мы даже не приблизились».
Хью Лебнер, создатель другого теста Тьюринга, также раскритиковал эксперимент Университета Рединга за то, что он длился всего пять минут.
«Едва ли это очень проницательно», — сказал он Huffington Post, отметив, что Юджин ранее уступал семи другим системам в своем собственном 25-минутном тесте на приз Лебнера.
BBC не несет ответственности за содержание внешних сайтов.
Какой ИИ ближе всех прошел тест Тьюринга?
«Могут ли машины думать?» — спросил Алан Тьюринг в 1950 году. Да, могут, если человек не может отличить компьютер от человека. Очень влиятельный, но широко критикуемый тест Тьюринга стал одним из самых важных понятий в философии ИИ.
Семьдесят лет спустя приложения ИИ стали частью нашей повседневной жизни и даже побеждают людей в некоторых из самых сложных видеоигр в мире. Тем не менее, современный ИИ слаб, поскольку узкоспециализированные задачи ограничивают его успех.
Другими словами, даже если ИИ обыграет Гарри Каспарова в шахматах, он не сможет победить его в других областях человеческой деятельности.
Как пройти тест Тьюринга?
Поместите компьютер (A) и человека (B) с одной стороны и человека-оценщика (C) с другой стороны. Если оценщик (С) не может распознать, какой кандидат является человеком, а какой — компьютером после серии вопросов, компьютер успешно прошел тест Тьюринга.
Компьютер проходит тест, если оценщик (C) принимает ошибочные решения так же часто, когда в игру играют с компьютером (A), как и когда в игру играют с человеком (B).
На сегодняшний день ни один ИИ не прошел тест Тьюринга, но некоторые подошли к нему довольно близко.
Присоединяйтесь к блокчейн-хакатону Partisia, проектируйте будущее, приобретайте новые навыки и побеждайте!
В 1966 году Джозеф Вейценбаум (ученый-компьютерщик и профессор Массачусетского технологического института) создал ELIZA, программу, которая искала определенные ключевые слова в напечатанных комментариях, чтобы преобразовать их в предложения.
Его сценарий притворялся роджерианским психотерапевтом, который давал «ненаправленные» ответы. Если ELIZA не могла найти ключевое слово в тексте пользователя, она предоставляла «ненаправленный» ответ, содержащий ключевое слово ранее в разговоре. Вот почему ELIZA смогла обмануть некоторых людей и заявила, что является одной из программ, прошедших тест Тьюринга. Тем не менее, ELIZA была легкой мишенью, если пыталась намеренно задавать вопросы, которые могли привести к ошибке компьютера.
В 1972 году PARRY, чат-бот, моделирующий поведение параноидального шизофреника, использовал тот же подход, что и ELIZA. Во время теста Тьюринга две группы психиатров проанализировали стенограммы разговоров как реальных пациентов, так и компьютеров, работающих под управлением PARRY. Психиатров обманывали в 48% случаев — впечатляет!
Перенесемся в 2014 год. Eugene Goostman, компьютерная программа, имитирующая 13-летнего мальчика из Украины, попала в заголовки газет, заявив, что прошла тест Тьюринга.
Бот убедил 33% судей-людей в том, что это человек (прочитайте некоторые записи разговоров здесь). Однако судей было всего трое, а значит, одурачили только одного – не совсем значительный результат. Еще одна проблема заключалась в том, что, изображая чат-бота 13-летним ребенком из Одессы, судьи пропускали бессмысленные предложения и очевидные ошибки, объясняя это знанием английского языка и юным возрастом.
В 2018 году голосовой ИИ Google Duplex позвонил парикмахеру и успешно договорился о встрече перед публикой. Парикмахер не поняла, что разговаривает с искусственным интеллектом. Google Duplex, который считается новаторским достижением в голосовой технологии искусственного интеллекта, также далек от прохождения теста Тьюринга.
Duplex — это система глубокого обучения, представляющая «Вторую волну искусственного интеллекта», которая сотни часов обучалась выполнению очень узких задач. Обучение в реальном времени, глубокое понимание, рассуждения требуют настоящих когнитивных способностей, которых нет ни у одной из программ ИИ Второй волны.
Как только человек поведет разговор в другом направлении, Google Duplex потерпит неудачу.
Мы близки к разработке ИИ, который, наконец, пройдет тест Тьюринга?
Некоторые предполагают, что это может произойти примерно в 2030 году; некоторые говорят, что не раньше 2040 года. Большинство ученых, занимающихся искусственным интеллектом, согласны с тем, что нам нужно больше узнать о человеческом мозге, прежде чем воспроизвести то, что мы до сих пор не до конца понимаем.
По словам нейробиолога, производителя компьютерных игр и мастера по шахматам Демиса Хассабиса, чтобы по-настоящему продвинуться в области ИИ, нам необходимо понять, как человеческий мозг работает на алгоритмическом уровне.
«Если бы мы знали, как концептуальное знание формируется из перцептивных входных данных, это крайне важно, чтобы значения символов в системе искусственного языка основывались на сенсорной реальности», — сказал Хассабис.
По сути, Алан Тьюринг использовал естественный человеческий мозг как прототип искусственного интеллекта.