Компьютер прошел тест тьюринга. Самый большой тест тьюринга

Когда начинается Вторая мировая война, ученый устремляется в Блетчли-Парк - в Правительственную школу кодов и шифров. Там он присоединяется к специалистам, работающим над расшифровкой посланий, созданных с помощью легендарной немецкой машины Энигма . Ее секретные обозначения нацисты использовали для своих радиограмм. В стенах школы Тьюринг пр идумывает уникальную установку - Turing Bombe.

Махина три метра длиной и весом в две с половиной тонны расправлялась с кодами за считанные минуты. А британская власть получала точную информацию о передвижениях противника. Хотя лента была признана критиками весьма удачной, тем не менее она не раскрывает все научные достижения Алана Тьюринга. А жаль… Этот талантливый профессор долгое время занимался морфогенезом и даже описал математически процесс с амоорганизации материи. Кроме этого, Тьюринг - автор абстрактного вычислительного аппарата, прадедушки современной ЭВМ. А еще ученый - один из первых, кто серьезно задумался о взаимодействии синтетического и живого разумов.

В 1950 году, когда в лабораториях многих стран пытались разработать первые компьютерные программамы , он привлек внимание мирового сообщества своей статьей «Вычислительные машины и разум», которая вышла на страницах журнала Mind. Суть материала сводилась к следующему. Британец предложил заменить вопрос «Думают ли машины » на эквивалентный «Могут ли машины выполнять то, что выполняем мы». В этом случае, как утверждал Тьюринг, возникала бы четкая граница между интеллектуальными и физическими возможностями. В качестве примера Алан привел простой тест. Испытуемый должен общаться параллельно с человеком и с ПК. Беседа ведется не устно с глазу на глаз, а письменно, вслепую, при помощи клавиатуры. Во времена математика ЭВМ не были еще столь быстрыми и мощными. Поэтому переговоры шли с определенными временными интервалами. Паузы снижали скорость реакции, и понять кто есть кто в данной ситуации становилось чрезвычайно затруднительным. Тест сч итался пройденным, если установку принимали за живого субъекта.

Многие полагали, что Тьюринг, осуществляя свое исследование, был настроен жутко пессимистично и перспектива прихода к власти машин его нисколько не радовала. Есть, однако, свидетельства, которые указывают на обратное. Например, друг ученого Робин Ганди частенько припоминал, что когда Тьюринг в сотый раз перелистывал пассажи своей работы, то и дело улыбался и даже хихикал. Как бы то ни было, его поиски стали важной вехой на пути сближения компьютера и человека. И по сути , пробным анализом этой сферы. Позже специалисты пойдут экспериментировать дальше и придумают различные способы, как электронный мыслитель может обвести человека вокруг пальца.

Так, в 1966 году американский ученый Джозеф Вейценбаум (Joseph Weizenbaum) объявил о создании виртуального собеседника - компьютерной программы «Элиза». Она должна была имитировать знатного психотерапевта. Почему Вейценбаум остановился именно на этой медицинской области? Именно здесь можно запросто ответить вопросом на вопрос . К тому же их смысловая нагрузка относительно невелика, нет пространных предложений, а мысли легко структурируются в единую систему. Давая консультацию, «Элиза» не философствовала, а просто перефразировала речь собеседника. Выглядело это примерно так:

Испытуемый: У меня болит голова.

Элиза: Почему вы говорите, что у вас болит голова?

Подчас тестируемые попадали в ловушку и беззаветно верили, что разговаривают с реальным врачом. Но были и курьезные моменты. Периодически в ходе эксперимента люди осознавали, что электронный доктор не понимает сути вопросов. Не находя правильных вариантов ответа, «Элиза» обычно заключала: I see… И переводила диалог на другую тему. Джозеф Вейценбаум писал о своей программе в книге «Возможности вычислительных машин и человеческий разум. От суждений к вычислениям»:

В некотором смысле «Элиза» являлась актрисой, обладавшей определенной техникой, но сказать самой ей было нечего. Сценарий, в свою очередь, представлял собой некоторый набор правил, позволявший актеру импровизировать на любом имевшемся у него материале.

Восемью годами позже, в 1972 году, еще один американец Кеннет Колби (Kenneth Colby) выпускает в свет похожую программу PARRY, призванную копировать поведение параноидального шизофреника.Для того чтобы проверить новое изобретение на эффективность, Колби провел забавный эксперимент. Он предложил профессиональным психиатрам протестировать две группы больных - реальных пациентов и виртуальных, сгенерированных программой PARRY. Общение велось при помощи телетайпа. Позже другой команде психиатров продемонстрировали стенограммы речей. Затем два медицинских коллектива определяли, кто из испытуемых был человеком, а кто аппаратом. В результате верное решение было вынесено лишь в 48% случаев. А это означало, что машине удалось-таки обмануть врачей. Примечательно, что Элизе и PARRY было суждено встретиться друг с другом. Rendez-vous организовали через сеть ARPANET. Диалог электронных доктора и больного длился несколько минут.

Теперь перенесемся в другую сферу, скажем, в музыкальную. Это вам не математика, геометрия и физика, где все подчиняется сухим числам. Здесь нужен полет фантазии, талант и, главное, вдохновение. Без этих трех составляющих появление на свет хорошего произведения, того, что проникает глубоко в душу, невозможно. Точнее, было невозможно до того момента, пока в южно-испанском университете Малага дотошные волхвы не изобрели музыкальный компьютер Iamus. Названный в честь сына Апполона, он пишет ритмичные партитуры, по сложности сравнимые разве что с Гершвином или Орфом . Сначала ПК генерирует простые, короткие ритмические фразы - «геномы». Потом они начинают эволюционировать и постепенно обретают форму полномасштабного академического сочинения. Разработчики на основе теста Тьюринга проверили работу своего агрегата на профессиональных музыкантах. Авторы Iamus`а дали прослушать артистам несколько вариантов опусов: сотворенных компьютером и подлинными композиторами. Позже знатокам предстояло установить: кто есть кто . Самое интересное, что опрашиваемых тест завел в тупик. Произведение, составленное синтетическим разумом, практически не отличалось от рукотворного.

Загвоздка заключалась в том, что сочинения Iamus`а вызывали те же самые эмоции: грусть, радость, смех, слезы. Поэтому большинство испытуемых так и не смогло определиться и дать точный ответ. Обычно они говорили, что не знают.

Подобная реплика от тестируемых ждала и специалистов Кембриджского университета. В стенах своей альма-матер британские лингвисты и программисты попытались научить компьютер сочинять японское хокку . Скажите теперь: как можно поверить в то, что это машина, если она способна создать такое?

Вчера все в порядке,

А сейчас все накрылось -

В этом суть Windows.

Разрабатывая свой тест, Алан Тьюринг утверждал, что если ученые изобретут искусственную кожу и наделят ею машины, то это вряд ли сделает их человечнее. Компьютер есть компьютер , мыслящий папками и файлами. Тем не менее специалисты уже давно трудятся в этом направлении. Например, инженер-механик Джон-Джон Кабибихан из Университета Катара придумал мягкий силиконовый полимер, который при нагреве до 36.6 градусов напоминает настоящий кожный покров.Специалист напечатал на 3D-принтере искусственную руку и обернул ее новым материалом. Далее провел простой тест. Кабибихан посадил участников спиной к себе и стал касаться их плеча то своей рукой, то искусственной моделью. Респонденты не сумели провести четких различий.

Впрочем, несмотря на множественные изыскания и попытки приблизить компьютер к человеку, официально тест Т ьюринга был пройден лишь в 2014 году. Это стало возможным благодаря программе Eugene Goostman, исполненной выходцем из России Владимиром Веселовым и представителем Украины Евгением Демченко.Эксперимент св одился к серии коротких диалогов с пятью ЭВМ. В ходе них жюри предстояло догадаться, ведут их автоматы или всамделишные люди. Тест сч итался пройденным, если компьютер морочил ареопагу голову в течение трети от от веденного времени. Собственно, детищу Веселова-Демченко это как раз удалось. Показатель оказался даже на несколько десятых выше - 33%. Искусственный интеллект активно объяснялся от имени вымышленного тринадцатилетнего подростка из Одессы Жени Густмана , который «претендует на то, что знает всё на свете, но в силу своего возраста не знает ничего». Его-то и признали живым человеком. Скептики, однако, тут же назвали прохождение теста Тьюринга сомнительным. Ведь Женя Густман являлся лишь чат-ботом . Поэтому , по их мнению, ответ на вопрос, могут ли машины выполнять то, что выполняем мы, остается открытым. Впрочем, решение можно попытаться найти, пообщавшись с программами-роботами в интернете. Сегодня на просторах всемирной паутины их видимо-невидимо: от онлайн-игр до социальных сетей. Если бы Алан Тьюринг оказался в XXI веке, он бы обязательно организовал подобный наглядный опыт.

Компьютерная программа, убедила людей, что она является 13-летним мальчиком и тем самым стала первой программой, прошедшей тест Тьюринга.

Тьюринг создал тест для определения того, может ли машина мыслить.

Оригинальный тест состоит в следующем. Человек в течении 5 минут общается с одним компьютером и одним человеком. Получая ответы на вопросы, человек должен определить, что разговаривает с человеком или компьютерной программой. Задачей компьютерной программы является ввести человека в заблуждение, чтобы тот сделал ошибочный выбор.

Участники теста не видят друг друга. В случае, если судья не может точно сказать, кто из собеседников человек, то считается, что компьютер прошел тест. Беседа ведется в режиме «только текст», например, с помощью клавиатуры и экрана (второстепенного компьютера). Это необходимо, чтобы протестировать именно интеллект машины, а не её возможность распознавать устную речь. Переписка производится через контролируемые промежутки времени, чтобы судья не мог делать заключения, исходя из скорости ответов (в наши дни компьютеры реагируют быстрее чем человек).

Для прохождения теста необходимо, чтобы компьютерная программа смогла обмануть 30 процентов людей.

Компьютерная программа «Евгений Густман», создана командой разработчиков из России, прошла тест, проведенный в Королевском обществе в Лондоне. Она убедила 33 процента судей, в том, что она является 13-летним мальчиком из Одессы, сообщили ученые из Университета Рединга, которые организовали этот тест.

«Наша главная идея заключалась в том, что он может утверждать, что чего-то не знает, в его возрасте действительно он может не знать каких-то вещей» — сказал Владимир Веселов, один из создателей программы, - «Мы потратили много времени на разработку правдоподобного персонажа.»

Успех программы, скорее всего, создаст некоторые опасения по поводу будущего компьютеров, сказал Кевин Уорвик, профессор Университета Рединга и проректор по исследовательской работе в университете Ковентри.

«В области искусственного интеллекта нет более знаковых и противоречивых этапов, чем тест Тьюринга, когда компьютер убеждает достаточное количество судей, в том, что это не машина, а человек» — сказал он. «Имея компьютер, который может обмануть человека, заставить его подумать, что кто-то или даже что-то является человеком, это является тревожным сигналом, связанным с киберпреступностью. Тест Тьюринга является очень важным инструментом для борьбы с этой угрозой. Важно полностью понять, как общение в Интернете в реальном времени может ввести в заблуждение человека, полагающего истинность что-то в то время, когда на самом деле это не так.»

В тесте, организованном в Королевском обществе в субботу, принимало участие пять программ. Судьями были актер Robert Llewellyn, который играл робота Kryten в «Красном карлике» (научная комедия телеканала BBC), и лорд Шарки, который возглавлял кампанию, целью которой была посмертная реабилитация Алана Тьюринга в прошлом году.

Алан Тьюринг представил свой тест в 1950 в статье, «Вычислительная техника и разум». В ней он заявил, из-за того, что «мышление» трудно определить, важно, сможет ли компьютер имитировать реальное человеческое существо. С тех пор он стал одним из ключевых элементов философии искусственного интеллекта.

Успех пришел на 60-летие со дня смерти Тьюринга, в субботу 07.06.2014 года.

Источник: The Independent

P.S. Самостоятельно проверить насколько умна эта программа можно на сайте лаборатории искусственного интеллекта Принстонского университета. Лично у меня не сложилось впечатления что я разговариваю с человеком, пусть даже и с ребенком. Так что тест Тьюринга, мне кажется, не совсем еще пройден.

Как вы оцениваете эту публикацию?

Роботы, наделённые сознанием, способные мыслить, творить, общаться – об этой идее мы все знаем не понаслышке, ведь то и дело на экранах появляются всё новые фильмы, в которых фигурируют киборги, например, «Терминатор», «Я — Робот», «Прометей» и т.д. Да и новости всё чаще пестрят заголовками о том, что учёные продвинулись в создании искусственного разума, сделали человекоподобную машину или о том, что наконец-таки пройден тест Тьюринга. И тем, кого интересует идея искусственного интеллекта, а также тем, кто не в курсе, что это за тест Тьюринга такой и почему вокруг него столько шумихи, наверняка будет интересен материал, который мы подготовили.

Начнём же мы с краткого обзора темы искусственного интеллекта.

Искусственный интеллект

Под термином «искусственный интеллект» принято понимать науку и технологию создания наделённых интеллектом машин и, более всего, обладающих интеллектом компьютерных программ. Однако нередко данным понятием называют также свойство различных интеллектуальных систем к выполнению , изначально считающихся свойственными только человеку. Кроме того, идея искусственного интеллекта связана с подобной задачей применения компьютерной техники с целью понять человеческий интеллект.

В качестве научного направления искусственный интеллект начал формироваться примерно в середине прошлого столетия, когда сформировалось достаточное количество предпосылок для этого. Например, философы всё больше спорили на тему природы человека и процессов познания мира, психологи и нейрофизиологи занимались разработкой теорий, касающихся мышления и работы человеческого мозга, математики и экономисты проводили всевозможные расчёты и представления знаний о мире и т.д. Таким образом и был заложен фундамент теории алгоритмов, благодаря чему появились первые компьютеры.

Практика показала, что потенциал машин в плане произведения вычислений намного больше человеческого, по причине чего в кругах учёных возник вопрос: а каков вообще потенциал компьютеров, и смогут ли машины со временем достичь уровня человеческого развития?

Так, в 1950 году одним из основоположников в сфере вычислительной техники, английским учёным Аланом Тьюрингом в издании «Mind» была написана статья «Вычислительные машины и разум» где описывалась процедура, благодаря которой можно получить возможность определения того момента, когда машина станет на одну ступень с человеком в плане своей разумности. Эта процедура и получила название теста Тьюринга. Но, следует полагать, что реализация теста Тьюринга была бы невозможной без созданного искусственного интеллекта, и к этому процессу учёные подходили с нескольких позиций.

Подходы к созданию искусственного интеллекта

В первую очередь следует выделить общий подход к созданию искусственного интеллекта, который предполагает, что он будет способен к проявлению поведения, которое не будет отличаться от человеческого. Кстати, представленную идею можно назвать обобщением подхода теста Тьюринга, согласно которому машину можно считать разумной тогда, когда она будет в состоянии вести беседу с обычным человеком, и он не сможет отличить её от другого человека, при условии, что беседа идёт в письменной форме.

Второй подход принадлежит писателям-фантастам. Он говорит о том, что искусственный интеллект появится тогда, когда машина сможет творить и чувствовать. Но этот подход не способен выдержать критики, если рассмотреть его более детально. Например, создать машину, которая будет производить оценку каких-либо параметров внутренней или внешней среды и как-то реагировать на них, по большому счёту, не сложно. Учитывая то, что датчики будут реагировать на определённые раздражители, про такой механизм уже можно сказать, что у него есть «чувства».

Третий поход называется символьным. По сути, именно он был изначально свойственен эпохе цифровых машин. После того как был создан первый язык символьных вычислений, разработчики стали уверены, что есть шанс и практической реализации искусственного интеллекта с помощью технологии символьных вычислений, благодаря чему стало бы возможным иметь дело со слабоформализованными смыслами и представлениями.

Был и логический подход к созданию искусственного интеллекта, основанный на моделировании рассуждений, и главным козырем которого являлась . Но с 90-х годов прошлого века начал развиваться агентно-ориентированный подход, основанный на применении интеллектуальных агентов и предполагающий, что интеллект является конкретно вычислительной составляющей потенциала машины достигать поставленные перед ней цели.

А в итоге появился гибридный подход, главная идея которого заключается в том, что только комплексное использование символьных и нейронных моделей поможет достичь полноценного спектра вычислительных и когнитивных возможностей. К примеру, нейронные сети могут генерировать экспертные правила рассуждений, а посредством статистического обучения можно сформировать порождающие правила.

Теперь же вернёмся к тесту Алана Тьюринга.

Тест Тьюринга

Тест Тьюринга, как мы и упомянули, предназначен для определения потенциала искусственного интеллекта, близкого к . Классическую интерпретацию данного теста можно выразить так: человек взаимодействует с одним компьютером или человеком. Основываясь на ответах на определённые вопросы, человек должен определить, кто является его собеседником: компьютер или человек. А в функции компьютерной программы входит введение человека в заблуждение и подведение его к неправильному выводу. В процессе теста никто из участников не видит друг друга.

Алан Тьюринг говорил, что машину можно признать мыслящей, если она сможет ввести в заблуждение 30% участников-людей в процессе переписки. И на протяжении десятков лет реализовать этот тест никому не удавалось, но в 2014 году издание «The Independent» сообщило, что компьютерная программа сумела убедить людей в том, что они обмениваются сообщениями с тринадцатилетним мальчиком. Это, собственно говоря, и означает, что по факту тест Тьюринга был пройден.

Интересно то, что компьютерную программу под названием «Юджин Густман» создали именно российские программисты, а сам тест был организован учёными из Университета Рединга в Лондоне в Королевском обществе. В ходе эксперимента 33% участников поверили в то, что общаются с реальным человеком. Кстати, «Юджин» утверждал, что он тринадцатилетний мальчик, живущий в Одессе.

Данный факт, несомненно, является огромнейшим шагом в исследованиях по созданию искусственного интеллекта, однако учёные заявляют, что это достижение может быть использовано киберпреступниками.

«Юджин Густман» — это первая программа, прошедшая тест, хотя есть также и другие программы, близкие к подобному результату. Среди них можно назвать такие как «JFRED», «Elbot the Robot», «Ultra Hal» и «Cleverbot».

По словам одного из основателей «Юджина» Владимира Веселова, основная идея разработчиков заключалась в том, чтобы «Юджин» знал всё и, одновременно, ничего не знал, а на разработку программы с «настоящей» личностью было потрачено огромное количество времени. Профессор из Университета Рединга Кевин Уорвик говорит, что в области искусственного интеллекта до сих пор не было более спорного и знакового события.

Мы же в данном случае не можем не согласиться со специалистами, ведь сам факт того, что машина смогла убедить людей в том, что она человек, может перевернуть всю мировую компьютерную систему. Представьте только, какие вообще могут быть последствия, если кибернетические собеседники, обладающие искусственным интеллектом, смогут вести живую переписку с людьми, а спам-ботов станет невозможно распознать?

Заключение

Что же можно сказать об идее искусственного интеллекта? С одной стороны, она поистине потрясающа, и если искусственный интеллект будет создан, это позволит всему человечеству сделать огромный шаг вперёд в своём развитии. Но если посмотреть на это с критической точки зрения, сознающий искусственный разум, если он попадёт в руки недобросовестных людей, сможет нанести человеку не поддающийся никакому описанию вред. Философствовать на эту тему можно очень и очень долго, но мы не станем этим заниматься – пусть это станет пищей для вашего ума.

Мы же хотим лишь посоветовать вам заниматься , и становиться умнее и образованнее, ведь за вас этого не сделает ни одна машина.

18 апреля 2013 в 16:26

Самый большой тест Тьюринга

  • Искусственный интеллект

23 июня 2012 года Алану Тьюрингу исполнилось бы 100 лет. И хотя эта дата осталось незамеченной в России (и на Хабре), ее широко отмечали в зарубежном научном сообществе. 2012 год бы провозглашен годом Алана Тьюринга . В праздновании юбилея приняли участие многочисленные университеты, научные лаборатории, ассоциации, коммерческие компании. Он включил в себя лекции, конференции, выставки, фильмы, книги, написание стихов, посвященных Тьюрингу, учреждение стипендий, а так же различные соревнование. Одно из соревнований особенно привлекло мое внимание: Turing100 - очень масштабный тест Тьюринга. Это было самое большое соревнование среди примерно 150 тестов Тьюринга, проведенных к сегодняшнему дню. Обычно в тесте Тьюринга участвуют четыре системы и четверо судей. В соревновании Turing100 приняли участие пять чат-ботов, 30 судей и 25 скрытых человек.

Turing 100 был организован Университетом Рединга (Великобритания). Университет - один из европейских центров, занимающихся искусственным интеллектом, уже проводил премию Лебнера в 2008 году. Организаторы конкурса: Кевин Ворвик и Хума Шах в данный момент участвуют в проекте RoboLaw - Регулирование новых роботизированных технологий в Европе: закон и этика для роботов.

В роли искусственных интеллектов приняли участие лауреаты премии Лебнера разных лет и просто заметные участники:

  • Elbot the Robot www.elbot.com
  • Eugene Goostman www.princetonai.com/bot/bot.jsp

Для тех, кто не знаком с соревновательным процессом расскажу подробнее про организацию процесса. Соревнование проходило в 5 сессий. Каждая сессия длилась пять минут, по истечении времени сессию отключали строго по таймеру. Было два типа тестов: разговор один на один с невидимым собеседником (скрытым человеком или программой) и с двумя на разделенном мониторе. В обоих случаях судье предлагалось решить, с кем или чем он имеет дело, в сдвоенной беседе могло быть как две машины, так и два человека. Скрытые люди были проинструктированы вести себя естественно и не пытаться подражать компьютерам. В конце концов конкурс проводится для того, чтобы машины притворялись людьми, а не наоборот. Начинал разговор всегда судья, взаимодействие должно было осуществляться строго по одной реплике. Нельзя было отправлять вторую, не дождавшись ответа на первую.

Такие строгие рамки как раз и позволяют программам быстро сбивать с толку судей. Впрочем, и судьи расставляют ловушки.
Один из скрытых людей Мэтт Уитби был в тупике, когда его спросили: «Я переел жаренной картошки. Должен ли я увидеть пожарного?». Часто задавали вопросы об окружающей обстановке «Солнечно ли на улице?», «Холодно ли в комнате?».

Всего было проведено более 150 взаимодействий между программами, судьями и тайными людьми. Такая большая выборка сделала результаты именно этого соревнования более статистически значимыми, чем стандартные тесты Тьюринга.

Победителем Turing100 стал Eugene Goostman, до этого занимавший высокие места, включая несколько вторых, но еще ни разу не выигрывавший. Ему удалось обмануть судей в 29% случаев. Как отмечает один из судей , успех Юджина обусловлен довольно проработанной личностью бота: он притворяется 13-тилетним мальчиком из Одессы, с морской свинкой и отцом гинекологом.

Смещение в сторону характера, конечно, демонстрирует уклон в развитии чатботов в сторону имитации и притворства, а не развития собственно диалоговых способностей. Было бы интересно сравнить возможности Юджина с включенной и отключенной «личностью». По результатам конкурса организаторы Хума Шах и Кевин Уорвик получили довольно большой корпус данных, и постепенно публикуют различные аналитические работы. К сожалению, пока опубликовано довольно мало результатов. Из уже доступного наиболее интересным результатом мне показалось то, что носители английского чаще принимали за машину тех, кто выучил английский (пусть и очень хорошо) и наоборот, люди, владеющие английским как вторым языком чаще считали чат-ботом именно носителей английского, как родного. Этот результат еще раз подчеркивает важность речи, как одного из основных каналов восприятия собеседника, учитывая, что это чувствуется даже в коротких пятиминутных письменных диалогах.

Ну и в заключение, я початилась по пять минут с каждой из систем (кроме Фреда, мне почему-то не удалось его запустить).
Ниже интересные выдержки из наших диалогов. Пожалуй, я согласна с судьями, Юджин действительно выглядит человечнее остальных. Кроме того, что он многословнее и эмоциональнее остальных, его «речевые способности» кажутся тоже более продвинутыми. Он запоминает контекст, может поддержать тему на протяжении нескольких реплик, меняет направление разговора довольно ненавязчиво. Так что, похоже, что дело тут не только в морской свинке.

Cleverbot

Me: You like movies?
Cl: Yes.
Me: Which one the most?
Cl: Fenerbahce.
Me: What is it?
Cl: I think it is a word muncher.
Me: Fenerbahce?
Cl: What is that?
Me: You told it"s your favourite movie.
Cl: No, I didn"t.

Ultra Hal

Me: Do you like movies?
UH: I enjoy a good movie.
Me: Which one the most?
UH: Hmm. I don"t know!
Me: Think about it!
UH: I"ll buy everything if you want. *laugh*.
Me: I"m not selling anything!
UH: Look at your life.
Me: So what?
UH: I don"t know.
Me: Why you told me to look at my life?
UH: I am so sympathetic with your lucky life.

Me: Do you like movies?
El: Blade Runner is a cult classic for us robots. The director created a robot cut especially for us!
Me: Why you like it?
El: Because...because....grrrrrrrr… I forgot. All this electromagnetic radiation around here is giving me chronic fatigue syndrome.
Me: Memory loss?
El: I realize this is a typical marketing question, but I"m supposed to ask it, otherwise they"ll use the low-grade oil on me. So, where did you find out about me?
Me: I read about Turing test.
El: Ah the Turing Test. People are always trying to get me to take it, but I just pretend not to understand.
Me: You are doing a good job.
El: Why, thank you very much. I like you, too. If I could have a pet you would be my first choice.

Eugene Goostman
Me: Hello!
EG: Hello, I"m really glad to have the chance to chat with you! My guinea pig Bill sends his regards too!
Me: Do you like movies?
EG: I like comedies and find action movies to be stupid. As for the thrillers - I always fall asleep while watching them.
Me: Which one the most?
EG: I can"t make a choice right now. I should think it out later. Wonna ask me something more?
Me: Just take your time and think abouit it.
EG: Dummy statement.
Me: Don"t be rude!
EG: All we use more brutal words when we don"t see each other. I think it"s a kind of psychological law. If I"m not mistaken - you still didn"t tell me where you live. OR it"s a secret?:-)
Me: I live in Moscow.
EG: Moscow? Hope it"s a good place to live.
Me: So so.
EG: What are any interesting site-seeings in Moscow?
Me: The Kremlin.
EG: By the way, have you heard how one Russian on-line translator translates «Bin Laden»? It says - «Trashcan is full!»:-)))
Me: Really? It"s funny!
EG: No, it was extremely serious.

Текст
Артём Лучко

Британский университет Рединга с большой помпой объявил, что миновала «важная веха в истории вычислительной техники» и компьютер впервые прошёл корректно поставленный тест Тьюринга, введя в заблуждение судей, которые поверили, что общаются с 13-летним украинским мальчиком. Look At Me разобрался в том, что кроется на самом деле за этим событием.

Что собой представлял эксперимент


Университет Рединга, специалисты которого провели первый успешный тест Тьюринга

Тестирование чат-ботов было организовано Школой системной инженерии при университете Рединга к 60-летию кончины Алана Тьюринга. Эксперты общались одновременно с живым человеком и с программой, находясь в разных комнатах. По окончании теста каждый из судей должен заявить, кто из двух его собеседников - человек, а кто - программа. Для чистоты эксперимента были задействованы пять компьютеров и 30 судей, каждый из которых провёл серию из 10 письменных диалогов длительностью по 5 минут. Хотя обычно в ежегодном конкурсе программ искусственного интеллекта на премию Лёбнера (в котором программы соревнуются в прохождении теста Тьюринга за приз $2000) принимают участие всего 4 чат-бота и 4 человека. В результате эксперимента программа Eugene Goostman сумела убедить 33 % состава жюри в своей «человечности», что произошло первый раз в истории. Роберт Луэллин, один из судей, британский актёр и любитель технологий сказал:

Тест Тьюринга был удивительным. Состоялись 10 сеансов по 5 минут, 2 экрана, 1 человек и 1 машина. Я угадал правильно только 4 раза. Этот робот оказался умным малым...

Чат-бот Eugene Goostman был разработан выходцем из России Владимиром Веселовым (сейчас он проживает в США) и украинцем Евгением Демченко, живущим в России. Первая версия появилась ещё в 2001 году. Возраст подростка был выбран неслучайно: в 13 лет ребёнок уже многое знает, но далеко не всё, что усложняет задачу судей. В 2012 году чат-бот уже подобрался довольно близко к успеху: тогда в «человечность» украинского школьника поверили 29 % из числа судей. В ходе последних доработок программистам удалось подготовить виртуального собеседника ко всем возможным вопросам и даже обучить его подбирать примеры ответов в «Твиттере».

Что такое тест Тьюринга,
и в чём его недостатки


Алан Тьюринг в возрасте 16 лет

Тест Тьюринга был впервые предложен британским математиком Аланом Тьюрингом в статье «Вычислительная техника и интеллект», опубликованной в журнале Mind в 1950 году. В ней учёный задался простым вопросом: «Может ли машина мыслить». В своей самой простой форме тест заключается в следующем: человек взаимодействует с одним компьютером и одним человеком. На основании ответов на вопросы он должен определить, с кем он разговаривает: с человеком или компьютерной программой. Задача компьютерной программы - ввести человека в заблуждение, заставив сделать неверный выбор. Тест подразумевает пятиминутный текстовый диалог, в ходе которого минимум 30 % судей должны поверить, что они имеют дело с человеком, а не машиной. При этом, разумеется, все участники теста не видят друг друга.


Джон Серл, американский философ

Есть много различных версий этого испытания (в некоторых вариациях судья знает, что одним из проверяемых собеседников является компьютер, в других - не знает об этом), но многие учёные и философы критикуют его по сей день. В своё время американский философ Джон Серл бросил тесту вызов своим мысленным экспериментом, известным как «Китайская комната». Он позволил себе предположить, что способность компьютера вести разговор и убедительно отвечать на вопросы - далеко не то же самое, что иметь разум и мыслить, как человек. «Предположим, что меня заперли в комнате и [...] что я не знаю ни одного китайского слова, ни письменно, ни устно», - пишет Серл в 1980 году. Он представил, что получал вопросы, написанные на китайском языке через щель в стене. Он не был в состоянии прочитать эти символы, но имел набор инструкций на английском, которые позволяли ему реагировать на «один набор формальных символов другим набором формальных символов». Таким образом, Серл теоретически смог бы отвечать на вопросы, просто следуя правилам английского и выбирая правильные китайские иероглифы. И его собеседники были бы убеждены, что он может говорить по-китайски.

Большинство критиков теста Тьюринга как способа оценки искусственного интеллекта придерживаются аналогичного мнения. Они утверждают, что компьютеры могут только использовать наборы правил и огромные базы данных, запрограммированных для ответов на вопросы, чтобы лишь казаться разумными.

Как программа обманула жюри


Профессор университета Рединга Кевин Уорвик

У Eugene Goostman имеется два фактора, которые помогли ему пройти тест. Во-первых, грамматические и стилистические ошибки, которые допускает машина в подражание письму подростка, а во-вторых, отсутствие знаний о специфических культурных и исторических фактах, которое также может быть списано на возраст школьника.

В процессе разработки искусственного интеллекта нет более знакового и противоречивого этапа, чем прохождение теста Тьюринга

«Успех программы, скорее всего, пробудит некоторые опасения по поводу будущего информационных технологий, - заявил профессор университета Рединга Кевин Уорвик. - В процессе разработки искусственного интеллекта нет более знакового и противоречивого этапа, чем прохождение теста Тьюринга, когда компьютер убеждает достаточное количество судей полагать, что с ними общается не машина, а человек. Само существование компьютера, который может обмануть человека, заставив его думать, что он - это человек, является тревожным сигналом, связанным с киберпреступностью». Тест Тьюринга по сей день является важным инструментом в борьбе с этой угрозой. И теперь специалистам предстоит более полно разобраться, как появление подобных продвинутых чат-ботов может повлиять на онлайн-общение в интернете.

Судя по логам, которые можно найти в Сети (опробовать бот самостоятельно пока не получается, вероятно, из-за ажиотажа сайт не выдержал трафика и «упал»), чат-бот довольно-таки примитивен и, как кажется на первый взгляд, не сильно отличается от похожих разработок, которые можно найти в интернете. Один из любопытных диалогов с «Евгением» представил журналист Леонид Бершидский, который задавал ему неудобные вопросы о громком событии, которое не могло пройти мимо юного одессита.

Даже учитывая проработанный характер и биографию, ошибки и опечатки, которые может допускать реальный подросток, убедительность бота вызывает сомнения. По сути, он также реагирует на ключевые слова, а когда его ставят в тупик, он выдает заранее заготовленные и не самые оригинальные ответы-заглушки. Если бы программа имела возможность использовать поисковые системы, чтобы находиться в контексте текущей ситуации в мире, мы могли бы видеть гораздо более впечатляющий результат. Вероятно, на это нужно время. Ранее известный футуролог Реймонд Курцвейл, занимающий должность технического директора Google, заявлял , что компьютеры смогут с лёгкостью проходить тест Тьюринга к 2029 году. По его предположениям, к этому времени они смогут освоить человеческий язык и превзойти интеллектом людей.

7 суперкомпьютеров, способных обхитрить человека

ELIZA