Минимальный интеллектуальный тест сигнала

Тест минимального интеллектуального сигнала , или MIST , представляет собой разновидность теста Тьюринга, предложенного Крисом МакКинстри , в котором только логические на вопросы могут быть даны ответы (да/нет или правда/ложь). Цель такого теста — предоставить количественную статистическую меру человечности , которая впоследствии может быть использована для оптимизации производительности систем искусственного интеллекта, предназначенных для имитации реакций человека.

МакКинстри собрал около 80 000 предложений, на которые можно было ответить «да» или «нет», например:

• Земля — планета?
• Был ли Авраам Линкольн когда-то президентом Соединенных Штатов?
• Солнце больше моей ноги?
• Люди иногда лгут?

Он назвал эти предложения Mindpixels .

Эти вопросы проверяют как конкретные знания аспектов культуры, так и основные факты о значении различных слов и понятий. Поэтому его можно сравнить с SAT , тестированием интеллекта и другими спорными показателями умственных способностей. Целью МакКинстри было не различать оттенки интеллекта, а определить, можно ли вообще считать компьютерную программу разумной.

По мнению МакКинстри, программа, способная ответить на большое количество вопросов MIST гораздо лучше, чем случайно, будет оценена как имеющая определенный уровень интеллекта и понимания. Например, если бы в тесте из 20 вопросов программа угадывала ответы случайным образом, можно было бы ожидать, что в среднем она наберет 10 правильных ответов. Но вероятность того, что программа наберет 20 из 20 правильных результатов по догадкам, составляет всего один к 2. ²⁰ , т.е. один из 1 048 576; поэтому, если программа смогла поддерживать этот уровень производительности в течение нескольких независимых испытаний без предварительного доступа к предложениям, ее следует считать разумной.

Обсуждение

МакКинстри раскритиковал существующие подходы к искусственному интеллекту, такие как чат-боты , заявив, что его вопросы могут «убить» программы ИИ, быстро обнажив их слабые стороны. Он противопоставил свой подход (серию прямых вопросов, оценивающих возможности ИИ) тесту Тьюринга и премии Лебнера методу участия ИИ в ненаправленном печатном разговоре, полученному присуждением .

Критики из MIST отметили, что было бы легко «убить» ИИ в стиле МакКинстри из-за невозможности предоставить ему правильные ответы на все возможные вопросы «да/нет» с помощью конечного набора созданных человеком Mindpixels: тот факт, что ИИ может ответить на вопрос: «Солнце больше моей ноги?» правильно не означает, что он также может правильно ответить на такие варианты, как «Солнце больше, чем (моя рука | моя печень | яичный желток | Альфа Центавра A | ...)».

Однако покойный МакКинстри мог бы ответить, что по-настоящему разумная, знающая сущность (наравне с людьми) сможет выработать такие ответы, как (да | да | да | не знаю | ...), применив знание относительных размеров названных предметов. Другими словами, MIST задумывался как испытание ИИ, а не как предложение по внедрению ИИ.

Можно также утверждать, что MIST является более объективным тестом интеллекта, чем тест Тьюринга, субъективной оценкой, которую некоторые могут посчитать скорее мерой доверчивости следователя, чем интеллекта машины. Согласно этому аргументу, суждение человека о тесте Тьюринга уязвимо для эффекта ELIZA — тенденции принимать поверхностные признаки интеллекта за реальные вещи, антропоморфизируя программу. Ответ, предложенный в эссе Алана Тьюринга «Могут ли машины думать?», заключается в том, что если программа является убедительной имитацией разумного существа, то она на самом деле разумна. Таким образом, спор идет о том, что значит для программы иметь «настоящий» интеллект и по каким признакам его можно обнаружить.

Похожая дискуссия существует и в споре о языке больших обезьян , в котором, как утверждается, нечеловекообразные приматы выучили некоторые аспекты языков жестов, но значимость этого обучения оспаривается.

Внешние ссылки

• Тест минимального интеллектуального сигнала: альтернативный тест Тьюринга , Крис МакКинстри, Канадский искусственный интеллект № 41
• ГАК-80к
• Программное обеспечение с открытым исходным кодом для проведения теста минимального интеллектуального сигнала