Стохастический аналоговый калькулятор нейронного подкрепления

Стохастический нейронно-аналоговый калькулятор подкрепления ( SNARC ) — это машина нейронной сети, разработанная Марвином Ли Мински . ^[1]^[2] По письму Мински Джордж Армитидж Миллер летом 1951 года получил финансирование для проекта от Управления научных исследований ВВС, а работу должен был выполнить Мински, который тогда был аспирантом по математике в Принстонском университете. . В то время аспирант Принстона по физике Дин С. Эдмондс ^[3] сообщил, что хорошо разбирается в электронике, и поэтому Мински привлек его к участию в проекте. ^[4]

Во время студенческих лет его вдохновила статья Уоррена Маккаллоха и Уолтера Питтса об искусственных нейронах 1943 года, и он решил построить такую машину. Обучение было скиннеровским обучением с подкреплением , и Мински много разговаривал со Скиннером во время разработки машины. Они протестировали машину на копии лабиринта Шеннона и обнаружили, что она может научиться решать лабиринт. Машина имитировала бегущих по лабиринту крыс, и цепь подкреплялась каждый раз, когда симулированная крыса достигала цели. Машина удивила своих создателей. «Крысы на самом деле взаимодействовали друг с другом. Если одна из них находила хороший путь, остальные следовали по ней». ^[4]

Сама машина представляет собой случайно соединенную сеть примерно из 40 синапсов Хебба . Каждый из этих синапсов имеет память, в которой хранится вероятность того, что сигнал поступит на один вход, а другой сигнал выйдет на выход. Существует ручка вероятности, которая изменяется от 0 до 1 и показывает вероятность распространения сигналов. Если сигнал вероятности проходит, конденсатор запоминает эту функцию и включает электромагнитную муфту . В этот момент оператор нажмет кнопку, чтобы дать машине вознаграждение. Это активирует двигатель на излишках Minneapolis-Honeywell C-1 гироскопического автопилота от бомбардировщика B-24 . ^[5] Мотор крутит цепь, идущую ко всем 40 синаптическим машинам, проверяя, включено сцепление или нет. Поскольку конденсатор может «помнить» только определенное время, цепочка улавливает только самые последние обновления вероятностей.

Каждый нейрон содержал шесть электронных ламп и двигатель. Вся машина «размером с рояль» содержала 300 электронных ламп. Трубки регулярно выходили из строя, но машина продолжала работать, несмотря на сбои. ^[4]

Эта машина считается одной из первых новаторских попыток в области искусственного интеллекта. Мински впоследствии стал одним из основателей проекта MAC MIT, который разделился на Лабораторию компьютерных наук MIT и Лабораторию искусственного интеллекта MIT, а теперь является Лабораторией компьютерных наук и искусственного интеллекта MIT. В 1985 году Мински стал одним из основателей Медиа-лаборатории Массачусетского технологического института.

По словам Мински, он одолжил машину студентам в Дартмуте, а затем потерял, за исключением одного нейрона. ^[6] Фото последнего нейрона Мински можно увидеть здесь. На фото видно, что 6 электронных ламп, одна из которых Sylvania JAN-CHS-6H6GT/G/VT-90A.

Ссылки

Цитаты

^ Мински, Марвин. 1952. «Нейронно-аналоговый калькулятор, основанный на вероятностной модели подкрепления». Психологические лаборатории Гарвардского университета, Кембридж, Массачусетс .
^ Crevier 1993 , стр. 34–35 и Рассел и Норвиг 2003 , стр. 17
^ Эдмондс, Дин С. младший (12 мая 2021 г.). «Воспоминания о войне и университетском опыте» . Wiki по истории техники и технологий (ethw.org) .
^ Перейти обратно: ^а ^б ^с Бернштейн, Джереми (6 декабря 1981 г.). «Видение будущего Марвина Мински» . Житель Нью-Йорка . ISSN 0028-792X . Проверено 29 октября 2023 г.
^ Ховард, RW (ноябрь 1973 г.). «Автоматическое управление полетом самолетов - первые 100 лет» . Аэронавигационный журнал . 77 (755): 533–562. дои : 10.1017/S0001924000041889 . ISSN 0001-9240 .
^ интервью устной истории

Цитируемые работы

Кревье, Дэниел (1993). ИИ: бурные поиски искусственного интеллекта . Нью-Йорк, штат Нью-Йорк: BasicBooks. ISBN 0-465-02997-3 .
Рассел, Стюарт ; Норвиг, Питер (2003). Искусственный интеллект: современный подход . Лондон, Англия: Pearson Education. ISBN 0-137-90395-2 .

Дальнейшее чтение

Леви, Стивен (2010). Хакеры . Себастаполь, Калифорния: О'Рейли. ISBN 978-1-449-38839-3 .
«Нейронно-аналоговый калькулятор на основе вероятностной модели подкрепления» (Документ). Кембридж, Массачусетс: Психологические лаборатории Гарвардского университета. 8 января 1952 года. ^{[ нужна полная цитата ]} Описывает аппаратное обеспечение SNARC.

Внешние ссылки

1951 - SNARC Maze Solver - Мински / Эдмондс (американец) на Cyberneticzoo.com
Интервью устной истории с Марвином Мински в 2011 году. Соответствующие сегменты, касающиеся SNARC:

[1] Мински, Марвин. 1952. «Нейронно-аналоговый калькулятор, основанный на вероятностной модели подкрепления». Психологические лаборатории Гарвардского университета, Кембридж, Массачусетс .

[2] Crevier 1993 , стр. 34–35 и Рассел и Норвиг 2003 , стр. 17

[3] Эдмондс, Дин С. младший (12 мая 2021 г.). «Воспоминания о войне и университетском опыте» . Wiki по истории техники и технологий (ethw.org) .

[:0-4] Перейти обратно: ^а ^б ^с Бернштейн, Джереми (6 декабря 1981 г.). «Видение будущего Марвина Мински» . Житель Нью-Йорка . ISSN 0028-792X . Проверено 29 октября 2023 г.

[5] Ховард, RW (ноябрь 1973 г.). «Автоматическое управление полетом самолетов - первые 100 лет» . Аэронавигационный журнал . 77 (755): 533–562. дои : 10.1017/S0001924000041889 . ISSN 0001-9240 .

[6] интервью устной истории

[1]

[2]

[3]

[4]

[5]

[6]