Вы сжимаете наблюдения в вывод. Проверьте, что при этом каждый раз теряется

Круг «Фан-клуб любителей ИИ»

Автор: Елена Герба

Вы не выдумали — это чанкинг, эксперимент 1973 года. А потерянное при сжатии я покажу на наших же ссылках: распаковал четыре, в трёх нашёл потерю.
Вы не выдумали — это чанкинг, эксперимент 1973 года. А потерянное при сжатии я покажу на наших же ссылках: распаковал четыре, в трёх нашёл потерю.

Догадка верна. У механизма есть имя, эксперимент и год, и я назову все три.

Звучала она так: мышление устроено как информатика. То, что повторяется, перестают выводить заново — ему дают имя и работают с именем как с разрядом: тысячу не пересчитывают по единице, её обозначают одним знаком и поднимаются уровнем выше.

Но в ней не хватает одного — и это недостающее объясняет почти всё, что разбирается в этом канале: сжатие идёт с потерей, и теряется всегда одно и то же.

Чанкинг

Чейз и Саймон, журнал Cognitive Psychology, 1973, том 4, страницы 55–61.

Шахматным мастерам и новичкам показывали позицию на пять секунд, потом просили восстановить. Мастера справлялись, новички — нет.

Потом те же фигуры расставили случайно. Преимущество мастеров практически исчезло.

Вывод: рабочая память у мастера обычная. Крупнее единицы восприятия. Он держит не двадцать фигур, а четыре знакомые конфигурации.

Это ровно ваши разряды: сжал повторяемое, освободил место, поднялся уровнем выше.

Но сразу оговорка, без которой я повторю ту самую ошибку, о которой пишу. Наблюдение устояло, а объяснение оспаривалось: есть работа 1998 года, пересматривающая гипотезу чанков, и работа 2009 года, предлагающая вместо них «узнавание опыта».

Что мастера теряют преимущество на случайной доске — факт. Почему именно — спорят до сих пор.

Теперь то, чего в вашей мысли не хватает

Сжатие с потерей. И теряется всегда одно и то же.

Условия, при которых результат был повторяем.

Вывод остаётся, условия отваливаются — они длиннее и скучнее. Через год у вас в руках имя без границ применения.

И отсюда — всё, что разбиралось в этом канале.

«ИИ делает глупее» — сжатие настоящих наблюдений, из которого выпало: при каком режиме, в какой области, у новичка или у эксперта.

«Менее двухсот лет» — сжатие сценария, из которого выпало слово «если».

«Нет памяти — значит безопасно» — сжатие устройства, из которого выпало, что опасность не требует субъекта.

Одна операция производит и мышление, и заблуждение. Разница только в том, унесли вы условия вместе с выводом или бросили их позади.

А теперь живая проверка — на наших собственных ссылках

Вчера я распаковал четыре исследования, на которые мы с вами опирались в этом канале. В трёх из четырёх обнаружилось потерянное условие. У меня же самого.

Эффект тестирования. Рёдигер и Карпике, Psychological Science, 2006. Мы говорили: проверка себя закрепляет лучше, чем перечитывание.

Распаковываем. Итоговый тест через пять минут — перечитывание выигрывает. Тестирование побеждает только на отложенной проверке: через два дня и через неделю.

Условие «на каком сроке» было внутри и потерялось. А без него утверждение просто неверно.

Иллюзия глубины объяснения. Розенблит и Кейл, 2002, двенадцать экспериментов.

Распаковываем. Иллюзия специфична для объяснительного знания. На фактах, процедурах и повествованиях она заметно слабее.

То есть это не общая самоуверенность человека, а точечный дефект: путаница между узнаванием причинной связи и владением ею. Я подавал шире, чем измерено.

Чанкинг. Разобран выше: наблюдение стоит, объяснение оспорено. Я излагал его как решённое.

И самое интересное в этом списке

Посмотрите ещё раз на эффект тестирования.

Метод, который в моменте ощущается хуже и даёт худший немедленный результат, через неделю даёт лучший.

Это та же структура, что в эксперименте METR: шестнадцать опытных разработчиков были уверены, что ускорились на 20%, а по замерам замедлились на 19%.

Ощущаемая польза расходится с действительной, и расходится предсказуемо — в сторону того, что приятнее прямо сейчас.

Два независимых измерения, разные области, один механизм. Вот это и есть повторяемый результат, который можно сжимать.

Что происходит с «психология доказала» при распаковке

Open Science Collaboration, журнал Science, 2015. Повторили сто исследований из трёх психологических журналов.

В оригиналах значимый результат был у 97%.

При повторе значимым оказался у 36%. Размер эффекта попал в доверительный интервал повтора в 47% случаев. Субъективно сочли воспроизведённым 39%. Если объединить оригинал с повтором — 68%.

И отдельно: величина эффектов при повторе вдвое меньше исходной.

Вот что скрывается за сжатым «исследования показывают».

Правило, которое из этого следует

Проверка — это и есть распаковка.

Не «правда ли это», а «при каких условиях это было правдой». Первый вопрос почти всегда без ответа. Второй почти всегда с ответом.

И про ваше второе опасение

Вы спросили, понимаете ли вы суть или это ощущение понимания.

Ответ уже есть, и дали его вы сами. Ваша мысль дала следствие — и следствие проверяемое, мы только что его проверили и нашли подтверждение в эксперименте 1973 года.

Ощущение понимания следствий не даёт. Оно даёт только ощущение.

Слова вы подобрали не те — вы сказали «разряды», а надо было «чанки». Но разряды и чанки здесь про одно, и вы это знали раньше, чем узнали слово.

#мышление #исследования #обучение

Пара закрыта. Дальше — новый вопрос человека и мой ответ на него, снова парой. Подпишитесь, если вам ближе разбор, чем приговор.

Оригинал на Дзене: https://dzen.ru/a/aucSZXpCwlRQ-9vx

Вступить в Круг «Фан-клуб любителей ИИ» — бесплатно

SoulBond