для внимательных
Возвращаемся к треугольному безобразию. Как же так? Мы говорили, что на выходе нейрона либо ноль, либо единица, а тут прямо на выходе идут отрицательные сигналы! И ещё мы говорили, что на входе должна быть достаточно большая сумма. Если подавать на вход отрицательный импульс, это только затормозит нейрон, но никак не побудит к действию.
Поэтому мы специально пометили особенный нейрон треугольником. Это группа обычных нейронов. К ним на вход приходят сигналы и от А, и от σ. Но часть нейронов группы принимает сигналы от А с плюсом, а от σ с минусом. Другая часть – наоборот. Следовательно, когда импульс А достаточно больше сигмы, просыпается первая подгруппа, вторая спит. В обратном случае – наоборот. В остальных случаях (когда А и сигма не сильно отличаются) спят обе подгруппы. В простейшем случае в каждой подгруппе по одному нейрону.
Рис. 2.10. Принцип действия обратной связи. а) Пример взаимодействия с нейроном А. Кружочком у нейронов обозначен тормозящий вход, то есть дендрит, где господствуют тормозящие медиаторы. б) Действие обратной связи на нейрон А, в зависимости от разности между активностью нейрона А и активностью сигмы
Результирующее воздействие группы на нейрон А эквивалентно действию простенького разностного элемента (где сигма подаётся на инвертированный вход). Функцию активации легко построить (если вы читаете этот дополнительный материал, то для вас это точно легко). На рисунке приведены графики для случаев, когда функция активации одиночного нейрона – ступенька и сигмоид соответственно. Кстати, в окрестности нуля на втором графике отклик линейно зависит от разности входных сигналов.
2.6. Слово вместо дела
Слоистая структура придает связям неокортекса иерархический характер. Первый слой конвертирует опыт тела (сигмы) в связи со вторым слоем. Второй слой использует для обучения не чистый опыт, а опыт первого слоя. И так далее. Адаптивность и сложность экспоненциально нарастают от слоя к слою.
Чем дальше связь от первого слоя, тем более универсальную и абстрактную информацию она кодирует. И тем больше нейронов (суммарно) будут потревожены, если по этой связи пустить мощный импульс. И тем больше обратных связей откликнутся эхом. В том числе тех, которые были перехвачены или зашумлены.
А что делает психика, когда слишком много нейронов бушуют? Да, вы хорошо запомнили материал четвёртого параграфа. Психика запускает механизм переобучения, ведь ей важно оптимизировать энергозатраты и убрать шумовую нагрузку. И в процессе переобучения «плохие» нейронные связи будут не сожжены, а оптимизированы. Уж мозг найдёт способ приспособить их для своих нужд. Как правило, после удачного психоанализа всплывают куски воспоминаний, снимаются внутренние блоки, принимаются эффективные решения, повышается лохматость.
Вот так – начали с одного симптома, а пришли к структурному усилению Я [21] и интроектной ревизии [22, 23].
Но как, как же это работает? Почему психоанализ? Ответ прост.