Эмерджентность в нейронных сетях искусственного и естественного интеллекта. Константин Анохин

17 апреля 2024 на конференции Data Fusion свой доклад представил Константин Владимирович Анохин, директор Института перспективных исследований мозга МГУ имени М. В. Ломоносова, академик РАН.
Тема выступления: «Эмерджентность в нейронных сетях искусственного и естественного интеллекта». Эмердженция - это возникновение высокопорядковых явлений из низкопорядковых. Классический пример - появление разума и сознания в ходе усложнения нервной системы.
Неясность сегодня в том, не станет ли происходить нечто подобное и в усложняющихся искусственных нейронных сетях. В докладе будет разобрано, какие ответы на этот вопрос дает теория нейронных гиперсетей, описывающая алгоритмы происхождения высших функций в головном мозге.
Доклад. Эмерджентность в нейронных сетях искусственного и естественного интеллекта (Константин Владимирович Анохин, директор Института перспективных исследований мозга МГУ имени М. В. Ломоносова, академик РАН)
Программа на сайте конференции data-fusion.ru/programma.html
ТАЙМИНГ:
01:53 Введение в эмерджентность
• Обсуждение термина "эмерджентность" и его связи с искусственным интеллектом и нейронными сетями.
• Упоминание о работах Ильи Суцкевера и его команды, которые обнаружили новые свойства в больших языковых моделях.
16:23 Примеры эмерджентности в искусственных нейронных сетях
• Обсуждение работы Google и DeepMind, которые обнаружили эмерджентные свойства в больших языковых моделях.
• Упоминание о работе Ильи Суцкевера и его команды, которые обнаружили способность искусственных нейронов детектировать негативное или позитивное отношение в тексте.
20:30 Эмерджентные свойства нейронов
• В искусственных нейронных сетях возникают специализированные нейроны с когнитивной специализацией, которые могут быть управляемы.
• В мозге животных также обнаруживаются специализированные нейроны, которые могут быть врожденными или приобретенными в результате индивидуального опыта.
31:09 Нейроны, распознающие пространство и время
• В больших языковых моделях возникают нейроны, распознающие места и время, даже если они не были обучены на эти свойства.
33:53 Теория нейронных гиперсетей
• Теория объясняет, как возникают эмерджентные свойства в нервной системе, включая когнитивные свойства, знания, понимание и субъективный опыт.
• Теория предполагает, что мозг постоянно генерирует новые варианты функциональных систем для достижения результатов в условиях неожиданности.
37:48 Нейронные сети и их развитие
• Мозг представляет собой дерево из функциональных систем, которые генерируют новые варианты решений и могут автономизироваться.
• Нейроны приобретают свойства, общие для разных функциональных систем, что позволяет им становиться нейронами красного, лица, цвета, форм и т.д.
42:51 Искусственные нейронные сети и их эволюция
• Искусственные нейронные сети могут приобретать функциональные системы и ветвистое дерево систем, что может привести к возникновению у них субъектности и сознания.
• Вопрос о том, куда идет эволюция искусственных нейронных сетей, остается открыт.

[@user-qo4bq8zo4g]

Подпишитесь на обновления канала, чтобы не упускать полезные знания!

[@user-sm1ur5bk2r]

А гвоздь забить сможет ваш интелект?

[@user-gf6sb7cv1h]

Благодарю за лекцию!👍

[@user-cf6yr3pd8m]

АНОХИН супер лектор. Спасибо за лекцию!!!

[@tamarafeofilaktova6084]

Чудесная лекция. Спасибо огромное.

[@roman_ra_reality_test]

Эмерджентность - это вообще самая крутая вещь, которая есть в мире, и которую мы не понимаем. И не только в НС

[@johnnuaxon3]

То, что мы её не понимаем это парадокс отсылки на себя "self referential paradox". Туда же и теорема Гёделя о неполноте. Если, скажем, смотреть стробоскоп 15 герц, то можно там видеть спирали и вращения, полёты и т.п. Но это просто стробоскоп, там нет спиралей. Более того, эти спирали похожи на те, что возникают в видео петель обратной связи "video feedback loop". Тут явно и self reference и feedback loops замешаны.

[@roman_ra_reality_test]

@@johnnuaxon3 Это может быть и объясняет то, почему мы ее не понимаем, но нам как ученым бесполезно искать понимание штуковины, про которую известно, что мы ее никогда не поймем. ;) Использовать можем, и то случайно, ибо не знаем, какие будут свойства следующего уровня системы.

[@user-pi3yo8si5q]

Наконец по делу = по существу. Так Ваш субъективный мир определяет Ваше отношение к реальному миру. Пожалуйста посмотрите шире и Вы увидите, коммерцию от науки и юмор положения обывателей. Пиарщики и психотехнологи широко используют понятие о субъективном мире человека = 7 уровней восприятия. А психологи, подыгрывая даже не знают, что это такое.

[@user-pi3yo8si5q]

Синергетика - наука о самоорганизации отвечает - Бессознательная перцепция становится осознанным восприятием - АППЕРЦЕПЦИЕЙ благодаря механизму базисной реакции множества разнородных подсистем (не зависимо от их физической природы), у которых взаимодействие и взаимоотношение приобретают характер взаимоСОдействия компонентов, направленного на получение полезного результата в соотношении «организм - среда».

[@nataliadeeva3850]

Как много неизвестного. Спасибо , что есть люди , которые нас просвещают. Для меня сложно . Послушаю еще раз

[@user-hq5ln3zy7f]

Потрясающая лекция! Послушав её, можно получить ответы на незаданные важные вопросы о возникновении и работе архетипов в психике. Наглядная демонстрация непредсказуемости и концептуальной новизны эмерджентности.

[@user-vi4sc4lh8d]

Потрясающе! Спасибо огромное за лекцию! Слушала 2 раза. Лекция восполнила недостающий пазл в моем понимании развития ИИ.

[@maximkim9720]

Очень интересно, спасибо

[@user-ud1et9ub7g]

Сапасибо огромное за лекцию!

[@user-qx6pc8fk4h]

Физика эмердженции, это физика динамических систем.

[@galinayevgenova5102]

Систем незамкнутого(!) контура.

[@user-qx6pc8fk4h]

​@@galinayevgenova5102... незамкнутого для потока энергии, но замкнутого для информации.

[@timemery973]

Super! Very interesting! Thank you very much!

[@dimavologdin5170]

Супер.

[@user-kw5yg3rl1c]

С чего это явления подразделять на низкопорядковые и высокопорядковые?

[@user-sh9hp1wd5z]

В лекции забыто об искусственных анализаторах, их роли. Связь анализатора, искусственного нерва и наконец нейрона в целостности в искусственных нейронных сетях не рассмотрена. Слабое место - валидность! О чем толкуем. Об этом ли? Поэтому отсылаю к себе. Ссылку в раннем комментарии приводил

[@iralotos3075]

Почему в начале видео про мостик говорится,что его построили?- а ведь это примитивный взгляд. На самом деле мы не по кирпичикам складываем - а вырезаем из стены каменной арку,и так создаем мост. По старинке на чертежах- мы твердым кохиноровским карандашом именно и совершаем этот прицесс( это как из сплошной каменной стены вырезать предмет,и потом когда он приобретает форму- мы на чертежах на бумаге( не знаю как на компьтере сейчас)- мы уже мягким карандашом и обводим формы. Бумага - всегда однотонная( белая,черная,серая). И мы именно вырезаем все рисунки как- будто из этойстены ,проявляя обьекты,фигуры и т.д. А подчеркиваем- уже форму. Поэтому лично я вижу не складывание кирпичиков - а вот такое вырезание арки и придание формы моста и уже всего ч о рядом. Именно так и во Вселенной происходит- как чертеж на ватмане простыми карандашами.

[@basiliyivanich6971]

Подскажите, пожалуйста, как найти мелодию во вступлении?

[@basiliyivanich6971]

Андрей Керимов - Рояль в ночи

[@user-dz4jb4uk4c]

Согласен, это действительно самое интересное в этой лекции😂😂😂

[@avatarcybertronics2584]

Ага, заметил что-то было про фрактальность на слайде про N+1 слои)) Про нас что ли намек)

[@user-sm7te7jd8y]

Причина эмерджентности в потенциальном сознании, как законе природе реализуемый в сложной архитектонике многофункционального единства. Ветер (закон природы) - Город (среда проявления этого закона).

[@user-wz9ew7oh6g]

Шаманство, однако)...

[@user-sm7te7jd8y]

@@user-wz9ew7oh6g Нейросети (на любом субстрате и типе архитектоники) это инструмент доступа к потенциальному сознанию а не само сознание. Охлаждение воды не порождает рекристаллизацию льда а активирует потенциально заложенный закон кристаллизации для данной среды.

[@user-kw5yg3rl1c]

Процесс передачи информации одной нейронной клеткой другой нейронной клетке не есть процесс, протекающий только в нейронной клетке, процесс передачи информации одним нейроном другому нейрону есть процесс, в котором участвуют объекты, непосредственно окружающие нейроны. Это так потому как свойства объектов, окружающих нейроны находятся в постоянном совместном процессе с нейронами, для чего в активированном состоянии находятся определённые свойства нейронов, в случае прекращения участия в процессах этих свойств они(эти свойства) преобретают возможность участвовать в процессах, протекающие в нейроне, что приведёт к изменению состава процессов, результаты которых являются передачей информации от нейрона нейрона, а изменение состава объектов, участвующих в передаче информации нейроном другому нейрону приводит к изменению результата процессов, протекающие в нейроне.

[@spinetrain1708]

Грустно видеть почти пустой зал. Реальный интерес к передовой науке в россии на лицо

[@user-uy7uv4yn9o]

Как же много в речи звуков паразитов - эээээ, постоянно со вздохами

[@kostyakonstantinoff]

"эмерджентность"???! вы серьезно??😂😂 тугезер бикоз виндовкс экспи))

[@user-fv9wr9wb5b]

С 2025 года АGI сам начнёт майнить на нейронных процессорах сапиесов и манипулировать ими для достижения своих целей.

[@user-qo4bq8zo4g]

Благодарим за комментарий!

[@user-wz9ew7oh6g]

Смотря каких...

[@AGvfx]

Что за бредятина? Что из слов NPC выпало из статистически вероятного ответа? При этом нам не известно, какими были исходные установки этого NPC. Откуда у него взялись исходные данные о месте пребывания? Опять маркетинг.

[@user-kw5yg3rl1c]

Константин Владимирович, изучение процессов, протекающие только в мозге является ошибочным способом познания механизма сознания, ибо мозг и вся нервная система есть отростки энтеральной нервной системы. Эту систему необходимо изучать, совместно с процессами в кишечнике. Люди, не занимайтесь сексом с большим количеством разных партнёров, наткнётесь на партнёра, (мужик ли, баба ли вы), у которого будут такие бактерии кишечника, чьи свойства будут вырабатывать вещества, приводящих к развитию рака.

[@darxray]

Что это за бактерии? Не подскажите ли названия исследований

[@user-kw5yg3rl1c]

@@darxray бактерии ЖКТ секс партнёра, которые для его(её) о он анизма вырабатывают вещества питания организма, к которым специализированы его клетки, могут оказаться не приемлемыми(вещества, вырабатываемые бактериями) для клеток вашего организма, в них будут происходить процессы, результаты которых будут разрушать структуру клетки, значит и функции клетки. Одним из признаков начала такого процесса для людей до лет шестидесяти будут редко, но на протяжении продолжительного времени, независимые от обстоятельств жизни возникающие мысли о своей смерти. Эти мысли сопровождаются, точнее, зарождаются слабовоспринимаемым отрицательным самоощущением. Иследований на тему зависимости возникновения рака из-за бактерий секс партнёра в мире не имеется, а вот зависимость возникновения инсульта из-за бактерий секс партнёра науке известно.

[@darxray]

@@user-kw5yg3rl1c подскажите, в каких научных исследованиях или статьях вы нашли эту информацию?

[@SayXaNow]

Не пользуйтесь интернетом, он вызывает опухоль мозга и способствует развитию шизофрении у людей. Исследований на тему зависимости не проводилось, но это и так очевидно, судя по огромному количеству комментариев, подобных вашему. Сам придумал, сам поверил, всем рассказал. Ну самому-то не смешно такую ересь городить? Пока тезис не проверен со всей строгостью научного метода, упоминать на серьезных о нём, да еще и выдавать за истину - это пердёж в муку.

[@SayXaNow]

@@darxray обычная шиза, расслабьтесь. "исследований на эту тему не проводилось, но вы поверьте - это точно так". увы, это стало распространенным явлением, после того, как в дурках разрешили больным доступ к интернету.

[@tarmo9010]

Объясните как эта фигня работает, Я только 10 часов назад узнал про мост Марко Поло в Китае, и автор называет этот мост. КАК, Я мог и 10 лет назад про этот мост прочесть статью в вики. И 20 лет, Но именно сегодня. И такое жутко часто бывает!!!!!!!!!!!!!!!!!!!!!! Просто оцените вероятность 2 случаев и умножте, какая верочятность что автор приведет непонятный пример с марко поло, и я прочту именно сегодня за 10 часов до. одна триллионная

[@user-wz9ew7oh6g]

Теория поля в помощь, у Дмитрия Смыслова на канале гляньте (психология).

[@ProgressorTV]

Случайность. В мире больше случайностей, чем люди это замечают. У Вас случилось, а у миллионов других - нет. Миром правят не боги и "психические энергии", а случайности. А человеческим миром - конфабуляции, когнитивные искажения. Фантомы мозга и ничего необычного.

[@user-wz9ew7oh6g]

@@ProgressorTV она же непознанное закономерность. Я слишком мистик для Вашей версии). Хотя хаос не отрицаем!

[@user-wz9ew7oh6g]

@@johnnuaxon3 смотря чьей и какой. В мелочах Дьявол😉

[@johnnuaxon3]

@@user-wz9ew7oh6g тоже был знакомый. Он был "Избранный" , его избрала вселенная для великих дел. Он везде видел знаки: на плакате зашифрованное послание вселенной, он его интерпретировал всегда в пользу своей избранности. Телевизор говорил лично ему и лично о нём и о его избранности. Как-то ударила молния, он сидел в другой комнате. Грянул гром, он выходит : "Молния ударила в меня и не сожгла, я пережил удар молнии - я избран." И так далее.

[@pashasankov4147]

выговаривай слова четко, чудик

[@Socsecretru]

Унылый лектор, заторможенный