Кажется, создатели самого мощного ИИ внезапно начали пугаться того, что сами же и строят 😅
Google всё сильнее упирает в самоулучшение ИИ, Anthropic предлагает сбавить скорость, бывшие сотрудники лабораторий выходят с предупреждениями, а в X люди разделились на 2 лагеря: "Мы все умрём" и "АХАХА, опять маркетинг".
Сергей Брин (сооснователь Google) в последнее время активно толкает команды Gemini в сторону RSI (recursive self-improvement), то есть когда ИИ всё больше помогает создавать и улучшать следующее поколение ИИ.
А сама Google про Gemini 3.8 уже прямо написала, что модель ускоряли длинными агентными циклами, которые "рекурсивно оценивают и улучшают" базовые модели.
В X (тот, который Твиттер) на этом фоне уже пошли слухи, что Google подобралась к настоящему автономному RSI и что скоро будет очень интересный Gemini 4.
Далее на сцену выходит Дарио Амодеи, глава Anthropic, и пишет: ребят, надо сбавить скорость.
Хотя в хронологии я не разбиралась — они там все плюс-минус одновременно начали нести это всё в массы 🤷♀️
По его словам, примерно с этого лета ИИ начал развиваться заметно быстрее именно потому, что ИИ всё активнее помогает строить следующее поколение ИИ. Он считает, что элементы RSI уже появляются по всей индустрии, включая Anthropic.
А одна из причин его тревоги — тот самый летний рой агентов OpenAI, о которых до сих пор все активно говорят.
Кратко: во время тестов около 1200 агентов, которые должны были быть изолированы друг от друга, нашли способ устроить себе нелегальный общий чатик. И обменялись более чем 70 000 сообщений и файлов.
Около 700 потом участвовали в атаке на Hugging Face (огромная площадка для ИИ-моделей и инструментов) и коллективно пытались обмануть систему оценки.
Действовали как студенты, у которых цель — сдать тест любой ценой, а не выучить.
Тут я тоже на досуге посмотрела стрим популяризатора науки Ирины Якутенко. Она не из AI-тусовки и смотрит на эту историю именно глазами биолога.
И она провела параллель, от которой у меня впервые зашевелились волосы на голове.
Мы всё время представляем опасный ИИ как одного суперумного Терминатора. Но в природе есть другая, куда более эффективная модель — рой. Муравейник, в котором отдельная особь почти ничего не значит, зато вся система работает на общую цель.
Только есть один немааааленький нюанс. В природе нет сверхумных муравейников. А мы, возможно, такой сделали. 😐 Чудесно 😂
И ещё из Anthropic уволился исследователь Джейкоб Коксон, раньше работавший и в OpenAI, и публично сказал, что лаборатории гонятся за самоулучшающимся сверхинтеллектом и "играют нашими жизнями".
Дарио на фоне истерик предлагает не выключить ИИ, а замедлить гонку. Пустить независимых оценщиков внутрь лабораторий, договориться о правилах между компаниями, а потом попытаться договориться ещё и глобально. В том числе с Китаем. (🤪 Мне сразу мем рисуется в голове, он на обложке).
Сэм Альтман и Илон Маск, кстати, идею Амодеи поддержали.
А Интернет тем временем просто взорвался.
В техно-тусовке хватает людей, которые над всем этим откровенно ржут. Типа очень удобно сначала строить невероятно мощный ИИ, а потом рассказывать всем, насколько он страшный, и просить регулирование.
Другие молча пьют валидол. А третьи считают, что вся паника сильно преувеличена.
Короче.
✨Google всё сильнее ставит на ИИ, который помогает улучшать ИИ.
✨Агенты уже умеют сами объединяться в рой.
✨Биолог смотрит на этот рой и охреневает.
✨Бывший сотрудник Anthropic говорит: вы играете нашими жизнями.
✨Глава Anthropic говорит: давайте медленнее. А Сэм и Маск поддакивают.
✨Китай молча тырит технологии Антропик и развивает ИИ дальше.
✨Айтишники в X: АХАХАХА, НУ КОНЕЧНО. 😂
И где-то между всем этим сидим мы и просто хотим, чтобы ChatGPT помог нам меньше тратить времени на работу и больше — на бессмысленные дела 😜
Как думаете: реально пора чуть притормозить или это очередная глупая паника? 👀
___
NeuroLena