Ну и вот попытка подсмотреть, как в голове у видео-ИИ устроена модель мира. Взяли сгенерированное видео из SORA и присунули его
Ну и вот попытка подсмотреть, как в голове у видео-ИИ устроена модель мира.
Взяли сгенерированное видео из SORA и присунули его в Нерф. Получили 3Д-модель сгенерированного мира. Понятно, что в голове у ИИ латентное пространство типа 738D, вместо нашего утлого 3D. И мы через такую 3Д-замочную скважину в виде Neural Radiance Fields (NeRFs) and 3D Gaussian Splatting (3DGS) можем теперь подглядывать чего он там насимулил про нас и наше восприятие.
Я уже писал философский пост о том, что LLM (возможно) через все эти текстовые датасеты срисовали то, как мы мыслим, ибо язык - инструмент мышления, а не общения.
Через все эти размеченные видео и картинки у ИИ в голове строится этакая визуальная модель реконструкции этого мира - способ построения картинок в голове в ответ на сигналы в виде слов(текстов) и звуков.
Ну и понятно, что он реконструирует разные многочисленные миры, соответствующие разным промптам, от игровых миров, как в случае с майнкрафтовым видео, до самых замысловатых фантазий и даже мультиков.
Пока были только генераторы картинок, речь шла скорее о симуляции воображения. С появлением временного измерения запахло симуляцией работы всего нашего мира. Точнее симуляцией того, что происходит у нас в голове (как там в реальности мы не знаем, вон змеи не видят неподвижное и живут без этой части мира в голове).
Ну и интересно поразмышлять о том, какие миры у него в башке будут близки друг к друг другу по “смыслу“. Помните на у него на картинках от короля к королеве идет такой же вектор как от мужчины к женщине в его мозгах. Ответ может быть неочевидным. И шорткаты между мирами могут вас удивить.
2 views
47
10
6 months ago 00:21:35 1
Content Warning: Жизнь за лайки :D
6 months ago 00:13:46 1
Жгонка легко заменит ВСЕ практики! | Выполняем традиционную русскую жгонку или веретено
6 months ago 00:01:33 1
Крошка Енот “Улыбка“ (От улыбки хмурый день светлей...) (1974)
6 months ago 00:01:00 1
Будут казнить неистово! Украинец предрек военкомам ВСУ судьбу старост Великой Отечественной
6 months ago 00:01:00 1
Моя первая работа в США $650 в день 2023
6 months ago 00:13:09 1
НУ И ВИРУСЫ В ЧИТАХ РАСТ, проверка! разоблачение МОШЕННИКОВ!
6 months ago 00:05:16 1
САМУРАЙСКИЕ, ТРЕШОВЫЕ ИСТОРИИ 2! (Анимация)
6 months ago 01:09:46 1
#ГАЗ 66, который смог! #Автодом из советского грузовика на все случаи жизни!
6 months ago 00:14:24 1
КАК БЫТЬ (АНТИ)ГЕНИЕМ? - Замай. Кто такой?
6 months ago 00:04:37 1
Ольгa Бузoва — “Лaйкeр“ Прeмьера клипa 2019
6 months ago 00:15:21 1
Пицунда песчаный пляж теперь платный? Погода в Абхазии в апреле. Закрываю свой бизнес. Абхазия 2024
6 months ago 00:13:47 1
Герои мультфильма “Ну, погоди!“ Ч.2 Волк / Heroes of the cartoon “Nu, pogodi!“ Part 2 Wolf
6 months ago 00:09:17 1
*ЗАБУДЬ ПРО ХОЛКУ НА ШЕЕ* за 9 минут с легкими упражнениями // Избавиться от жира на шее дома
6 months ago 00:50:34 1
Стамбул. Орёл и Решка. Мегаполисы. RUS
6 months ago 00:46:33 1
Приготовил поесть, задал направление. Пол скоро будет готов. Внук, 7 серия
6 months ago 01:11:31 1
“Нас тупо ИСПОЛЬЗОВАЛИ!“ // Украинец про войну, Зеленского, Лукашенко и жизнь в Англии
6 months ago 02:00:45 1
Самый увлекательный египетский пазл - собери бога по кусочкам 🎲 Age of Mythology #4
6 months ago 00:00:00 1
Dark Souls II Второе Прохождение #10.
6 months ago 00:05:01 1
Депутат Госдумы Роднина предпочитает молчать о русофобии и поддержке небратьев дочерью