Я редко говорю «ать», даже про себя. Сейчас было 3 раза!**
Искал способы перевести 2D видео в стереоскопическое. Ведь нейросети умеют считать глубину изображения, я этим пользуюсь в генерации, чего бы им не уметь эти данные считать для каждого ключевого кадра и интерпретировать определённым образом то же смещение картинки в паре на межзрачковое расстояние, которое рождает объём.
И да, действительно существуют решения которые работают по такому принципу. На YouTube-канале энтузиаста иммерсивных видео наткнулся на платный софт Owl3d, денег стоит не космических, работу выполняет. Можно бесплатно попробовать минуту с ограничением экспорта в FullHD. Это очень мало, но уже что-то.
Я же искал что-нибудь с открытым кодом на гитхабе и…нашёл!
В репозитории nunif пользователя nagadomi из Японии спрятался алмазик с названием iw3. У решения есть графический интерфейс, установка окружения с зависимостями автоматизирована для Windows. Можно отдельно скачать и подключить модельку Depth Anything V2, которую сами Apple интегрировали в Core ML Models. Так что на какой-нибудь Mac OS таких решений может найтись больше и быстрее.
Поскольку Blackmagic тоже интересуются форматом и, как вы уже знаете, создаёт камеры под яблочные форматы, в их софте находятся инструменты для редактирования такого. Поиск по Reddit привёл к рекомендации использовать ноду NewEye render node в Blackmagic Fusion Studio Pro для устранения каких-то огрехов в конвертации. Я ещё не пробовал с этим играться, но вот знайте.
Прогнал на пробу фрагмент выпуска @yatygorod и случилось то самое из заголовка. Когда сколько-то лет назад в кинотеатре впервые отметил эффект игрушечности общих планов в Marvel`овских фильмах, думал: «Блин, классно они придумали. Такое, наверное, не повторить без денег». Оказалось что при конвертации воздушного кадра природных красот Подосиновского района Кировской области получается не сильно хуже. Позже поделюсь ссылкой на какой-нибудь пример.
t.me/staniverse/353* · 20 дек 2024*
