Если с неба упадёт 150к и потратить их можно только на XR-гарнитуру
Упомянуто · OpenAI и ещё 2
Что бы я выбрал?
Задавался этим вопросом всю неделю релиза Steam Frame и до него. Я почему-то злюсь на это устройство, порой даже публично в чатах и обсуждениях.
У гарнитуры от Valve был такой прогрев и годы ожидания у VR-энтузиастов, что хотелось какого-то идеального ответа на вопрос «что брать, если не Quest со всеми его приколами». Новый условный Index, только беспроводной, со SteamOS, standalone и ощущением, что железку купил ты, а не железка вместе с вендором купила тебя.
Потом мы узнали цену имени кризиса памяти ($1059 за 256 ГБ), что внутри хороший (но не самый свежий) Snapdragon 8 Gen 3. Что passthrough чёрно-белый, как в Quest 2. А по первым обзорам на YT вопросов стало только больше. Сильно больше.
Не твоя, вот и бесишься!
Знаю, что хорошие цветные камеры и MR важны не всем. Но мне важны очень.
Пространственный интерфейс — это наше довольно скорое будущее, и учиться делать его хорошо стоит уже сейчас. XR-девайсы потихоньку начинают выглядеть как правда очки, но пока ограничены батарейкой, полем зрения и вычислениями.
От большого хедсета хочется побольше мощности, хорошие камеры, руки, глаза и возможность превращать комнату вокруг в часть интерфейса.
До этой недели на вопрос «дали 150к, купить можно только одну standalone XR-штуку» я бы почти автоматически отвечал Apple Vision Pro. Или если без вычислительного блока и очень богат на базовые станции и ПК — Bigscreen Beyond 2.
Выглядит как восторг для моей шеи и что-то из Ready player one
Новый AVP на M5 стоит дороже, поэтому речь скорее про хороший б/у M2. Но сама идея идея и возможности устройства остаются. Там лучшие камеры дополненной реальности из того, что я пробовал, фантастический трекинг рук и глаз, micro-OLED и интерфейс, который действительно ощущается построенным вокруг пространства.
Я после минут семи в AVP осознал, насколько мой вообще-то отличный Quest 3 далёк от идеала. Яблочники делали не VR-шлем, а spatial computer. В нём и фильм смотреть, и окна вокруг себя раскидать, и поработать, и потом написать какой-нибудь дорогущий во всех смыслах музейный опыт. Полноценный процессор M-серии тоже огромный плюс. Можно делать экспириенсы с локальными нейронками, компьютерным зрением и выглядять всё будет очень прекрасно.
Ложка дёгтя — Apple. Железо закрыто, для нормальной разработки нужен Mac/Xcode, контента всё ещё не то чтобы море. Даже не пруд. Кот лужу наплакал. И особенно прекрасно, что Safari на гарнитуре с едва ли не лучшим passthrough на рынке умеет WebXR, но полноценный WebAR поверх реального мира всё ещё не даёт. За этим идите в нативные инструменты.
То есть устройство почти идеально подходит для крутых экспериментов «цифровое поверх физического», но производитель очень хочет сам решить, какие именно эксперименты мне разрешено хотеть. Это как на iOS мне нужно колхозить адаптеры на брошенный в open-source 8th Wall, иначе WebAR не будет.
И вот здесь Steam Frame внезапно начинает отыгрываться.
SteamOS основан на Arch Linux. Собственно, этот пост я тоже пишу с CachyOS, которая базируется на Arch.
Весной я уже пробовал Linux на своём десктопе именно с VR и ожидал куда большей боли. А получилось вполне рабочим вариантом, иногда даже чуть быстрее Windows. Особенно мне понравилась возможность раскидать окна обычных desktop-приложений вокруг себя в VR. В Windows настолько естественно у меня это не работало, там для такого ты виртуальные мониторы создаёшь. Зато не мучаешься с .NET зависимостями и подборкой правильного Proton на каждом шагу.
«Внутри гарнитуры Arch» для меня звучит не как недостаток, а как приглашение что-нибудь поковырять, поломать, починить, повторить.
В Developer Mode у Frame есть SSH, Pacman, возможность запускать обычные Linux ARM-приложения и вообще лазить в систему заметно глубже привычного. В отчёте человека, который четыре месяца жил со Steam Frame, есть Blender, Discord, Android-приложения, обычные окна, расставленные по дому и разные эксперименты с запуском PC-игр прямо на гарнитуре.
Не всё работает. Иногда получаете Half-Life: Alyx автономно, иногда какой-нибудь Fallout просто умирает. Всё завязано на эмуляторы (включая apk), но сам факт, что тебе дают попробовать, уже располагает.
В эту же «открытость-открытость» неожиданно хорошо попадает Godot. Если не сталкивались — это бесплатный open-source игровой движок, то есть программа примерно того же класса, что Unity или Unreal. В ней собирают сцены, пишут логику и делают 2D/3D/XR-приложения.
Почему я вообще начал на него смотреть? Во-первых, он полностью открытый и довольно лёгкий. С моим лэптопом-печатной машинкой это очень актуально. Во-вторых, с приходом ИИ-агентов Godot как будто резко ожил в моём инфополе. Когда вышла GPT Astra, я начал видеть, как люди отдают ей задачу уровня «придумай маленькую игру, создай сцены, напиши логику», и оно уже как-то едет по рельсам мультиагентного процесса. Захочет LLM в процессе 3D-модель? Зайдет в условный Tripo её сгенерировать по API и сунет в проект. Или Computer Use’ом замоделит прям на твоём десктопе.
Подобного в Интернете стало больше
Это не значит, что Unity внезапно хуже. Наоборот, там экосистема гораздо больше, XR-инструментов больше местами, и сейчас уже есть свой встроенный AI Agent, MCP и интеграции с Codex/Claude. Я сам исторически намного лучше знаю Unity. Почти все Social VR платформы, которыми я пользуюсь — тоже на Unity. У SDK Meta* всё свежее (и ИИ-шное) сперва оказывается…на Unity.
Но если мы уже начали играть в открытость: открытый Linux → открытый Godot → OpenXR → агент, которого выбираешь сам. Получается какое-то очень гармоничное комбо для экспериментальной гарнитуры?
С глазами тоже всё оказалось не так плохо. Eye tracking доступен самим приложениям через OpenXR, то есть можно делать интерфейсы, реагирующие на взгляд, и другие интересные штуки. Но полноценного face tracking нет, поэтому в социалках аватар всё лицо сам по себе повторять не начнёт.
И всё равно главный мой вопрос оставался прежним. Какого чёрта там чёрно-белые камеры? Valve отвечает примерно так: это игровая гарнитура, хорошие RGB-камеры увеличили бы цену, вес и расход батареи. И вот тут появляется штука, из-за которой я немного перестал злиться.
Arcturus Vision Camera за $149. Внешний модуль, который аккуратно втыкается прямо в передний порт Steam Frame. Я сначала представлял приколхоженную ко лбу на изоленту вебку, но он весит меньше 10 граммов и выглядит почти как часть самой гарнитуры.
Выглядит аккуратно
Внутри две 32 МП RGB-камеры, получаем цветной стерео-passthrough, spatial video до 5K. И, что мне гораздо интереснее, возможность использовать отснятое пространство для Gaussian Splatting,
Frame не строит её сам на своём не самом свежем Snapdragon. Ты ходишь по комнате (или музею) и записываешь стереовидео. Потом видео отправляется на компьютер. В официальном пайплайне Arcturus используется COLMAP, который восстанавливает положение камер, и LichtFeld Studio, которая уже собирает сцену из сплатов.
В итоге сценарий примерно такой:
надел гарнитуру → прошёлся по пространству → записал его → получил на компьютере фотореалистичный 3D-слепок → вернулся внутрь уже как в виртуальную сцену.
Вот это прям очень хочется трогать и экономить на SLAM-сканере. И интервью с основателем Arcturus Джеффом Пауэрсом тоже придало уверенности. У команды большой бэкграунд в 3D-сканировании и computer vision, а с Valve они взаимодействуют уже много лет. То есть это таки не случайная вебка, придуманная после того, как Интернет увидел чёрно-белый passthrough.
Правда, публичного API уровня «получи сырые камеры и делай с ними свой SLAM» я пока не вижу. У Quest 3 Meta* подобный camera access разработчикам уже дала (совсем не сразу). Тут пока гарантированы passthrough, spatial video и реконструкция.
И если посмотреть чуть дальше одного Steam Frame, вся эта гонка вообще становится интереснее. Meta* только что показала новые VR Glasses. В мой шортлист вещей, которые я хочу они не входят, но посмотрите, куда всё идёт. Около 100 граммов на лице, micro-OLED, цветной passthrough, глаза, руки, лицо. Основную вычислительную часть и батарейку вынесли в отдельный нагреватель причинных мест в кармане.
Новое VR-очко от Цука