World Labs представив ШІ-інструмент для генерації 3D-сцен
Заснований піонером штучного інтелекту Фей-Фей Лі стартап World Labs представив ШІ-систему для генерації 3D-сцен з одного зображення.
We’ve been busy building an AI system to generate 3D worlds from a single image. Check out some early results on our site, where you can interact with our scenes directly in the browser!https://t.co/ASD6ZHMwxI
— World Labs (@theworldlabs) December 2, 2024
1/n pic.twitter.com/tuvGXHmepP
Інструмент фірми здатний за наявності вхідної картинки оцінити тривимірну геометрію, заповнити невидимі частини сцени та створити новий контент.
We’ve been busy building an AI system to generate 3D worlds from a single image. Check out some early results on our site, where you can interact with our scenes directly in the browser!https://t.co/ASD6ZHMwxI
— World Labs (@theworldlabs) December 2, 2024
1/n pic.twitter.com/tuvGXHmepP
Творець відео може пересуватися і досліджувати 3D-сцени за допомогою вільно рухомої камери, керованої за принципом відеоігри. При цьому сцени залишаються незмінними під час зміни ракурсу і дотримуються законів фізики.
World Labs aims to address the challenges many creators face with existing genAI models: a lack of control and consistency. Given an input image, our system estimates 3D geometry, fills in unseen parts of the scene, invents new content so you can turn around, and generalizes to a… pic.twitter.com/3SaTugmGRX
— World Labs (@theworldlabs) December 2, 2024
Продукт World Labs сумісний з іншими відомими ШІ-інструментами, що покращує робочий процес.
Низка розробників ознайомилися з генератором сцен. Творець анімації під ніком enigmatic_e оцінив спрощений процес розміщення персонажів і руху камери.
3D world generation naturally composes with other AI tools. This allows creators to work with tools they already know to enable new experiences.
— World Labs (@theworldlabs) December 2, 2024
We've given a few creators an early sneak peek at our technology to begin experimenting with the possibilities enabled by a 3D-native…
У World Labs зазначили, що більшість інструментів на базі генеративного штучного інтелекту створюють 2D-контент, а генерація 3D-сцен «змінить те, як ми робимо фільми, ігри, симулятори та інші цифрові прояви нашого фізичного світу».
У блозі World Labs представлено інтерактивні проєкти, що дають змогу користувачам переміщатися прямо в браузері за допомогою стрілок або клавіш WASD. Рухи обмежені невеликою областю.
Рішення World Labs не перше у своєму роді. ШІ-модель MaGRITTE генерує віртуальні 3D-світи з оглядом у 360° за допомогою запитів із комбінації зображення, макета і текстового промпта.
Нагадаємо, у березні Nvidia представила ШІ-модель для генерації 3D-об’єктів за промптом. Вона здатна створювати високоякісні тривимірні зображення практично миттєво.