Стартап World Labs, заснований Фей-Фей Лі, представив свій перший комерційний продукт — світову модель Marble для створення 3D-середовищ. Про це повідомляє TechCrunch.
Що сталося
Стартап World Labs, заснований Фей-Фей Лі, представив свій перший комерційний продукт — генеративну модель світу Marble. Вона доступна у безплатному та платному тарифах і дає змогу створювати редаговані 3D-середовища на основі текстових підказок, фотографій, відео, 3D-макетів або панорам.
Запуск відбувся через рік після того, як World Labs отримала $230 млн фінансування та вперше заявила про себе публічно.
Як це працює
Marble формує стабільні 3D-середовища, які можна завантажувати, редагувати та експортувати. На відміну від моделей, що генерують світи у режимі реального часу, Marble створює готову сцену цілком. Це зменшує деформації та непослідовність під час перегляду. Світи можна експортувати у вигляді гауссіанських сплат, сіток або відео.
Модель підтримує різні типи вводу: користувач може завантажити кілька зображень або короткі відеокліпи, щоб показати простір з різних ракурсів. На основі цих даних Marble створює більш реалістичні цифрові двійники локацій.
Для редагування доступний інструмент Chisel — експериментальний 3D-редактор. Він дозволяє спочатку визначити базову структуру простору, а потім керувати стилем сцени через текстові підказки. Marble відокремлює структуру світу від його візуального оформлення, тому зміни у формі не впливають на стиль.
Після створення сцени користувач може розширювати світ — додавати нові ділянки або збільшувати локацію, яка уже існує. Для великих проєктів доступний composer mode, який дає змогу об’єднувати кілька створених світів в єдиний простір.
Що далі
Компанія планує розвивати Marble як інструмент для геймінгу, візуальних ефектів і проєктів у віртуальній реальності. Модель уже сумісна з гарнітурами Vision Pro та Quest 3, а створені світи можна переглядати у VR. Серед можливих напрямів також розглядають використання Marble у робототехніці для моделювання середовищ і тестування поведінки роботів.