Компания Roblox представила свои инструменты Roblox Cube AI, основной генеративной AI системы для создания 3D объектов и сцен, в рамках Конференции разработчиков игр. Кроме того, на этой неделе Roblox открывает исходный код своего 3D базового модуля, названного Cube 3D. По словам представителей компании Anupam Singh и Nick Tornow, Cube 3D можно использовать как на платформе Roblox, так и за ее пределами.
Прошлой осенью Roblox объявила о своем амбициозном проекте по созданию 3D объектов и сцен на Roblox на основе открытого модуля Cube 3D. Теперь компания представила его релиз. Cube станет основой для многих инструментов AI, которые Roblox планирует разработать в будущем, включая сложные инструменты для генерации сцен. В конечном итоге это будет мультимодальная модель, обученная на текстах, изображениях, видео и других типах входных данных, которая будет интегрироваться с существующими инструментами создания AI.
Подробнее о Cube 3D
Cube 3D осуществляет генерацию 3D моделей и окружений непосредственно из текстов, а в будущем – и изображений. Современные 3D генерации используют изображения и подходы к реконструкции для построения 3D объектов, но благодаря платформе Roblox компании удается обучаться на нативных 3D данных. Сгенерированный объект полностью совместим с современными игровыми движками и может быть расширен для выполнения функциональности.
Для достижения такой функциональности Roblox использует передовые модели, обученные на текстовых токенах, чтобы обучить Cube 3D предсказывать следующее «токен-форму» для построения полного 3D объекта. Когда Roblox расширит эту функцию до полной генерации сцен, Cube 3D предскажет не только планировку, но и форму объекта в этой планировке.
Cube 3D для творчества
Ранее обсуждалось, как AI может ускорить создание 3D активов, аксессуаров и опытов. В долгосрочной перспективе платформа поможет создавать сложные и функциональные объекты, а также сцены. Roblox инвестирует в инфраструктуру AI на каждом этапе создания — как для разработчиков, так и потребителей. С новым API создание 3D объектов становится более эффективным.
Cube позволит разработчикам быстрее исследовать новые направления творчества. В будущем игроки сами смогут создавать объекты, просто введя соответствующие команды.
Технические подробности: кросс-внимание между 3D и текстовыми/изображениями токенами
Ключевой технической задачей было соединить текст и изображения с 3D формами. Прорывом стала 3D токенизация, что позволяет представлять 3D объекты в виде токенов, как это сделано с текстом. Roblox использует автоагрессивные трансформеры для предсказания следующего компонента, что обеспечивает масштабируемость и мультимодальную совместимость.
Куда движется Cube
Сегодня AI применяется для предсказания текстов и пикселей изображений. Для создания сцен нужно соединить все элементы, чтобы они работали в контексте друг с другом. Roblox планирует наделить генерируемые 3D объекты и сцены полной функциональностью, вводя концепцию 4D создания, где четвертым измерением будет взаимодействие. Благодаря этому игроки смогут персонализировать свой опыт, что сделает игры ещё более захватывающими.
Больше новостей
Roblox также обновила производительность и надежность Roblox Studio, пользовательский интерфейс и диспетчер активов. Разработчики получают инструменты, позволяющие публиковать практически на любое устройство. Куб 3D будет доступен позже на этой неделе.
Подписывайтесь на наш telegram-канал
