Nvidia объявила о запуске нового инструмента для разработчиков, который позволяет создавать изображения с помощью генеративного ИИ на основе трехмерных сцен. Инструмент под названием «AI Blueprint for 3D-guided generative AI» уже доступен для загрузки на компьютеры с видеокартами Nvidia RTX 4080 или более мощными. Система работает в связке с программой для трехмерного моделирования Blender и генератором изображений FLUX.1 от Black Forest Lab.

Пользователи могут сначала создать сцену в Blender, используя простые трехмерные объекты — здания, растения, животные или транспорт. Затем эта сцена используется как основа для генерации двумерного изображения. Такой подход позволяет точнее контролировать расположение объектов, ракурс и детали, не полагаясь только на текстовые подсказки.
Даже если трехмерные объекты не детализированы, инструмент использует их только как схему для будущего изображения. Это позволяет быстрее получить желаемый результат, избегая многочисленных попыток с текстовыми описаниями.
Nvidia отмечает, что её «блюпринты» — это готовые, настраиваемые рабочие процессы для ИИ, которые помогают разработчикам создавать приложения для генеративного ИИ. В комплекте пользователи получают пошаговую документацию, примеры ресурсов и уже настроенную среду для работы с инструментом.