Скорость решает?
🏎 Генерация картинок на максималках.
Ученые из MIT представили новый метод, который ускоряет генерацию изображений в 30 раз!
![](data:image/svg+xml;utf-8,<svg xmlns="http://www.w3.org/2000/svg" width="1080" height="606" />)
Существующие нейросети для генерации изображений работают на основе диффузионных моделей. Проще говоря, на начальном этапе создаётся очень размытое изображение, а далее с каждым шагом оно детализируется до максимально возможного качества.
Этот процесс достаточно трудоемкий и требует многочисленных итераций для достижения желаемого результата. ♾
Исследователи из Массачусетского технологического института представили новую систему, которая делает процесс одноэтапным. 😮
Система называется DMD (distribution matching distillation) и работает как учитель-ученик: более простая модель ("ученик") обучается имитировать поведение сложной модели ("учителя")
⚡️ В результате DMD генерирует картинки не за 30-50 шагов, а за один! (Конкретнее, Stable Diffusion создаёт изображение по запросу пользователя в среднем за 1,5 секунды. У метода DMD на это уходит 0,05 секунды).
Качество при этом остается на высоте. Небольшие отличия проявляются только в очень сложных задачах.
Результаты своей работы исследовали MIT продемонстрировали на видео 👆
❕DMD может открыть новые возможности для таких инструментов, как визуальное редактирование в реальном времени, инструменты проектирования, разработка лекарств и приложения для 3D-моделирования.
⚙️ Пока DMD — это разработка и до коммерческого продукта она дойдет позже.
Как вам перспектива создания изображения за 0,05 секунды? Или в принципе и 1,5 секунды было норм? 🤪
1 comment