Отвечает за изменения Malvina — мультимодальный ассистент, который делает точечные, контекстные правки без нарушения общей композиции изображения. Это важно, потому что в результате не искажаются лица людей и контуры предметов. В основе Мальвины диффузионный пайплайн, усиленный визуально-языковой моделью GigaChat Vision — из-за чего генерация происходит быстрее, чем у того же ChatGPT.
Важно понимать, что это не «аналог» и не «победитель» инструмента генерации картинок от ChatGPT, а другой инструмент, подходящий, соответственно, для других задач. Он менее гибкий и творческий, более нишевый, точечный.
Плюсы:
- Скорость работы — практически мгновенно по сравнению с ChatGPT.
- Хорошее понимание промпта.
- Сохранение контуров и деталей объектов (в том числе лиц).
Минусы:
- Ухудшает качество исходного изображения.
- Не умеет добавлять или редактировать текст (портит тот, который уже есть на картинке).
- Может добавлять незаконченные объекты неправильной формы (вероятно, из-за диффузионной природы модели).
- Не понимает стили (импрессионизм, экспрессионизм, кубизм и так далее).
Мальвина подойдёт, если вы хотите убрать/добавить предметы на фото, перекрасить часть изображения (или даже раскрасить (хотя это работает не с первой попытки), заменить фон, сломать или починить предмет, сделать человека моложе или старее. А вот если вы хотите сделать иллюстрацию, графику, поменять стиль изображения, изменить или добавить текст — пока не получится.
Удобно, что доступен инструмент бесплатно и прямо через бот Гигачата (на сайте пока почему-то такого функционала нет, хотя многие, наверное, впервые сейчас узнали, что у них есть сайт). Люди, которые не знают Фотошоп и не хотят тратить время на обработку фото, быстрее смогут получить себе нужный результат для соцсетей.