Сбер выпустил обновление модели генерации изображений Kandinsky, которая теперь умеет генерировать надписи на кириллице с учётом текстуры поверхностей.

Разработчики обучили нейросеть, используя более 10 миллионов изображений с русским текстом, написанным различными способами. Это позволило модели научиться различать печатные и прописные буквы.

Сначала Kandinsky обучался генерировать кириллический текст нативно, без использования дополнительных модулей, а потом его дообучили на экспертном датасете, тщательно отобранном и проверенном дизайнерами и художниками.

У новой модели все ещё возникают трудности в ряде категорий запросов — длинные надписи, надписи со смесью кириллицы и латиницы, подробное детальное описание сущности или фона могут получаться не с первого раза. Короткие запросы без указания фона, масштаба и ракурса получаются быстрее и качественней, но тут модель будет фантазировать сама, что, впрочем, часто только к лучшему.

Указание текстуры и освещения помогает создать интересные вариации надписей — камни, вода, лёд, стекло, мармелад, старая древесина, мох, лаковая кожа, глянцевый стол. Буквам можно добавить рельеф или объём. Для прозрачных фактур можно указать «контровой свет», «контражур» — буквы станут полупрозрачными. А для эффектности можно добавить дым или туман.

Потестировать модель самостоятельно уже можно в Telegram-боте Kandinsky и во всех ботах GigaChat (Telegram, ВКонтакте, Одноклассники, Max), а также в web-версии. 

Мы тоже попробовали и результат нам понравился.

Читайте ещё материалы по теме: 

Не пропускайте наши новостиДобавьте сайт в предпочитаемые источники, чтобы видеть нас чащеДобавить в Google

Сейчас на главной

SJ-100 с ПД-8 проверяют на шум с вертолёта Ми-8АМТ: для испытаний самолёта изучают даже состояние атмосферы

SJ-100 с ПД-8 проверяют на шум с вертолёта Ми-8АМТ: для испытаний самолёта изучают даже состояние атмосферы

Высокочувствительные микрофоны фиксируют звук пролетающего лайнера, а метеорологическое оборудование контролирует условия распространения звуковых волн

«Ёлке» приготовили альтернативу: новый дрон-перехватчик «Кокошник» разгоняется до 280 км/ч

«Ёлке» приготовили альтернативу: новый дрон-перехватчик «Кокошник» разгоняется до 280 км/ч

Беспилотник самостоятельно преследует воздушную цель, а разработчики уже задумались об увеличении его скорости до 450 км/ч

«Калашников» укоротил СВЧ на 17 см, сохранив заявленную кучность на дистанции до 800 метров

«Калашников» укоротил СВЧ на 17 см, сохранив заявленную кучность на дистанции до 800 метров

Концерн разработал две компактные самозарядные винтовки на базе снайперской винтовки Чукавина для штурмовых групп и подразделений быстрого реагирования