You can use it to create Russian (Cyrillic) text on images using Flux dev.
It's not perfect and makes a lot of mistakes. Use it for simple text, 1-2 word long.
It uses a special encoding to create Russian letters. Look at example workflow image above.
НОВЫЙ словарь замены русских букв v1.3
"А": "A", "Б": "ß", "В": "B", "Г": "Î", "Д": "д", "Е": "E", "Ё": "É", "Ж": "x",
"З": "3", "И": "u", "Й": "ü", "К": "K", "Л": "л", "М": "M", "Н": "H", "О": "O",
"П": "á", "Р": "P", "С": "C", "Т": "T", "У": "Y", "Ф": "ö", "Х": "X", "Ц": "Ü",
"Ч": "4", "Ш": "!!!!", "Щ": "!!!", "Ъ": "ț", "Ы": "bl", "Ь": "b", "Э": "€",
"Ю": "10", "Я": "®"It was trained on 6000+ images at 512-768px resolution for 100000 steps (~100 hours on 3090).
Low resolution gives less mistakes. 1024px - will give more mistakes.
Recommended settings: 512x768 20 steps, Euler, normal, guidance 3.5
Prompt: Black text "PYCCkиü" on grey background.
workflow: https://github.com/Mozer/comfy_stuff/blob/main/workflows/flux_rus_lora_100k.json
About version 1.3 100k
less mistakes
use new dictionary to encode letters
Description
100k steps, new alphabet, less mistakes.
It took 100 hours on 3090 to train in total.
НОВЫЙ словарь замены русских букв v1.3
"А": "A", "Б": "ß", "В": "B", "Г": "Î", "Д": "д", "Е": "E", "Ё": "É", "Ж": "x",
"З": "3", "И": "u", "Й": "ü", "К": "K", "Л": "л", "М": "M", "Н": "H", "О": "O",
"П": "á", "Р": "P", "С": "C", "Т": "T", "У": "Y", "Ф": "ö", "Х": "X", "Ц": "Ü",
"Ч": "4", "Ш": "!!!!", "Щ": "!!!", "Ъ": "ț", "Ы": "bl", "Ь": "b", "Э": "€",
"Ю": "10", "Я": "®"Recommended resolution: 512x768, 768x512. High res (1024) makes more mistakes.
Clip_l is ok. vit_l_text is also ok, almost no difference.
Workflow https://github.com/Mozer/comfy_stuff/blob/main/workflows/flux_rus_lora_100k.json
FAQ
Comments (16)
Я чуть со смеху не помер, но закину пару базов из за коробки с хлопьями
Да тебе памятник нужно поставить за эту лору! Надеюсь ты продолжишь ее улучшать
Вот бы все эти ТВ патриоты занялись обучением лорак по Российской и советской тематике, а то от них одни разговоры а сами пальцем не пошевелили что бы что то сделать )
Спасибо за лорку, интересно а т5 адаптер дообучить или для сокращения размера переучить можно ?
Думаю, что T5 можно дообучить русскому языку, но у меня пока желания что-то нет.
Порадовали, особенно картинками.) Спасибо!
Создал ноду которая автоматически трансформирует русский текст в набор символов согласно словарю.
https://github.com/daswer123/comfyui-rutext-lora-tranform
Спасибо за данную лору!
благодарочка !
Супер! Спасибо
а куда его закинуть
А есть вариант Img2Img запилить? Лора часто лажает, маскирование сильно упростило бы задачу - подмазал где надо и на переделку...
инпеинт работает. помазал и готово =)
@momox Ну да точно, зачем тут что то мудрить когда просто любой img2img или инпейнт можно использовать в этом случае.
Скрипт питона для перевода
Python script for translate
https://gitflic.ru/project/hatolic/skript-pitona-dlya-perevoda/blob?file=translate_dic.py&branch=master
За адаптер большое спасибо, но с gguf_q_8_0 с пятидесяти попыток мне так и не удалось написать на картинке ни "С ДР!", ни "С Днём рождения!".
И ещё очень было бы классно залить адаптер на HuggingFace.
Спасибо Вам огромное!
как долго мы ее ждали!
криво, через куча попыток, кое как и не работает.
Details
Files
Available On (1 platform)
Same model published on other platforms. May have additional downloads or version variants.