Нейросеть «Кандинский» от «Сбера» обновилась

19 апреля 2023 года

    Обновленная нейросеть «Кандинский» от «Сбера» (попробовать можно здесь) теперь рисует сравнимо с лидерами отрасли: получше предыдущей версии «Midjourney», похуже новейшей. Это, кроме шуток, большое достижение для отечественной команды разработчиков.

    Однако практической пользы, как и от конкурентов, по-прежнему, немного. А круг решаемых задач, по-прежнему, очень узок. Нейросеть умеет генерировать картинки по описанию в том или ином стиле, но практически не умеет работать с референсами. А это, пожалуй, девять из десяти задач, которые ставит арт-директор художнику.

    То есть, «Кандинский» сможет нарисовать абстрактного президента США, который бомбит Украину грибами с ковра-самолёта (стиль: ренессанс), но не сможет поменять лицо Ахеджаковой на известном меме на Билла Клинтона.

    «Кандинский», за минуту, нарисует десяток хрустальных глобусов в стиле Фаберже, но не сможет переделать ваш набросок в «Яндекс.Картах» в стилизованную инфографику с сохранением географической привязки.

    Звёздные войны в православной России — сколько угодно. Графичный и точный таймлайн к тексту об истории фильмов Лукаса — нет. Как вы ни бейтесь, насколько многословное и точное описание ни задавайте, какие примеры ни показывайте.

    «Кандинский», как и конкуренты, как бы умеет работать с фото, смешивать две фотографии или менять фотографию под описание, но результат — совершенно непредсказуем: художник так видит. На каждую из таких задач нужно тренировать отдельную нейросеть, а это годы работы и громадные (пока что) вычислительные мощности.

    Подобные прикладные нейрофильтры и генераторы с узкими задачами известны давно: скажем, заливка с учётом содержимого в «Фотошопе» уже лет десять как незаменимый инструмент для ретушера. Все они будут развиваться и дальше, а пока — «кожаные иллюстраторы» и «мясные художники» могут быть спокойны за свои рабочие места. Но только в том случае, если они умеют понимать задачу лучше нейросети.

    Картинка в начале поста сгенерирована нейросетью «Кандинский 2.1» по запросу: «Релокант с узелком на палочке пересекает границу Грузии».

    Автор и эксперт: «Ватфор».

Новое на блоге:

• 5 неочевидных фактов о нейросетях, ИИ и машинном обучении
• Нейросеть посчитала фракцию выброса левого желудочка на эхокардиограммах
• «ChatGPT» — это «хайп»?

Комментарии

Josy Fraerman:
А каково мнение ватфора о нейросетевых генераторах историй типа Ai Dungeon (периода его расцвета), а сейчас Novel AI и Character AI и так далее?

Dmitry Yakovlev:
Как вижу я, нейросети сейчас успешно выполняют задачи, которые можно было и не выполнять. SEO-текст, пресс-релиз ни о чем, картинка к посту в соцсеть с рекламкой, бесполезный диплом без научной ценности. Люди и сейчас делают эти задачи в том же стиле, что и нейросеть: скомпилировать из кусков и подредактировать. Ну да, такое всегда будет лучше у компьютера выходит. Но эти задачи можно и вообще не делать.

Sergei Poletaev:
еще раз, в фотошопе десяток нейрофильтров и генераторов, каждый под конкретную задачу. Часть исполняется локально, часть на сервере. И без них как без рук.
Но это именно инструмент, продвинутая кисточка

Dmitry Yakovlev:
нельзя называть их "нейросетью", потому что они не нейросеть

Artem:
Нейронка это инструмент в руках художника, то что не сможет сделать нейронка, за нее доделает художник

Ilja P:
Да может, у него же есть режим дорисовки

Sergei Poletaev:
ну нарисуйте мем про ахеджакову с лицом клинтона

Sergei Poletaev:
В нынешнем виде это скорее генерация рефов, быстро получить десять, двадцать вариантов и уже от них отталкиваться. Но и так-то работа над иллюстрацией начинается с подбора рефов.

Самый платный кот ватчата:
как профессиональный геймер: жвачка без целевой аудитории, не нужны
индустриальные апликации АИ в играх в будущем будут интересны. хороший АИ для игр стоит как сама игра
в целом к любой текущей апликации АИ-генератора это применимо

Artem:
Тут скорее мудборды, а не рефы. Но в любом случае нейронки сильно ускоряют процесс разработки иллюстрации, так что любой кто захочет войти в "ремесло" художника на зарплате будет вынужден уметь работать с ними.

Dmitry Yakovlev:
Все генеративные сети похожи, каждая известная сеть обучена по своему

Sergei Poletaev:
само собой

Dmitry Yakovlev:
А вы же знаете, что Лебедев много лет нейронкой генерит айдентику для заказчиков за деньги и люди довольны? Иван Иронов называется сетка. Работает до сих пор, можно заказать лого, всё работает

IspolinF:
Объясните неведующему - ватофор и ватоадмин это случайно не один и тот же человек?

Artem:
молодец значит

Josy Fraerman:
Ну тут скорее получается какой-то соавтор по написанию книги или полубезумный ведущий в текстовом квесты или ролевой игре.

Sergei Poletaev:
ватоадмин?

Dmitry Yakovlev:
я про то, что это реально уже используется много лет, а вакансии у Лебедева с сайта не пропадают на иллюстраторов и графдизайнеров

Самый платный кот ватчата:
virtual assistant полезная тема и я вижу что это одна из целевых тем индустриализации АИ, но без участвующих людей это все не нужно. С бездушным АИ играть в игры не интересно в среднем если речь идет о ДНД всяких, это просто штик(гиммик) для фасилитации продаж у айтишников и прогрессистов
будущее АИ в storytelling будет не таким как его видят сейчас

Artem:
ну старые нейронки давно использовали, когда хайп про нейронки в твиттере поднялся, некоторые про, сказали что на работе уже несколько лет работают с ними.

Sergey Lemeschenko:
>> но не сможет поменять лицо Ахеджаковой на известном меме на Билла Клинтона.
Чего?
Там рамочка есть - загружаете картинку, выбираешь на меме рамочкой лицо и говоршиь на что заменить. Все

Sergei Poletaev:
там нейросеть генерит сотню вариантов, потом мясные допиливают руками. В целом, это не сильно экономит время, хотя усилия - пожалуй, да.

Самый платный кот ватчата:
у нас на работе один из пунктов в опроснике по внутреннему тестированию ЛЛМ был генератор идей. на мой взгляд это ключевая экспертиза ИИ для профессионалов

Artem:
сильно экономят, Вера Величко на своём стриме рассказывала, что экономия выходит очень сильной по времени. А время это деньги. Если раньше её контора могла одновременно где-то 2-3 проекта вести, то при использовании нейронок можно до 4-5 вытянутся, без наёма новых работников.

Artem:
Это как с автокадами всякими - раньше целый отдел с кульманами нужен был, а теперь одна программа.

IspolinF:
Увидел у него в телеге ссылку на этот канал. Почитал. Тоже понравилось. Вот и подумал, есть ли здесь какая-то взаимосвязь, особенно учитывая схожий первый корень.
Но уже глядя на имя администратора, вижу, что явно разные люди)

Sergei Poletaev:
ничего не знаю про ватоадмина

Josy Fraerman:

Результат генерации по запросу «Фильм Апокалипсис сегодня, только все актеры куклы из улицы Сезам»
Ну такое, миджорни смешнее генерировало и чётче. И еще Кандинский не знает кто такой Гендадьф и не может нарисовать ему даже бороду.

Sergei Poletaev:
так же как content aware fill или выделение объекта в фотошопе сильно экономят время, само собой. Но ретушь дешевле не становится, хотя становится быстрее.

Sergei Poletaev:
иии?

Artem:
просто раньше ретушь делал специально обученный человек, а теперь может условная домохозяйка после просмотра 15-минутного ролика на ютубе) Но если конечно задача сделать, чтобы комар носа не подточил, то всё равно придётся искать профессионалов.

Sergei Poletaev:
нет) я вам как доктор говорю

Dmitry Yakovlev:
там нет доработки - заказчик сам "дорабатывает", выбирая варианты, как и в Midjourney. это полностью генеративный бренд-бук

Sergei Poletaev:
Слушай, у меня есть знакомые в студии лебедева )

Artem:
ой да ладно, я сам сколько в ФШ насидел, ещё до всяких умных фильтров. Простую ретушь сейчас вполне по силам сделать обычному человеку, она стала сильно проще.

Sergei Poletaev:
Но и запросы выросли. В целом порог вхождения, конечно, снизился, но порог, мм, коммерческой окупаемости - нет.

Dmitry Yakovlev:
ну вот и спроси у них )
знакомство с кем-то в Студии Лебедева не такая уж редкая вещь, как и знакомство с самим Лебедевым )

Artem:
ну про коммерсов речи и не шло) Это как сейчас умение пользоваться компьютером, необходимый навык для любого офисного планктона.

Sergei Poletaev:
Так и спрашивал. Да, по началу за пресловутые сто тысяч давали готовый пучок картинок от нейросети, но спрос на это довольно быстро сошел на нет, не работает это так.
Сейчас это по большей части берут как рефы и допиливают вручную.

Dmitry Yakovlev:
Это отдельная услуга. Иронов как генерил свои бренд-буки, так и генерит.

Sergei Poletaev:
Ты точно знаешь, что такое брендбук? )

Dmitry Yakovlev:
более чем, да

Dmitry Yakovlev:
Думаю ты не очень знаешь )

Dmitry Yakovlev:
Иронов делает не только лого. Он делает всю айдентику.

Sergei Poletaev:
Налепить лого на пачку мокапов - это не брендбук, если что. Вставить лого в комплект шаблонов - это тоже не брендбук. Такого добра в интернете навалом и без иронова.

Dmitry Yakovlev:
Сергей, он даже brand-legend ишет.
У меня остается стойкое убеждение, что ты не знаешь просто про новую версию Иронова

Sergei Poletaev:
возможно не знаю, пару лет не интересовался.

Олег:
А есть генераторы логотипов, гербов, монограмм?

Олег:
Друг спрашивает (тм)

Sergei Poletaev:
ну вот тут иронова обсуждали выше

Oleg:

Кандинский сделал мне по запросу герб вейшнорской республики

Олег:
Он за деньги и с ограниченным количеством итераций. А мне интересен именно инструмент, а не готовый результат. Похоже, что надо будет задействовать открытые нейронки.

Sergey Lemeschenko:
Что и? Это тоже что Image2Image в StabeDiffusion

Sergei Poletaev:
так вы результат давайте сюда, лучше один раз увидеть )

Max B:
Когда нейросеть сможет превзойти дядю Васю у рубильника, тогда она и станет всемогущей.

∞:
Дядю Васю у рубильника может мотивировать не дёргать рубильник периодические пожертвования на счёт от неизвестного доброжелателя (навеяло пересчитываемого сейчас "Луна - суровая хозяйка"), а вот против уборщицы у нейросети шансов ноль.

Карсон:

«Зима крестьянин торжествует»

DokTOP_ zLAW:
Баловался всю вчерашнюю ночь с кандинским (странно звучит). Треш и ад. Просто по текстовому запросу красиво рисует. А объединение фото и текста - ужас.