Умеет превращать в аниме не только ваши фотки.
Мы рассказывали про несколько нейросетей, способных генерировать аниме-арты. Одна из них — от китайского техногиганта Tencent — стала мегапопулярной благодаря быстроте работы и красивым артам, которые генерировала на основе загруженных фото. Или вот еще была у нас публикация про приложение Meitu, которое также превращает любой снимок в кадр из аниме. Но в этот раз речь пойдет про алгоритм Niji Journey, создающий аниме-арт на основе текстового запроса. Разбираемся, насколько он хорош и как им пользоваться.
Что такое Niji Journey и как в нее попасть
Как можно понять по названию, в основе «анимешной» нейросети лежит известная многим Midjourney. Оригинальная нейросетка довольно точно генерирует изображения по запросам, практически без артефактов, однако большинство результатов получаются довольно мрачными.
Тем не менее, разработчики из Niji Journey вместе с создателями нейросетевого генератора аниме-персонажей Waifulabs смогли обучить оригинальный алгоритм Midjourney на аниме и манге так, что он стал выдавать по текстовому запросу изображения в совершенно разных стилях.
В издании AITuts отмечают, что нейросеть очень хорошо генерирует картинки популярных персонажей аниме. В общем случае закономерность такая: чем больше фан-артов есть по данному персонажу, тем точнее и лучше будет конечный результат работы Niji Journey, если в запросе вы укажете конкретного героя.
Пока нейросеть создает популярных персонажей аниме, TexTerra поможет сделать популярной вашу компанию — у нас вы можете заказать продвижение в интернете и привлечь новых клиентов.
Вот несколько примеров артов, которые сгенерировали пользователи Niji Journey:
А теперь расскажем, как самому сгенерировать персонажа аниме в нейросети.
Как пользоваться Niji Journey
Для начала надо зайти на Discord-сервер алгоритма и авторизоваться. Учтите, что если вы пользовались до этого Midjourney, количество попыток генерации будет общим для обеих программ. Например, если раньше вы израсходовали 15 из 25 бесплатных попыток в Midjourney, то в Niji Journey после добавления в канал у вас останется 10 попыток. Израсходуете их все на создание аниме — и больше не сможете бесплатно сделать изображения в Midjourney на том же аккаунте (и да, лимит не восстановится даже через месяц).
Далее листаем список каналов в сообществе и находим те, что имеют в названии image-generation. Всего их семь, вы можете выбрать любой. Затем заходим в канал и вводим слэш «/». У вас сразу появится выпадающий список, который предложит вам команду /imagine promt. Выбирайте ее, а в открывшемся поле после слова promt можете ввести нужный текстовый запрос.
Наш первый тестовый запрос к нейросети был такой: «Ичиго Куросаки дерется с Наруто, Токио, 8к». Вот какие результаты без апскейлинга дала нейросеть:
Главного героя аниме «Блич» — Ичиго — тут можно разглядеть. Но где Наруто? Как будто второй персонаж битвы остается за кадром. Но это динамичная сцена по своей природе — с такими изображениями у нейросетей зачастую возникают проблемы.
Следующий запрос решили сделать статичным: «Эрен Йегер в окружении покемонов, 4к»:
Как будто так и должно быть! Главный герой «Атаки титанов» отлично вписался во вселенную покемонов — особенно порадовала верхняя левая картинка. Правда, все три покемона похожи на недоделанного Пикачу.
В третью попытку решили посмотреть, как там у Niji Journey с картинками — загрузили кадр из мультфильма «Стальной гигант» и попросили нейросеть сделать из него кадр в стиле аниме Gundam. Вот какой кадр был до:
А вот как его изменила нейросеть Niji Journey:
Да, с пальцами у нейросетей по-прежнему туго: то недобор, то перебор. Но на большинстве картинок остался и мальчик, и робот. После одного цикла вариаций левой нижней картинки и одного цикла апскейлинга получили гораздо более крутой результат:
Как можно использовать Niji Journey в работе?
Самое очевидное — использовать плоды Niji Journey для публикаций в соцсетях. Отличный контент, который повысит вовлеченность пользователей. С авторским правом при таком использовании все в порядке — изображения Midjourney разрешается использовать для публикации, но не для коммерции. Имейте это в виду.
К сожалению, для использования нейросети вам придется постоянно заводить новые аккаунты на различные почты — лимит в 25 генераций на один аккаунт никто не отменял. В этой статье мы рассказывали про варианты использования Midjourney — если кратко, то оплатить ее с российского счета не получится, а бесплатное использование через Discord-сервер сильно ограничено.
Читайте также:
Поставьте себе на аватарку: мы нарисовали вашу профессию
Нейросеть создает 3D-модели по текстовому описанию — тест Point-E
