Midjourney Style та Character Reference, як геймченджери ринку генеративних АІ

1 лютого Midjourney анонсувала функцію Style References, яка дозволяє переносити стилістику потрібної картинки на вашу генерацію, а 12.03 відбувся анонс Character Reference, яка дозволяє переносити вашого персонажа в потрібний стиль. Здавалось, це дрібні оновлення, але насправді вони:

• значно прискорюють роботу зі створення генерацій
• відкривають нові можливості послідовного відтворення стилю та персонажів, що дозволяє створювати повноцінні логічні історії
• а також знайдуть використання в продуктовому дизайні. 

Тому, щоб краще зрозуміти, як з цим працювати, ділюсь декількома туторіалами та прикладами. 

Продуктовий дизайн. 

Тут все просто. Функції дозволяють перенести продукт клієнта в потрібну вам атмосферу. Перенесення не ідеальне, але для концептів підійде. Алгоритм наступний: 

1. Здобуваємо промти.

• Завантажуємо в Midjourney зображення продукту і бажаний фон.
• Через функцію /describe додаємо посилання на зображення продукту і отримаємо 4 варіанти промтів.
• Те саме робимо з посиланням на фон. Отримаємо 4 варіанти промтів фону. 

Обираємо потрібні промти.

• Тиснемо згенерувати всі 4 варіанти зображень.
• Серед отриманих генерацій обираємо ті, які найкраще відповідають базовим фото продукту та фону. Це потрібно, щоб на 3-му кроці Midjourney видала найчіткіший варіант. 

Генерація продукту.

1. Копіюємо промт з обраної генерації продукту на кроці 2. Трохи корегуємо його, бо інколи там буває зайва інформація. Обовʼязково видаліть все, що повʼязано з фоном.
2. Ставимо ::
3. Аналогічно копіюємо промт зі згенерованого фону.
4. Ставимо ::
5. Додаємо посилання на первинний продукт, посилання на первинний фон.
6. Ставимо ::
7. Додаємо команду --cref і додаємо посилання на первинний продукт
8. Додаємо команду --sref і додаємо посилання на первинний фон.

* Пункт 5 інколи можна пропустити, але з ним більша відповідність до оригінального зображення продукту

** :: ставте просто щоб легше орієнтуватись в тексті, бо його буде дуже багато. 

Ось декілька фінальних прикладів

Сторіборди

За допомогою цих функцій також легко створити сторіборд майбутнього ролика з потрібним вам персонажем. Алгоритм наступний:

1. Створюємо мудборд з персонажем.

Для цього використовуємо промт який починаємо з character design sheet, turnaround. В кінці додаємо значення стилю 200-400. Якщо менше або більше, буде менше проекцій персонажа.

Приклад промту: 

character design sheet, turnaround, tousled pale blue hair female, wearing a white top, futuristic cyberpunk style --style raw --s 300

2. Далі в Claude (або чат GPT) генеруємо 12 сцен. Приклад промту нижче:

"Придумай 12 сцен для мого сторіборду про Х і У. Кожну сцену опиши не більше ніж 9 словами. Ось приклади:

• Х робить те і те
• Х робить те і те
• Х робить те і те"

3. Далі починаємо створювати генерації.

• копіюємо перекладені описи в Midjourney.
• На початку додаємо стиль картинки, потім сцену, потім силу стилю і в кінці посилання на мудборд персонажа через команду --cref
• сцен доведеться згенерувати багато, тож приготуйтесь до довгої роботи
• приклад промту: futuristic cyberpunk scene, A girl hacker sees that she is discovered by the mafia hacking into a database --s 250 --cref https://s.mj.run/WGVLoACHzSw --v 6.0 --ar 16:9

На виході отримаємо безліч генерацій, які залишається лише впорядкувати

Сподіваюсь вам було цікаво). Підписуйтесь на мій телеграм канал Нейродива.