Midjourney Style та Character Reference, як геймченджери ринку генеративних АІ

1 лютого Midjourney анонсувала функцію Style References, яка дозволяє переносити стилістику потрібної картинки на вашу генерацію, а 12.03 відбувся анонс Character Reference, яка дозволяє переносити вашого персонажа в потрібний стиль. Здавалось, це дрібні оновлення, але насправді вони:

  • значно прискорюють роботу зі створення генерацій
  • відкривають нові можливості послідовного відтворення стилю та персонажів, що дозволяє створювати повноцінні логічні історії
  • а також знайдуть використання в продуктовому дизайні. 
Жодна поточна нейромережа так не вміє. 

Тому, щоб краще зрозуміти, як з цим працювати, ділюсь декількома туторіалами та прикладами. 

Продуктовий дизайн. 

Тут все просто. Функції дозволяють перенести продукт клієнта в потрібну вам атмосферу. Перенесення не ідеальне, але для концептів підійде. Алгоритм наступний: 

1. Здобуваємо промти.

  • Завантажуємо в Midjourney зображення продукту і бажаний фон.
  • Через функцію /describe додаємо посилання на зображення продукту і отримаємо 4 варіанти промтів.
  • Те саме робимо з посиланням на фон. Отримаємо 4 варіанти промтів фону. 

Обираємо потрібні промти.

  • Тиснемо згенерувати всі 4 варіанти зображень.
  • Серед отриманих генерацій обираємо ті, які найкраще відповідають базовим фото продукту та фону. Це потрібно, щоб на 3-му кроці Midjourney видала найчіткіший варіант. 

Генерація продукту.

  1. Копіюємо промт з обраної генерації продукту на кроці 2. Трохи корегуємо його, бо інколи там буває зайва інформація. Обовʼязково видаліть все, що повʼязано з фоном.
  2. Ставимо ::
  3. Аналогічно копіюємо промт зі згенерованого фону.
  4. Ставимо ::
  5. Додаємо посилання на первинний продукт, посилання на первинний фон.
  6. Ставимо ::
  7. Додаємо команду --cref і додаємо посилання на первинний продукт
  8. Додаємо команду --sref і додаємо посилання на первинний фон.

* Пункт 5 інколи можна пропустити, але з ним більша відповідність до оригінального зображення продукту

** :: ставте просто щоб легше орієнтуватись в тексті, бо його буде дуже багато. 

Ось декілька фінальних прикладів

Сторіборди

За допомогою цих функцій також легко створити сторіборд майбутнього ролика з потрібним вам персонажем. Алгоритм наступний:


1. Створюємо мудборд з персонажем.

Для цього використовуємо промт який починаємо з character design sheet, turnaround. В кінці додаємо значення стилю 200-400. Якщо менше або більше, буде менше проекцій персонажа.

Приклад промту: 

character design sheet, turnaround, tousled pale blue hair female, wearing a white top, futuristic cyberpunk style --style raw --s 300

2. Далі в Claude (або чат GPT) генеруємо 12 сцен. Приклад промту нижче:

"Придумай 12 сцен для мого сторіборду про Х і У. Кожну сцену опиши не більше ніж 9 словами. Ось приклади:

  • Х робить те і те
  • Х робить те і те
  • Х робить те і те"

3. Далі починаємо створювати генерації.

  • копіюємо перекладені описи в Midjourney.
  • На початку додаємо стиль картинки, потім сцену, потім силу стилю і в кінці посилання на мудборд персонажа через команду --cref
  • сцен доведеться згенерувати багато, тож приготуйтесь до довгої роботи
  • приклад промту: futuristic cyberpunk scene, A girl hacker sees that she is discovered by the mafia hacking into a database --s 250 --cref https://s.mj.run/WGVLoACHzSw --v 6.0 --ar 16:9

На виході отримаємо безліч генерацій, які залишається лише впорядкувати

Сподіваюсь вам було цікаво). Підписуйтесь на мій телеграм канал Нейродива. 

1562
Теми: SMM Digital Digital-реклама Digital-ринок prodigital AI