Советы по обучению пользовательских моделей Firefly

Основы

Изображения

• Используйте файлы JPG или PNG.
• Выбирайте не менее 10–30 высококачественных изображений, которые демонстрируют стили, концепции и предметы, характерные для определенного бренда.
• Снимите набор различных изображений, отражающих стиль или тему.
• Убедитесь, что размер каждого файла изображения не превышает 50 МБ.
• Убедитесь, что изображения имеют разрешение более 1024 x 1024 пикс. с максимальным соотношением сторон 16:9 для альбомной ориентации или 9:16 для портретной ориентации.  
• Сохраняйте согласованность формата с набором данных для обучения. Если в наборе для обучения используется портретная ориентация, и создаются квадратные изображения, то при создании будут появляться проблемы отсечки. 
• Обрезайте образцы, чтобы сместить фокус на наиболее важные визуальные элементы.
• Поддерживайте единство эстетического аспекта, включая при этом изображения, на которых показаны различные точки обзора и фоны.

Подписи

• Используйте подписи, чтобы повысить детализацию и обучить пользовательские модели на примерах концепций, которые они должны создавать. 
• Подписи на изображениях должны быть краткими и емкими. Рекомендуется не более 15–18 слов.
• Изменяйте структуру предложений для всех подписей к изображениям.
  
• При необходимости изменяйте автоматические подписи, чтобы ввести для модели сведения о концепции.
• Базовая модель Firefly не знает знаменитых людей или известные места, поэтому подписи должны включать описания этих мест, чтобы улучшить потенциальные результаты.
• Убедитесь, что подписи содержат ключевые фразы, если вы обучаете модели для работы с предметами или объектами. Предоставьте четкие сведения о предмете в подписи для каждого изображения.
• Создавайте 2/3 подписей для обучения с помощью ключевых слов и описательных сведений, чтобы лучше обучить модель.
  • Например, если на изображениях есть логотип бренда, используйте его как «Логотип Adobe», чтобы помочь модели определить концепцию в части данных для обучения. Не делайте этого в 1/3 подписей к изображениям, так модель научится определять и создавать логотип.

Тестирование моделей перед публикацией

Запросы

• Вводите более короткие и точные запросы, чтобы больше соответствовать предмету и стилю.

Панель параметров «Текст в изображение»

• Ползунок Интенсивность визуализации по умолчанию установлен на минимальное значение для оптимального сохранения уникальности изображения. Однако для творческих примеров использования таких, как Справочный стиль, повышение интенсивности визуализации помогает достигать более ярких результатов.
  
• При использовании Справочной композиции для предметов выбирайте изображения с белым фоном или эскизы, на которых предмет находится в нужной позе.

Рекомендации для определенных моделей

Модели для работы с предметами

Пользовательские модели, обученные на основе предметов, персонажей или продуктов, определяют основные качества предмета и пытаются воссоздать его в различных положениях и средах.

Изображения

• Единообразие объекта. Предоставляйте изображения с предметом того же типа и той же модели, что и предмет, который вы хотите получить, обеспечивая при этом одинаковый внешний вид предмета на всех изображениях. Старайтесь не смешивать много цветов, стремитесь к выбору общей темы или рисунка на изображениях. Тем не менее, предмет может меняться в зависимости от сцен, поз, одежды и фона.
  
• Фокус на объекте: используйте изображения, на которых предмет находится в фокусе и нет отвлекающих внимание объектов. Размещайте предмет ближе к центру изображения и следите за тем, чтобы он занимал как минимум 25% от всего изображения.
  
• Окружение: выбирайте изображения, на которых предмет показан с разных ракурсов и в разном контексте, чтобы его было видно при разном освещении. Использовать изображения с белым или прозрачным фоном допускается, но лучше, чтобы все же присутствовало и более сложное окружение.
• Избегайте других объектов. Избегайте размещения крупных элементов на фоне или около персонажа. Любой большой элемент запоминается моделью и будет отображаться в созданных ею изображениях, аналогично тому, который был в наборе данных для обучения.

Подписи

• Лаконично описывайте в подписи изображение и объекты, отличные от предмета. Это помогает модели отличать предмет от других объектов
  
• Если при создании подписи главное прилагательное или дескриптор появляется рядом с концепцией, а вы хотите, чтобы эта концепция всегда создавалась в соответствии с этим прилагательным, его необходимо включить в концепцию для получения наилучших результатов. Например, пользовательская модель должна создавать серых кошек. Ваша концепция — «кошка», а прилагательное — «серая». Чтобы модель всегда создавала серую кошку, необходимо включить прилагательное в концепцию таким образом — «серая кошка».

Концепция

• Убедитесь, что введенная концепция содержит не менее трех персонажей. 
• Используйте существительное, правильно представляющее основной предмет модели. Например, если ваша модель обучена на материалах с вашей собакой по кличке Спот, введите «Спот» в поле Концепции.
  

Модели для работы со стилем

Пользовательские модели, обученные для работы со стилем, будут определять внешний вид и впечатление, которое производят ресурсы, для создания материалов в таком же стиле при получении запроса.

Изображения

• Выбор схожих эстетических аспектов: изображения с различными сценами и объектами, создающие похожее впечатление.
• Использование различных изображений: добавляйте как можно больше изображений, чтобы модель не начала фокусироваться на ненужных объектам и предметах.
  
• Избегайте фиксированных фраз. У фиксированного шаблона значения больше, чем у других фраз. Например, если каждая подпись содержит «Сплошной черный фон» или «симпатичные мультипликационные стили», модель будет опираться на эту фразу, и при любом тестовом запросе без этой фразы вы не будете получать нужные результаты. 
  

Подписи

• Подписи на изображениях должны быть краткими и емкими. Рекомендуется не более 15–18 слов.
  
• Подписи должны содержать сведения, которые позволяют Firefly получить контекст о стиле. 
• Сосредоточьтесь на уникальных особенностях каждого изображения, употребляя терминологию, которую средства создания будут использовать при получении запросов, например «фигура человека» или «розовые маркированные круги».
• Избегайте фиксированных фраз, так как у фиксированного шаблона значения больше, чем у других фраз. Например, если каждая подпись содержит «Сплошной черный фон» или «симпатичные мультипликационные стили», модель будет опираться на эту фразу, и при любом тестовом запросе без этой фразы вы не будете получать нужные результаты.  

Полезные ресурсы

• Обучение пользовательских моделей Firefly
• Создание фирменного контента с помощью Adobe Firefly
• Создание эффективных запросов
• Справка по Firefly для организаций