Генерируем аи-аватары с собой любимым

 Публичный пост
30 октября 2022  3081
ОХУЕННО

Всем привет!

Два месяца назад была опубликована новая сеточка DreamBooth от гугла. В отличии от стандартных диффузных моделей, эта модель позволяет генерировать контент с заданным объектом, как на примерах ниже.

Модель быстро нашла себе применение - кастомные аватары. К примеру avatarai.me предлагает сгенерировать пикчи с собой любимым за 30$. В этом посте я покажу как сделать это бесплатно.

Генерируем аватары

  1. Нам понадобится несколько хороших фотографий человека. Сделайте 5-10 селфи с разных ракурсов и разными эмоциями. От качества фоток, разнообразия эмоций и ракурсов зависит качество получившихся аватаров.

  2. Идем в готовый гугл колаб, нажимаем file -> save copy in drive. После этого у вас появится копия ноутбука доступ к которому есть только у вас.

  1. Жмем коннект

  1. Проверям что запущен гпу, если нет - меняем на гпу и жмем коннект еще раз.

  1. Регистрируемся в HuggingFace для того чтобы скачать натренированные веса. После регистрации подтверждаем почту, создаем ключ (Settings -> Access Tokens). Вставляем ключ в HUGGINGFACE_TOKEN.

  1. Читаем лицензию модели, если согласны - соглашаемся.

  2. В гугл колабе все примеры написаны для собаки, но нам нужно запустить модельку для человека. ctrl+f: dog -> person

  3. Запускам колаб

  1. В блоке Start Training нас попросят загрузить фотки - загружаем. Фотки будут загружены в ран тайм, доступ будет только у вас. После закрытия ноутбука фотки пропадут.

  2. Ждем пока сетка обучится. При стандартных настройках это займет 15-20 минут.

  3. Вбиваем запрос вида photo of zwx person as a pirate в последнем блоке кода, жмем generate.

  1. Делимся результатом в треде

Мои результаты

Сеточка хорошо справляется с "реальными" запросами, вроде "человек поет", "человек танцует" итп. С полетом мысли вроде "человек дерется с солнцем" нормальных результатов я не получил :(

Вот эти аватарки получились при использовании только старых фото:

А тут я добавил селфи, качество стало лучше:

17 комментариев 👇
Артемий Куликов Инфлюенс маркетинг и продажи 30 октября 2022

Последняя аватарка самая мощная вышла

  Развернуть 1 комментарий

  Развернуть 1 комментарий

Как развлечение я это понимаю, как способ создать себе нормальную аватарку нет, у них все есть чувство искусственности и криповые артефакты

  Развернуть 1 комментарий

Забавно что никто не понял что моя ава сделана нейросетями :)

  Развернуть 1 комментарий

@YuryScript, Нам то не гони! (с)

  Развернуть 1 комментарий

@YuryScript, так в том и прикол, что искусственно и с криповыми артефактами. Постирония, метаюмор, все дела. Я себе аватарку канала в dalle делал, чтобы максимально странно вышло.
Хотя, если постараться, то наверняка можно и что-то приличное сделать.

  Развернуть 1 комментарий

Я за любой кипишь с AI и дизайном.

Так что круто.)

  Развернуть 1 комментарий

Афигенно :)

  Развернуть 1 комментарий

Колаб не осилил, но завел всё это дело на домашней венде под WSL
Оче замечательно.
Наловчился подбирать фото для обучения и последующий запрос для генерации.

Сюда не стал всё совать, галерея: https://imgur.com/a/NcuVcom

P.S.: благодоря сетке непреднамеренно посмотрел на себя в вариантах:

  • +30кг (намек понял)
  • сто вариаций косоглазия
  • двести вариаций дефектов морды - от заячьей губы до просто мешанины вместо лица
  • женщина с моими чертами лица, включая усы и бороду
  • с офигенными сиськами, но при этом без особых отличий в лице

Спасибо за наводку в общем.;) Не следил за темой - думал, все это живет где-то в облаках и самому позапускать не дадут.

  Развернуть 1 комментарий
Yaroslav Lunev Адвокат дьвола 28 ноября 2022

Еще можно прийти в Lensa, взять триал на 7 дней, купить за 7 или 8 евро пак на 200 аватарок, загрузить 10-20 фоток и за 20 минут он их нагенерит. Давать задания или параметры ему нельзя, но и так выходит неплохо.

  Развернуть 1 комментарий

@Yardy, меня смущает скармливание 10-20 своих фоток каким-то непонятным чувакам, которые не понятно как будут потом эти фотографии еще использовать:) Я понимаю, что есть и так миллион фоток меня в соцсетях, но эти данные еще надо собрать и упорядочить, а здесь я проделываю эту работу за них

  Развернуть 1 комментарий

@Stenopolz, можно взять только те, что есть в одной сети типа инстаграма/фб/вк и тп. В целом, согласен, но каких то защитных аргументов, кроме (бабкиным голосом) "милок, да кому ты нужон", придумать не могу.

  Развернуть 1 комментарий

@Stenopolz, мы их честно удаляем, сам лично ротацию настраивал :)

  Развернуть 1 комментарий

@strangeman, о, чуваки становятся понятными:)

  Развернуть 1 комментарий

@Yardy, в твиттере ещё все игрались с Midjourney

  Развернуть 1 комментарий

@Yardy, а потом удивляться, почему ФСБ знает тебя в любом виде)))))) меня прикалывает, как хомячки за деньги сдают базу своих фоток ради цветных картиночек

  Развернуть 1 комментарий

Важный момент — фотографии в HEIC он не принимает :(

  Развернуть 1 комментарий

😱 Комментарий удален его автором...

  Развернуть 1 комментарий

😎

Автор поста открыл его для большого интернета, но комментирование и движухи доступны только участникам Клуба

Что вообще здесь происходит?


Войти  или  Вступить в Клуб