ComfyUI для работы с нейросетями:
изображение, анимация, звук

8 июня — 6 августа | Онлайн | 18 групповых занятий | 62000₽/620€

Открыт набор на пятый поток.

О курсе

ComfyUI (https://comfy.org/) — это интерфейс для работы с генеративным ИИ, предоставляющий наглядный и глубокий контроль над генеративными моделями, параметрами и результатами, что делает работу с нейросетями творческой, увлекательной и свободной.

На курсе мы будем работать со свободно распространяемыми моделями. В отличие от коммерческих веб-сервисов с ними можно работать без ограничений, подписок и модерации. Разобравшись с основами, вы сможете работать в ComfyUI с новыми ИИ моделями любого типа в дальнейшем.

Курс может быть интересен как тем, кто уже использует в работе ИИ-инструменты и хочет сделать следующий шаг, так и тем, кто только приступает к изучению возможностей ИИ и ищет фундаментальный и структурированный подход.

Расписание пятого потока

8 июня — 6 августа
По понедельникам и четвергам
18:00 — 21:00 основное занятие, 21:00 — 22:00 ответы на вопросы для желающих
[Время по UTC+3]

Программа курса
  1. Знакомство с ComfyUI и друг с другом
    • Локальные модели ИИ, в чём отличие от сервисов, и как с ними работать. Интерфейс ComfyUI: воркфлоу, ноды, соединения.
  2. Запуск нейросетей в облаке
    • Откуда берутся технические требования: GPU, NVidia CUDA, видеопамять. Настройка аккаунта и первый запуск. Docker контейнеры. Репозиторий ИИ моделей Hugging Face.
  3. Как работает генеративный ИИ
    • Ключевые концепции диффузионных моделей, DiT/UNET, CLIP/Text Encoder, VAE, Latent space, Noise, Steps, CFG, Conditioning, Distilled.
  4. Приступаем к генерации изображений
    • Текстовые промпты и основные параметры. Создание изображений с использованием базовых и дистилированных моделей.
  5. Edit-модели и denoise
    • Модели для обработки и совмещения референсов. Denoise на примере image 2 image.
  6. Работа с размером изображений. Генерация текста.
    • «Слепое» увеличение с помощью upscale моделей и «creative upscale» с помощью диффузии. Автоматическое описание изображений.
  7. Исправление частей изображения
    • Inpainting модели, маски, сегментация, автоматическое выделение объектов и удаление фона.
  8. LoRA: Адаптация базовых моделей
    • Установка и активация готовых LoRA в ComfyUI. Персонаж, визуальный стиль, концепт. Репозиторий civit.ai. Подготовка датасета к обучению.
  9. LoRA: Тренировка модели на своих данных
    • Запуск в облаке обучения модели на ваших данных. Тест результата.
  10. Управление объёмом, контурами и позами
    • ControlNet. Генерация и применение карт глубины.
  11. Извлечение визуальных признаков из изображений для переработки.
    • IP-Adapter для SDXL, Redux для Flux 1. Изменение ракурса, сохранение персонажа, совмещение изображений.
  12. Генерация аудио.
    • Звук, песни. Синтез и распознание речи, звуковые генерации.
  13. Видео на основе текста и изображений
    • Локальные модели для генерации видео и их использование в ComfyUI. «Слепая» интерполяция.
  14. LoRA для видео
    • Установка и активация готовых LoRA в ComfyUI. Генерация видео с речью.
  15. ControlNet в видео
    • Video 2 Video.
  16. Редактирование видео с помощью масок и продолжений
    • Inpainting в видео во времени и в пространстве, зацикленные анимации.
  17. Дополнительный материал + ComfyUI на своём компьютере
    • Установка и оптимизация для компьютеров с видеокартами NVidia. Материал не вошедший в остальные занятия.
  18. Неделя самостоятельной работы и презентация итогового проекта
    • Просмотр и обсуждение финальных проектов, заключительная общая консультация.

Работа в облаке

Вам не понадобится мощный компьютер для работы на курсе. Вы научитесь запускать ComfyUI в облачных сервисах с низкой стоимостью почасовой аренды. Зачастую это более экономически оправданно, чем покупка профессиональной видеокарты.

Подготовленный для быстрого и удобного запуска аккаунт, которым вы будете пользоваться на курсе, останется у вас после окончания, и вы сможете продолжать использовать его.

Формат и структура курса

  • Два месяца, 18 групповых дистанционных занятий, 2 раза в неделю в Zoom.
  • Продолжительность каждой встречи — 3 часа на тему занятия плюс час факультативной консультации для желающих.
  • Онлайн-поддержка: чат с преподавателем и однокурсниками для вопросов и обсуждений между занятиями.
  • Записи занятий останутся для персонального архива.

Результаты обучения

  • Вы научитесь работать с моделями ИИ в ComfyUI и запускать их как в облаке, так и на локальном компьютере. У вас останется аккаунт для работы в облаке и набор разобранных на занятиях файлов выполняющих самые разные генеративные задачи.
  • Вы освоите возможности моделей для генерации и редактирования изображений Flux, Z-Image, SDXL и других. Вы ознакомитесь с принципами видеогенерации, научитесь использовать модели LTXV 2.3 и WAN 2.2 для коротких анимаций и ознакомитесь с применением моделей для сложного контроля движения, продлений и совмещений видео.
  • Вы узнаете основные принципы работы визуальных ИИ моделей. Вы научитесь дообучать модели и натренируете Flux Klein на собственных данных.

Кому это будет полезно

Курс адресован в первую очередь независимым авторам для обогащения их художественной практики, предполагающей свободу, понимание используемых инструментов и отсутствие ограничений.

  • Художникам, чтобы найти свой авторский подход и самостоятельно выполнять с помощью ИИ бóльшую сферу работы.
  • Фильммейкерам, чтобы свободно экспериментировать с передовыми технологиями в генеративном видео.
  • Дизайнерам, чтобы вывести работу с ИИ за рамки концептуализации, получая качественно новый уровень результата.
  • Исследователям и энтузиастам курс покажет доступные на сегодняшний день возможности и вызовы генеративного ИИ, и поможет глубже погрузиться в технологию.
  • Студиям и агенствам курс может помочь повысить эффективность бизнеса внедрив новые инструменты.

Требования

Если вы будете проходить курс из РФ, удостоверьтесь, что ваш VPN-сервис позволяет открывать сайт для аренды облачных вычислений runpod.com (для регистрации используйте мою реферальную ссылку). Помимо runpod мы будем использовать на занятиях Zoom и Telegram.

Для учёбы на курсе нужны:

  • Базовая компьютерная грамотность
  • Базовый английский язык
  • Интерес и терпение

Курс, при всей его фундаментальности и технической глубине, задумывался как доступный и дружелюбный. ComfyUI станет в процессе обучения таким же привычным для вас, как графический редактор или программа для монтажа. Навыки программирования не требуются и не понадобятся.

О преподавателе

Иван Якушев — цифровой визуальный художник и преподаватель.

С 2022 года преподаёт во Франции в национальной высшей школе искусства и дизайна ENSAD Nancy. С 2024 года ведёт практический курс по применению ИИ в искусстве для студентов-художников ENSAD Nancy и инженеров École des Mines Nancy.

Организовывал и проводил воркшопы по нейросетевому искусству для студентов художественных вузов Франции, Бельгии, Италии и Германии в рамках программы Erasmus. С 2015 по 2022 год преподавал в HSE Art and Design School визуальную коммуникацию и алгоритмическую графику.

Видеоработы принимали участие в таких фестивалях, как International Short Film Festival Oberhausen, MIEFF и др.

Персональные выставки художественных работ "Au delà de la fatigue" (2024, Galerie S001, Франция) и "Pétrifié sur le seuil" (2026, ССGP SprayLab, Франция) в соавторстве с Александрой Карелиной. Видеоперформанс с риалтайм генерацией "Noms des eaux" для инициатив K1NO1 (Франция) и ACT (Германия). Участие в групповых выставах IS//SI (MJC Lillebonne, Франция), «ИИ: и? Нейронные сети и творческий процесс» (галерея Краснохолмская, Москва) и др.

Часто задаваемые вопросы

Будут ли записи занятий?

Курс строится как живая работа в группе: семинары, обсуждения и совместная практика. Но записи встреч останутся и будут доступны в группе в Telegram.

Обязательно ли работать в облаке? Я хочу использовать свой компьютер.

Да, использование облачных компьютеров — ключевая часть курса. Модели ИИ могут быть чрезвычайно требовательны к железу, а предустановка может сбивать с толку. Освоив запуск в облаке, вы сможете запускать онлайн генерации и обучение моделей с любого устройства, откуда угодно и в любой момент.

Если ваш рабочий или домашний компьютер имеет видеокарту NVIDIA начиная от 3060, то мы обсудим как установить ComfyUI и использовать локально. Также мы обсудим альтернативные простые сервисы с подпиской на ComfyUI.

Нужно ли оплачивать аренду облака дополнительно или покупать какие-либо подписки?

Да, дополнительно вам нужно самостоятельно оплатить около 30-50 евро на аренду видеокарты в облаке на время курса.

Можно ли оплатить курс частями?

Участие в курсе возможно только после полной оплаты.

Стоимость для физических лиц:

62000 рублей (картой через СБП) для РФ
620€ (банковский перевод по инвойсу) для ЕС

+
Около 30-50$ на аренду облачных компьютеров на сервисе RunPod на время курса.

Если у вас есть международная банковская карта либо криптокошелёк, вы сможете провести оплату RunPod самостоятельно. Если у вас только российская карта или при оплате от организации, пополнение аккаунта может быть добавлено к стоимости курса и проведено автоматически. (Выберите соответствующую опцию при регистрации на курс).

При оплате от организации/юридического лица стоимость курса выше.