C
ControlNet
Также известен как: КонтролНет
Генеративный AIОпределение
ControlNet — метод точного управления генерацией изображений через дополнительные условия: позы, края, глубину, скетчи.
Простое объяснение
ControlNet — как режиссёр для AI-художника. Вы задаёте позу, композицию, структуру — AI рисует в этих рамках.
Подробнее
ControlNet решает проблему контроля в диффузионных моделях. К Stable Diffusion добавляется trainable copy encoder, которая принимает conditioning image (например, карту глубины или скелет позы) и влияет на генерацию. Можно генерировать изображения с точной позой человека, сохранять композицию при изменении стиля, использовать скетч как основу. Множество предобученных ControlNet: canny edge, openpose, depth, scribble. Революционизировал профессиональное использование генерации изображений.
Связанные термины
Image-to-Image
Image-to-Image (img2img) — генерация нового изображения на основе входного с учётом текстового промпта и степени изменения.
Token
Токен — минимальная единица текста, обрабатываемая языковой моделью; обычно это слово, часть слова или символ.
LLaMA
LLaMA (Large Language Model Meta AI) — семейство открытых языковых моделей от Meta, ставшее основой для множества производных моделей.
Gemini
Gemini — мультимодальное семейство AI-моделей от Google DeepMind, объединяющее понимание текста, изображений, аудио и видео.