Словарь ИИ
Что такое аутпейнтинг
Коротко
Аутпейнтинг это достраивание изображения за его границами: нейросеть продолжает сцену вправо, влево, вверх или вниз так, чтобы новая часть совпадала с оригиналом по стилю и свету.
Изображения, видео, звук · outpainting
Михаил МозгПроверено: 1 минута чтения
Ребенку
Представь открытку, на которой видно только окошко домика. Тебе интересно, что вокруг, и ты подклеиваешь по бокам чистые листы. На них ты дорисовываешь стену, крышу, сад и дорожку, стараясь брать те же цвета. Получается большая картина, а открытка оказывается в ее середине. Компьютер тоже умеет так раздвигать рисунок во все стороны.
Простыми словами
У вас есть снимок, но он слишком узкий: например, вертикальное фото, а нужен горизонтальный баннер. Программа ставит изображение на большой пустой холст и рассматривает края оригинала. Затем она заполняет пустые поля: продолжает пол, небо, стену, деревья, подбирая перспективу и освещение. Исходная часть остается как была. Процесс можно повторять, каждый раз отодвигая рамку, и так из маленькой картинки получается панорама. Если вокруг объекта мало подсказок, нейросеть иногда придумывает странные детали, поэтому результат просматривают.
Для бизнеса
Аутпейнтинг решает частую задачу маркетинга: один кадр нужен в десятке форматов. Квадрат для ленты, вертикаль для мобильных экранов, широкая обложка для сайта и карточка маркетплейса с полями под текст получаются из одной фотографии без пересъемки. Цена складывается из числа форматов, разрешения и объема ручной доводки: в облачном редакторе платят за генерацию, на своем сервере за железо и настройку. Риски: дорисованная часть может содержать лишние предметы, чужие логотипы или ошибки в перспективе, а для товара недопустимо, чтобы модель изменила его самого. Поэтому товар накладывают поверх результата отдельным слоем. Процесс удобно проверить на одной рекламной кампании.
Для специалиста
Аутпейнтинг (outpainting, image extension) это генерация содержимого за пределами исходного кадра. Технически задача сводится к инпейнтингу с инвертированной маской: известная область в центре, неизвестная по краям. Однако контекст здесь есть только с одной стороны, и ошибки накапливаются по мере удаления от оригинала. В работе Boundless (Teterwak и др., 2019) расширение выполняла состязательная сеть (GAN), а дискриминатор получал семантическое условие, чтобы новая часть совпадала по смыслу; авторы показали и экстремальные расширения вплоть до панорам. В диффузионных конвейерах исходник масштабируют и помещают на пустой холст, белая маска покрывает поля, а форму объекта удерживают через ControlNet, например по карте глубины. Затем проходят инпейнтинг-моделью с размытой маской и накладывают оригинал поверх результата. Длинные панорамы расширяют шагами с перекрытием.
Пример
Мебельный магазин получил от фабрики вертикальные фото кресел. Для широкого баннера на главной странице нейросеть дорисовала по бокам комнату с окном и торшером, а кресло осталось нетронутым.
Связанные термины
Вопросы и ответы
Как расширить фото с помощью нейросети?
Можно ли использовать дорисованные фото в рекламе?
Источники
Где это применяют в компании
Не уверены, нужно ли это вашей компании?
Карта ИИ-решений