Улучшение видео с ИИ: Новая модель Starlight mini в Topaz Video AI 7

Компания Topaz Labs, признанный лидер в разработке решений для обработки изображений и видео с использованием ИИ, представила значительное обновление своего продукта Video AI 7, интегрировав в него передовую модель «Starlight mini». Этот шаг открывает новую главу в локальной обработке видео, применяя диффузионные модели ИИ не для создания контента, а для глубокого улучшения уже существующего. Это первый случай применения такой технологии для локального улучшения видео.

Как работает «Starlight mini»

Модель «Starlight mini» выделяется на фоне традиционных методов ИИ, таких как генеративно-состязательные сети (GAN), благодаря своему подходу, основанному на итеративном удалении шума из данных. Этот процесс, вдохновленный физическими процессами диффузии, позволяет получать более естественные и детализированные результаты при масштабировании разрешения до 4K. «Starlight mini» эффективно устраняет шумы, сглаживает артефакты размытия и повышает резкость. Важное преимущество заключается в том, что все эти улучшения происходят автоматически, без необходимости сложной ручной настройки параметров.

Возможности и преимущества

«Starlight mini» предлагает пользователям комплексный подход к реставрации видео. Модель способна одновременно выполнять деинтерлейсинг (устранение чересстрочности), шумоподавление и увеличение разрешения, что значительно упрощает рабочий процесс по сравнению с предыдущими версиями, где эти операции требовалось выполнять отдельно. Возможность просмотра улучшенного качества в реальном времени во время экспорта также является значимым удобством, позволяя сравнивать оригинал с результатом обработки.

Впечатления пользователей

Пользователи, уже оценившие возможности «Starlight mini», выражают восторг от качества преобразования. Отмечается, что модель способна значительно улучшать старые или низкокачественные видео, делая их более чёткими и детализированными, особенно при работе со сложными исходниками, такими как записи с 8/16 мм плёнки или mini-DV кассет. Один из пользователей отметил, что модель «очищает весь кадр», обеспечивая комплексное улучшение, в отличие от предыдущих моделей, которые могли фокусироваться лишь на отдельных аспектах.

Требования к оборудованию и доступность

Внедрение «Starlight mini» в Video AI 7 делает эту технологию доступной для широкого круга пользователей в качестве стандартного обновления. Возможность локальной обработки на собственном компьютере гарантирует конфиденциальность данных и не требует постоянного высокоскоростного интернет-соединения. Однако для эффективной работы требуются определенные технические ресурсы: видеокарта NVIDIA с объемом видеопамяти не менее 8 ГБ (рекомендуется 16 ГБ и более) и 12 ГБ оперативной памяти. На текущий момент поддержка реализована для операционной системы Windows, но в планах разработчика расширение на macOS.

Ценовая политика и облачные решения

Topaz Labs предлагает Video AI 7, включающий доступ к «Starlight mini», за $249. Это разовая покупка, включающая обновления в течение 12 месяцев. Для тех, кто не располагает подходящим оборудованием для локальной обработки, предусмотрено удобное решение в виде облачной обработки.

По отзывам, эта опция не только доступна, но и более экономична и производительна по сравнению с предыдущими облачными сервисами компании, будучи примерно в 3 раза дешевле и в 4 раза быстрее оригинальной версии Starlight. Также доступен бесплатный тестовый режим облачной обработки, позволяющий обрабатывать три 10-секундных клипа в неделю с ограничением до 1080p.

Диффузионные модели представляют собой класс генеративных моделей, которые учатся создавать данные, постепенно устраняя шум из случайного начального состояния. Этот процесс, вдохновленный физическими процессами диффузии, позволяет генерировать высококачественные и разнообразные образцы данных, будь то изображения, текст или видео. Их способность улавливать сложные закономерности в данных делает их мощным инструментом для задач генерации и улучшения контента.

Особенности обработки и дальнейшее развитие

Несмотря на значительные улучшения качества, стоит учитывать, что процесс обработки с использованием «Starlight mini» может занимать продолжительное время даже на мощных системах, особенно для видео большой длительности или при высоком коэффициенте масштабирования. Тем не менее, результат оправдывает затраченные ресурсы для многих профессионалов и энтузиастов.

Topaz Labs продолжает развивать свои технологии, активно работая над оптимизацией модели для улучшения скорости обработки и расширения поддержки различных платформ. Компания также развивает платформу Krea.ai, ориентированную на генеративный ИИ, и возможно, в будущем нас ждут новые интеграции и прорывные решения, основанные на синергии этих направлений.

Сравнение ключевых характеристик

Ниже представлена таблица, сравнивающая основные аспекты «Starlight mini» с предыдущими моделями и требованиями: