ByteDance Video Upscaler

ByteDance Video Upscaler - нейросеть для улучшения видео с повышением разрешения (апскейл: увеличивает картинку и старается дорисовать недостающие детали). Подходит, когда исходник выглядит «мыльным» или слишком мелким для большого экрана, и хочется довести его до 1080p, 2K или 4K.

По описанию инструмента, он делает упор на восстановление деталей и «чистую» картинку без лишних артефактов, а ещё на временную согласованность - чтобы кадры не начинали мерцать, а движения не превращались в кашу. Также заявлено, что апскейлер обучен на большом датасете с разным типом контента (от профессионального видео до качественного пользовательского), поэтому должен нормально справляться и с «живыми» съёмками, и с анимацией, и со скринкастами.

Как это работает

Вы загружаете ролик, выбираете целевое разрешение, и нейросеть проходит по кадрам, увеличивая их и пытаясь восстановить мелкие элементы: текстуры, границы объектов, детали в лицах и одежде. Важно, что она старается держать одинаковый стиль улучшения от кадра к кадру - это снижает шанс на «мигание» резкости и случайные «призраки» в движении.

Настройки

• Видео - загрузите исходный файл (подойдут MP4/MOV/WebM, до 100 МБ).
• Целевое разрешение - выберите, до какого качества поднять видео: 1080p, 2K или 4K. Практично так: для сторис/мессенджеров чаще хватает 1080p, для ютуба и презентаций удобно 2K, а 4K имеет смысл, если вы точно будете показывать на большом экране или потом ещё будете кадрировать.

Для чего подойдёт

• Подтянуть старое семейное видео, чтобы его было приятно смотреть на современном телевизоре.
• Сделать чётче ролик с телефона, который оказался слишком «мыльным» после отправки через мессенджер.
• Улучшить запись экрана (урок, инструкция), когда мелкий текст и элементы интерфейса плохо читаются.
• Привести в порядок анимацию или игровой клип, чтобы картинка выглядела ровнее и детальнее.
• Подготовить видео для монтажа: увеличить разрешение, чтобы потом можно было аккуратно кадрировать без сильной потери качества.

Ограничения

• Апскейл не творит чудес: если исходник сильно смазан, снят в темноте с шумом или пережат до квадратиков, часть проблем останется.
• Иногда нейросеть может «перешарпить» (сделать слишком резким) мелкие детали или добавить ненужные узоры на текстурах - это чаще заметно на лицах, волосах и мелком тексте.
• Длинные ролики и высокий апскейл (особенно 4K) обычно требуют больше времени на обработку, а файлы на выходе становятся тяжелее.

Чем отличается от аналогов

В описании ByteDance Video Upscaler отдельно подчёркивают две вещи: работу с деталями (в том числе уменьшение ореолов по краям - de-ringing) и временную согласованность между кадрами, чтобы результат выглядел «цельным», а не как набор отдельно улучшенных картинок. Это как раз то, из-за чего многие простые апскейлеры проигрывают на видео: картинка вроде бы становится больше, но начинает неприятно мерцать.