← Вернуться к списку

Улучшение реализма синтетического видео без предварительного обучения с помощью структурно-чувствительной денойзинга

Краткое содержание

arXiv:2511.14719v1 Тип объявления: кросс Аннотация: Мы предлагаем подход к повышению реалистичности синтетических видео, который позволяет повторно визуализировать синтетические видеопоследовательности из симулятора в фотореалистичном стиле. Наш метод повышения реализма представляет собой фреймворк без предварительного обучения (zero-shot), направленный на сохранение многоуровневых структур из исходных синтетических видеоматериалов как в пространственной, так и во временной областях, основанный на диффузионной модели для обработки видеоданных без дополнительного дообучения. В частности, мы вводим эффективное изменение, позволяющее генерацию или процесс удаления шума контролировать с помощью оцененной структурой информации из синтетического видео, такой как карты глубины, семантические карты и контурные карты, получаемые вспомогательной моделью, а не извлекаемой непосредственно из симулятора. Это руководство гарантирует согласованность улучшенных видеороликов с исходным синтетическим материалом как на уровне структуры, так и на семантическом уровне. Предложенный нами подход является простым, но при этом универсальным и мощным методом улучшения реалистичности синтетических видеозаписей.

Полный текст статьи пока не загружен.