В своих предыдущих статьях я обсуждал основы улучшения качества видео и столкнулся с ограничениями существующих инструментов, таких как NeatVideo и Topaz Video AI. Этот раз я решил попробовать новый подход, используя более легкую модель, Real-ESRGAN Compact, на видеокарте RTX 4060 Ti. Мой эксперимент заключался в создании симулятора, который имитирует разрушение пленки, чтобы обучить нейросеть выявлять физические дефекты изображения. Процесс занял два месяца и 2 миллиона итераций, в результате чего я разработал набор специализированных инструментов, не являющихся универсальными, но эффективными для решения специфических проблем, игнорируемых другими решениями. Я также создал программное обеспечение для симуляции старения пленки, что помогло нейросети лучше справляться с восстановлением изображения. В конечном итоге, я обучил несколько моделей, каждая из которых специализирована на определенных типах дефектов, и теперь они доступны в Open Source.