Новый подход к восстановлению пленки с помощью нейросетей

В предыдущих материалах я исследовал методы апскейлинга и понял, что существующие решения часто не справляются с задачами старой анимации. На этот раз я решил провести любительский эксперимент, используя лишь RTX 4060 Ti. Я разработал симулятор разрушения пленки для обучения модели распознавать и устранять дефекты. Этот процесс занял два месяца и 2 миллиона итераций. Я выбрал архитектуру Real-ESRGAN Compact, так как она быстрее и легче, чем другие модели. Вместо повышения разрешения, я сосредоточился на перерисовке пикселей, что позволило создать эффективный денойзер. Основная цель — решение специфических проблем, с которыми не справляются существующие инструменты. Мой проект получил название Archivist и включает несколько специализированных моделей для удаления артефактов, таких как линии растяжения и шум. Все разработки доступны в Open Source.