He remasterizado con IA la intro de un juego de 25 años
Pasé mucho tiempo remasterizando la intro de un juego del año 2000. Utilicé IA para convertirla en un video limpio de 1080p.
Aprendí que el archivo de origen importa más que el modelo de IA.
Estas son mis principales lecciones del proyecto:
Elige la mejor fuente. Tenía una versión de 360p con buen audio y una de 1080p con mal audio. Elegí la versión de 1080p para el video y luego volví a añadir el buen audio. Siempre dale a tu upscaler el archivo de mayor calidad que puedas encontrar.
Usa clips pequeños para probar. No proceses el video completo de entrada. Pasé 16 horas probando un solo clip de 5 segundos. Esto me ayudó a encontrar la configuración adecuada sin desperdiciar días de tiempo de cómputo.
Controla el ruido. El movimiento rápido causa parpadeo. Utilicé una escala de
latent_noisebaja para los rostros para mantener el detalle. Utilicé una escala más alta para la acción rápida para evitar que la IA alucine nuevos detalles en cada fotograma.Divide por tomas, no por tiempo. Usa herramientas como PySceneDetect para encontrar los cortes. No uses divisiones basadas en el tiempo. Las divisiones temporales causan problemas de sincronización de audio. Usa cortes exactos por fotograma para mantener el audio y el video alineados.
Usa la nube para trabajos grandes. Mi hardware local era lento. Alquilé una GPU profesional en vast.ai por unos 2,70 $. Convirtió un trabajo de 74 horas en uno de 2 horas.
Truco para la subida final. Escala tu video a 4K antes de subirlo a YouTube. YouTube asigna bitrates más altos a los videos en 4K. Esto hace que tu video de 1080p se vea nítido.
El código completo y el pipeline están disponibles en GitHub.
Fuente: https://github.com/andyskw/ig2-solarian-seedvr2-remaster
Comunidad de aprendizaje opcional: https://t.me/GyaanSetuAi