Experimentos con IA: Video de Japón en 1913 reescalado desde 480p y 30 fps a UHD y 60fps
8Volvemos hoy con un nuevo experimento de reescalado usando Video Enhance AI. He estado probando la última versión (la 1.7) ya que es la única compatible con las gráficas nVidia RTX 3080, como la que acabo de estrenar, que hasta ahora eran incompatibles con versiones anteriores del programa. El mismo caso tenemos con DAIN, el programa que usa una IA para interpolar fotogramas y aumentar la tasa de fotogramas del vídeo, que también ha añadido soporte a las 3080 en su última versión, la 0.48. Hay que decir que, aunque el vídeo original del que he partido está a 30 fps y a resolución de 720p, como se puede apreciar, el material original en realidad debe ir a unos 15 fps. Por eso, en esta ocasión, primero he recodificado el vídeo a 15 fps antes de pasar por DAIN para interpolar los fotogramas a 60fps. Decir también, que he obtenido mucho mejor resultado en Video Enhance AI bajando el vídeo de partida de 720p a 480p. No obstante, esta última versión del programa, aunque es notablemente más rápida al aprovechar los Tensor Core de las nuevas gráficas de nVidia, desgraciadamente ha empeorado en los resultados de algunos de los modelos, en especial de Gaia CG, que era el que mejor resultados daba con todo tipo de material sin ninguna duda, que parece que están revisando para arreglarlo en versiones posteriores. Por ese motivo he tenido que recurrir al modelo Theia Detail, cuyos resultados no son tan buenos, pero al menos son aceptables.
El vídeo original se puede apreciar aquí: https://www.youtube.com/watch?v=BYOGClmmeao