ESRGAN - La I.A. que se usa para reescalar imagen y vídeo en alta definición.

1, 2, 3, 4
El Space Ace para mi gusto es el mejor de la saga, es el más intuitivo.

Te ha quedado de 10 @SIRDRAK, gracias.
Impresionante y con el doblaje en español es la ostia.
Pero, ¿En su tiempo ya estaba doblado al español? Es que siempre lo he visto en inglés.

Saludos.
AlterNathan escribió:Pero, ¿En su tiempo ya estaba doblado al español? Es que siempre lo he visto en inglés.

Saludos.


FX Interactive (La antigua Dinamic) reeditó una versión de la Trilogía de Dragon's Lair 1 & 2 y Space Ace localizadas completamente al castellano, SIRDRAK lo que ha hecho es pillar ese audio y meterlo en el Laserdisc originario que ha reescalado con IA.

Te pasé mi telegram en el hilo de MiSTer, si te interesan, ya sabes.

Saludos.
DJ Deu escribió:
AlterNathan escribió:Pero, ¿En su tiempo ya estaba doblado al español? Es que siempre lo he visto en inglés.

Saludos.


FX Interactive (La antigua Dinamic) reeditó una versión de la Trilogía de Dragon's Lair 1 & 2 y Space Ace localizadas completamente al castellano, SIRDRAK lo que ha hecho es pillar ese audio y meterlo en el Laserdisc originario que ha reescalado con IA.

Te pasé mi telegram en el hilo de MiSTer, si te interesan, ya sabes.

Saludos.


Efectivamente... Y ahora, después de unas cuantas horas sin parar, por fin he terminado también la versión 4:3... Lo más fácil habría sido, puesto que tengo una versión original ya dividida en los mini-vídeos, procesarlos directamente con la IA a vídeos y habría sido super rápido. Sin embargo, como quiero hacerlo lo mejor posible, de nuevo he vuelto a hacerlo por el método de procesar el vídeo a fotogramas separados en png (trabajo de chinos), aunque eso si, esta vez algo más fácil al estar separados en carpetas por cada vídeo y no tener que preocuparme del audio que ya lo dejé listo en la versión 16:9. Con todo incluso he editado algunos fotogramas con Photoshop, ya que el Video Enhance AI tiene un defecto que aún no han corregido: En ocasiones aparecen manchas brillantes en las imagénes con colores muy 'fluorescentes' (fucsia y verde neón, por ejemplo) por errores del procesado (esto, por ejemplo, no pasa con Gigapixel AI). La mayoría de las veces no es importante porque son pocas y en fotogramas puntuales, que pasan tan rápido que casi no se notan, pero hay veces en las que un fotograma puede quedar muy contaminado (sobre todo si hay flashes y cosas parpadeantes, que en estos juegos abundan a montones), así que he aprovechado para corregir los más notorios. Ahora he terminado de hacer las pruebas en Daphne, grabar un pequeño vídeo de muestra y subir unas capturas, que os dejo aquí para que veáis lo bién que se ve:



Y las capturas:

Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen
Imagen

Y me voy a la cama que estoy muerto jejeje
HOLA, solo pasarme a decir que sigo el hilo desde casi el principio y dar mis felicitaciones por este currazo con resultados impresionantes, saludos
Esto es un portento. Estáis haciendo un trabajo impresionante.

Ya os podían contratar las empresas para remasterizar juegos antiguos. Esto es un paso de gigante.
Hoy, un pequeño experimento con la intro de la versión de PSX de Brain Dead 13, un juego del estilo de los Dragon's Lair pero que no salió en laserdisc, sino directamente en ms-dos y en consolas, por lo que su calidad de vídeo es muy muy mala:

SIRDRAK escribió:Hoy, un pequeño experimento con la intro de la versión de PSX de Brain Dead 13, un juego del estilo de los Dragon's Lair pero que no salió en laserdisc, sino directamente en ms-dos y en consolas, por lo que su calidad de vídeo es muy muy mala:


hola genial tu trabajo, precisamente estoy con videos de poca calidad intentando sacar el mejor resultado tanto en animación como acción real,de hecho con animación se pueden conseguir resultados decentes partiendo incluso de capturas temblorosas o con colores cagados, aunque ahí uso mas edición aunada con la ia para colores y demás defectos que la ia se salta. un saludo.
PD :ahora estoy con los x-men y si encuentro donde tengo el disco duro con d&d, será la siguiente, re-saludos
SIRDRAK escribió:Hoy, un pequeño experimento con la intro de la versión de PSX de Brain Dead 13, un juego del estilo de los Dragon's Lair pero que no salió en laserdisc, sino directamente en ms-dos y en consolas, por lo que su calidad de vídeo es muy muy mala:



Se ve mejor de lo esperado, el boom de estos programas será cuando hagan calidades excelentes a partir de contenido de calidad baja/media.
DJ Deu escribió:
SIRDRAK escribió:Hoy, un pequeño experimento con la intro de la versión de PSX de Brain Dead 13, un juego del estilo de los Dragon's Lair pero que no salió en laserdisc, sino directamente en ms-dos y en consolas, por lo que su calidad de vídeo es muy muy mala:



Se ve mejor de lo esperado, el boom de estos programas será cuando hagan calidades excelentes a partir de contenido de calidad baja/media.


Cuando llegue eso, será el momento de organizarse y restaurar entre muchos, centenas de series y de pelis viejunas que nunca han sido reeditadas. ^ ^

Si fuera posible, a mí también me molaría mucho restaurar las cinemáticas de los juegos de generaciones pasadas. Pero no sé si una vez restaurado el material, podría reintroducirse nuevamente en los juegos de por ejemplo, PS1 o PS2.
Pues sí, y parece que poco a poco empieza a haber mejoras... Una cosa que olvidé comentar es que en la última versión de Video Enhance AI (la 1.2.3.) por fin han mejorado el modelo Gaia-HQ para imagen real, que antes prácticamente no se notaba y ahora por fin se aprecian mejoras visibles en los vídeos de acción real, y además también es más rápido, aunque en mi opinión, sigue dando mejor resultado para todo todavía el Gaia HQ CG de los dibujos animados. También están saliendo muchas versiones nuevas de Gigapixel AI (que ya va por la 4.9.3.) y donde también he apreciado mejoras sutiles en el procesado de las imágenes. También he leído en los foros de Topaz de que ya andan probando una beta del Video Enhance AI que por fin tendría diferentes opciones para la codificación del vídeo de salida (a ver si añaden soporte de H.265 y toquetear calidades y bitrrates para que no sea necesario usar el sistema de codificar a fotogramas independientes si quieres un vídeo de más calidad).
Me estoy quedando flipado, ¡esto es una revolución! Le va a venir de maravilla estas técnicas a la VR para relajar potencias..

Voy a echar un vistazo a este tema, imaginar que uno de mis animes favoritos, Taro el niño dragón, se le pueda aplicar esto y tenerlo a calidad hd....¡guau!. Personalmente, sobre el framerate, prefiero en el original. En los juegos da igual, pero en animación y pelis si.
DJ Deu escribió:
SIRDRAK escribió:Hoy, un pequeño experimento con la intro de la versión de PSX de Brain Dead 13, un juego del estilo de los Dragon's Lair pero que no salió en laserdisc, sino directamente en ms-dos y en consolas, por lo que su calidad de vídeo es muy muy mala:



Se ve mejor de lo esperado, el boom de estos programas será cuando hagan calidades excelentes a partir de contenido de calidad baja/media.


Siempre me pareció el mejor juego del género. Para ms-dos salió en castellano, no sé si en el resto de sistemas también
bueno, hay telegram de esto?
Chicos, con un I7 3770 a 3,40GHz,8 de RAM y una Radeon 7870 estoy fuerisima para poder usar estos programas no es cierto?El topaz me tira error y se me cierra.
tortoclas escribió:Chicos, con un I7 3770 a 3,40GHz,8 de RAM y una Radeon 7870 estoy fuerisima para poder usar estos programas no es cierto?El topaz me tira error y se me cierra.


El problema es que estos programas tiran mucho de CUDA o de los Tensor Cores de las tarjetas nVidia, por lo que si tienes una AMD apenas sacan beneficios de rendimiento y te ves obligado a tirar de CPU. No obstante, el Video Enhance AI te debería funcionar a pesar de todo (aunque eso sí, tardando de 10 a 15 veces más en procesar los vídeos). Si se trata de imágenes, el Gigapixel AI aun no usando GPU y tratándose de imágenes sueltas es bastante usable en cualquier equipo (de hecho yo incluso lo uso en un 2 en 1 con un Core M 7Y30). Si el Video Enhance AI te dá problemas y no te funciona con las últimas versiones, prueba con alguna antigua como la 1.1.0 o la 1.1.1, que funcionan muy bién.
Muchas gracias SIRDRAK voy a probar.
A raiz del hilo sobre qué versión del juego Popful Mail de Pc-88/Pc-98/Pc Engine CD/Sega MegaCD es mejor, se me ocurrió pasar un vídeo musical promocional que hicieron para la versión de Mega CD de 240p y 29'97 fps a 1080p y 59'94 fps:



La verdad es que es increíble lo que llegan a mejorar algunos planos totalmente pixelados...
No soy de mucho comentar en Elotrolado pero esto me parece una de las cosas más impresionantes que he visto en los últimos años.
Bueno, pues comentar que hoy ha salido una versión nueva del Video Enhance AI muy mejorada, y directamente han pasado de la versión 1.2.3. a la 1.3.8. así de golpe... Han añadido dos modelos nuevos a los ya existentes que parecen prometedores, Theia-Detail y Theia-Fidelity, los antiguos parece que codifican ahora algo más rápido, Gaia-HQ ya se nota más el efecto que antes, Se puede hacer zoom a las previews para ver la diferencia en detalle de una parte concreta de la imagen, permite codificar los vídeos a fotogramas independientes ahora también en jpg (se pierde un poco de calidad pero se evita el problema de ocupar cantidades inmensas de espacio en el disco duro, y el resultado sigue siendo mejor que codificar directamente a mp4), y ahora permine definir el nombre de la salida (antes lo asignaba de forma automática)... Muy interesante todo.

Decir que llevo un par de días haciendo el primer experimento de reescalar una película entera de fullHD a UHD usando Gaia-HQ, concretamente la peli de Sonic, y parece que se nota bastante... He aquí una captura de muestra usando la nueva versión del Video Enhance AI (hacer click para verla en su tamaño real)... Llevo casi dos días y ya me falta sólo 20 horas para terminar:

Imagen

Por supuesto estoy usando el método de codificar el vídeo a fotogramas independientes en png para sacar la mejor calidad posible, y la carpeta ya ocupa cerca de 800 GB... Y pasará de 1 TB cuando esté la película completa (99 minutos).
DJ Deu escribió:


Interesante... Se nota que ha usado el Gigapixel AI para el proceso... Con el Video Enhance AI en lo que respecta a dibujos animados, parece que el resultado es mejor... De hecho he probado a codificar el resultado con la última versión del programa (la 1.5.1) y el resultado es mejor que en ese vídeo (y eso que sólo lo he pasado a 1080p). Además en esta versión por fín han pasado del codec H.263 al H.264 y de un bitrate de 15 MB a otro de 50 MB (con lo cual ya no es necesario codificar a secuencia de imágenes, pues ya tiene el mp4 la calidad necesaria). Para la próxima versión dicen que van a añadir la posibilidad de configurar la salida de vídeo (es decir, que puedas elegir la calidad y el bitrate). Mi prueba:



También decir que es una pena lo que le hace YouTube a los vídeos con la codificación a veces. El que tengo en local se vé mucho mejor... La pixelación que se ve en los cielos nocturnos es inexistente en el vídeo que obtuve con Video Enhance AI.
A partir de ahora todo el mundo puede subir los fotogramas sin depender de CUDA, han sacado una versión de DAIN que funciona bajo Vulkan y encima va más rápida.

https://github.com/nihui/dain-ncnn-vulkan

Saludos.


@DJ Deu

Una duda, ¿esa escena de Blade Runner está reescalada con ESRGAN? Lo pregunto porque parece que se ve poco nítida y falta de detalles en comparación con la original.
Scotfield escribió:@DJ Deu

Una duda, ¿esa escena de Blade Runner está reescalada con ESRGAN? Lo pregunto porque parece que se ve poco nítida y falta de detalles en comparación con la original.


A mí también me ha llamado la atención porque reconozco en el vídeo el tipo de procesado que hace Topaz Video Enhance AI... De hecho, he estado haciendo algunas pruebas y el resultado es idéntico. El problema del vídeo original, que estaba codificado con lo que permitía la época, de forma similar a cuando se codifica a una versión con menos colores y se compensa los faltantes mediante la famosa técnica de dithering (usando tramas de puntos o pixels para simular colores intermedios), es que tiene patrones de puntos por toda la imagen. La pérdida de texturas viene porque usando los modelos usuales que mejor resultado dan (Gaia CG y Gaia HD), dichas tramas de puntos no desaparecen, por lo que deben haber usado uno de los modelos nuevos Theia, que permiten modificar parámetros y aumentar o disminuir el difuminado, hasta que las tramas de puntos no se ven, pero a costa de perder un poco de detalle.

Estoy prácticamente seguro de que han usado el Video Enhance AI. Unas muestras de lo que comento en mis pruebas:

Si usamos GaiaCG, mantenemos e incluso aumentamos el detalle de algunas texturas, pero como se puede ver en esta imagen a continuación, no se eliminan las tramas de puntos del vídeo original, con lo que quedan unos patrones de líneas horizontales y verticales bastante apreciables incluso en la preview (hacer click para ver a tamaño completo):

Imagen

En cambio, usando el Theia Fidelity y aumentando el parámetro reducción de ruido de 30 (por defecto) a 60, las tramas de puntos desaparecen pero se pierde un poco el detalle de algunas texturas, consiguiendo el resultado exacto del vídeo de antes, cómo podéis ver en estas capturas (no olvidéis verlas a tamaño completo):

Imagen
Imagen
Imagen
Imagen

Incluso me atrevería a decir que han sido demasiado agresivos subiendo el parámetro de reducción de ruido, porque en algunas escenas, por ejemplo, se pierde por completo la textura de la pared decorada de fondo detrás del dueño de la tienda de animales, mientras que en mi aproximación aún se aprecian bien dichas texturas.
Pese a difuminar la imagen, yo sigo preferiendo esa mejora.
Andaba aburrido y he hecho un experimento con el Time Traveler.

Y he de decir que el resultado me gusta más con la compresión de Youtube aplicada, sin ella se veía algo más nitido para mi gusto y con ello aún se aprecian más los defectos.

Tampoco se puede hacer mucho con el metraje que hay.

Ah y lamento que se me ha ido un poco la mano con el aspect ratio del vídeo de la izquierda, es lo que tiene hacerlo "artesanalmente" :)



Saludos.
La verdad que el esrgan ahce muy buenas cosas, hace tiempo que lo vi aunque la verdad que no tengo ni idea de como funciona e incluso no se siquiera si es un programa o algo asi.
179 respuestas
1, 2, 3, 4