La mayoría de nosotros hemos reducido en silencio nuestros pasatiempos de bloqueo, pero el creador de Internet Teigan Reamsbottom todavía se está levantando a las 4 a.m. para curar videoclips de cultura pop clásica. También hace todo lo posible para mejorar el uso de una computadora de juego dedicada que está llena de RAM y una suite de software que utiliza algoritmos de aprendizaje automático para preservar las características originales de los clips.
En un mundo donde las películas pueden ser para las cancelaciones de impuestos y pueden ser escasos, es alentador ver los artefactos de la cultura pop desenterrada, incluso si significa que no es segura la celebridad de los años 80 o 90.
Anexo A: del apogeo de "Sex and the City", una entrevista con Kim Cattrall, donde canta la canta mientras su entonces esposo Mark toca un bajo vertical. El clip ha sido durante mucho tiempo un accesorio de Internet (alguna vez fue objeto de una exhibición en la Galería del Bajo East Side). Es un gran ejemplo del ojo de Reamsbottom para el campamento deliciosamente desquiciado y, a veces, de un mundo anterior a Tiktok. Y en, su restauración fue motivo de celebración. Mire la versión restaurada versus el clip borrosa que hemos estado obsesionados durante años a continuación:
Sin embargo, el video elevador, mejorando su calidad para que un clip pueda caber en nuestras pantallas de mayor resolución, es un proceso atado (y/o entrelazado) con desafíos. Capturar los datos y convertirlo es intensivo en mano de obra y cada método deja artefactos detrás de ese impacto en cómo se ve el nuevo metraje. A medida que los modelos de aprendizaje automático sacan el trabajo humano y el juicio de la ecuación, ese peligro aumenta.
Incluso las transferencias 4K profesionales pueden aparecer aerógrafas o plástico, una versión innecesariamente yassificada de algo que se veía perfectamente bien en su formato original. (Si ha llegado tan lejos en este artículo, este es su PSA para asegurarse de que se ha apagado en su televisor). Como Chris Person notó por las consecuencias de las trampas de la mejora de la escala, "¿Por qué transferir una cinta correctamente cuando podemos hacer una computadora con adivinar mal"?
Eso es, en esencia, lo que hace el software. Adivina dónde comienza y termina la cara de alguien, cómo se mueven sus manos, cómo reaccionan la luz y la humedad en su piel. Lo hace muy mal, pero lo hace tantas veces que (la esperanza es) finalmente se acerca lo suficiente a ser en su mayoría correcto. Para Reamsbottom, es la mejor solución para publicar clips en los que el video de origen no está disponible, y, para el tipo de breves momentos de campamento que no necesariamente podrían atraer la vista de las casas de restauración profesional.
Le dijo a Indiewire que es una prueba y un error constante, equilibrando los diferentes modelos de IA disponibles y ajustando la nitidez y las sombras para esquivar las cosas que los programas de escalada tienen más probabilidades de fallar. Como dientes.
"A medida que aumenta el detalle en la cara, el modelo AI aumentará demasiado los detalles en los dientes y podrá ver líneas oscuras entre los dientes individuales", dijo Reamsbottom. "Entonces yo" puede parecer un poco aterrador. Parece que, de repente, de repente tiene dientes realmente oscuros porque describe mucho cada diente ".
Reamsbottom tiene que jugar con la cantidad de detalles, siempre tratando de evitar, en sus palabras, convertir el sujeto del video en un personaje de Pixar. También debe dar cuenta de los desafíos dentro de las imágenes mismas. "Hice uno de Phyllis Diller recientemente, lo cual fue muy difícil de excluir porque su atuendo estaba lentejados", dijo Reamsbottom. "Su rostro puede verse bien, pero de repente, las lentejuelas no se veían bien. Realmente tienes que jugar mucho ".
Phyllis Diller vive en The Improv en 1993. 🤣 Digitalicé este VHS, pero limpiar este y compensarlo ha demostrado ser más difícil de lo que esperaba. Entonces, hasta que complete la limpieza y publique el video completo en YouTube, aquí hay un clip de algunas de las imágenes originales 😂
"Jugar" no comienza a capturar el tiempo que esto exige. Reamsbottom dijo que puede tardar un día en hacer un pase en un video de 30 minutos, incluso con una computadora de escala dedicada. Y el aprendizaje automático no puede hacer pixelación prístina.
"Necesitas tener algo que sea al menos de calidad media para convertirlo en algo realmente bueno", dijo. "Incluso entonces puede ser dudoso, pero algunas de las cosas súper de baja calidad y altamente pixeladas con las que he estado tratando de trabajar? Está duro. Las caras son duras, los dientes son duros o, ya sabes, una nariz podría desaparecer ”.
Si bien hay características generativas de edición "AI" en nuevos teléfonos Samsung (y modelos similares que llegan al iPhone) que parecen funcionar mucho más rápido, poder representar realmente bien la realidad a través de modelos de aprendizaje profundo sigue siendo la provincia de las personas que trabajan con video profesionalmente y aquellos que, como Reamsbottom, pueden dedicar mucho tiempo y dólares al esfuerzo.
La demanda de tiempo aún puede ser alta, pero las herramientas para hacerlo no son costosas; Reamsbottom utiliza una suite de software de $ 300. Y cuando se hace bien, los resultados pueden ser increíblemente gratificantes.
Reamsbottom ha estado trabajando con un archivo de cintas de Connie Francis, que le donó la familia de un fanático que grabó una gran cantidad de imágenes del cantante pop. "Hay imágenes de él y de imágenes personales de Connie, y cuando lo ves escala, casi te emociona porque es como si estuvieras experimentando algo por primera vez", dijo Reamsbottom. "Es mágico cuando obtienes el resultado final, y se ve muy claro. Es como si estuvieras allí de nuevo ".