Eles querem nos fazer esquecer como os filmes se parecem
(aftermath.site)- A transferência em 4K de True Lies parece borrada e com texturas exageradas, como um vídeo do YouTube com upscaling por IA aplicado a imagens antigas; traços de processamento semelhante também foram apontados em Aliens, The Abyss e Titanic
- O trabalho teria sido feito pela Park Road Post, subsidiária da WingNut Films de Peter Jackson, que já havia usado restauração baseada em machine learning de forma agressiva em They Shall Not Grow Old e The Beatles: Get Back
- Diz-se que True Lies teve um scan em 4K recente baseado no negativo original de câmera, o que deixa a dúvida sobre por que o processamento por IA teria sido necessário
- O foco da crítica não é a tecnologia em si, mas sim o input inadequado e as correções automáticas; quando isso substitui captura, desentrelaçamento e arquivamento bem feitos, a qualidade da imagem pode desmoronar
- A remoção excessiva de ruído e de grão de filme corre o risco de ajustar o cinema ao padrão de nitidez digital e fazer o público esquecer a textura original da película
O problema levantado pela transferência em 4K de True Lies
- Vídeos do YouTube que pegam imagens antigas e aplicam upscalers de IA, coloração ou interpolação para 60 fps muitas vezes ficam borrados e com cores exageradas
- A transferência mais recente de True Lies foi criticada por ter uma textura parecida com esse tipo de vídeo
- Em cenas com movimento, ela pode até parecer aceitável por instantes
- Mas detalhes como rugas da pele, fotos de crianças, bordas de pastas e bochechas parecem artificiais
- As superfícies ficam excessivamente lisas e ao mesmo tempo afiadas, dando uma sensação de imagem gerada por IA com contornos desalinhados
- As transferências de Aliens e The Abyss seriam menos graves do que a de True Lies, mas ainda assim foram descritas como tendo pele asséptica, encerada, e grão de filme removido em excesso
- A transferência recente de Titanic também recebeu tratamento parecido, e a reação online foi dividida
Park Road Post e a continuidade do estilo de restauração de Peter Jackson
- A restauração desta vez teria sido feita pela Park Road Post, subsidiária da WingNut Films de Peter Jackson
- Em relação à Park Road Post, They Shall Not Grow Old e The Beatles: Get Back são citados como precedentes importantes
- They Shall Not Grow Old buscou fazer imagens da Primeira Guerra parecerem mais modernas por meio de upscaling e colorização
- The Beatles: Get Back mostra o processo de composição dos Beatles com material filmado para Let It Be, de Michael Lindsay-Hogg, além de cenas inéditas
- As duas obras recontextualizaram imagens existentes e, nesse processo, usaram machine learning de forma agressiva
A textura estranha criada pelo efeito de restauração
- Em They Shall Not Grow Old, os movimentos interpolados dos soldados foram descritos como derretidos e instáveis
- A redução de ruído digital não é consistente: em algumas partes o grão do filme permanece, em outras desaparece
- O grão nos rostos dos soldados dá a impressão de estar grudado como escamas de réptil
- The Beatles: Get Back também tem problemas parecidos, embora em menor grau
- Cabelos e casacos de pele parecem brilhantes e oleosos ao mesmo tempo
- Rugas da pele e das roupas ganham um peso pouco natural
- As bordas dos objetos parecem se prender umas às outras ou se dissolver
- A estrutura de grão parece mais natural do que em They Shall Not Grow Old, mas ainda passa a sensação de ter sido adicionada artificialmente sobre uma imagem com forte redução de ruído
- Get Back foi um grande sucesso, ajudado pelo fato de que a única versão acessível de Let It Be era uma transferência ruim em DVD, além das 60 horas de material não utilizado
O problema é menos a tecnologia e mais a forma de aplicação
- A crítica não é que tecnologias de vídeo baseadas em machine learning sejam sempre inúteis
- O DLSS da Nvidia e tecnologias concorrentes costumam funcionar bem em jogos com os quais foram treinados
- Para interpolação ocasional, usa-se Flowframes
- Já houve experiência com waifu2x e chainner para corrigir imagens estáticas de má qualidade
- Também existe um banco de dados de modelos de upscaling por IA
- O problema surge quando essas tecnologias passam a substituir um trabalho correto de ingestão
- “Crap in, crap out” continua valendo
- Para capturar VHS e Laserdisc na melhor qualidade possível, é preciso conhecimento adequado de captura e desentrelaçamento
- Quando alguém que entende de vídeo diz “Just use Topaz”, isso quase sempre leva a resultados ruins
O choque entre bom trabalho de arquivamento e processamento por IA
- Uma transferência bem feita pode ser impressionante a ponto de tirar o fôlego
- Boas práticas de arquivamento exigem muito conhecimento acumulado e trabalho, e quando são bem executadas chegam perto de uma forma de arte
- Grande parte das aplicações modernas de IA caminha na direção de reduzir trabalho
- Em vez de transferir uma fita corretamente, torna-se possível deixar o computador fazer palpites ruins
- Mesmo quando o material de entrada é ruim, o resultado final pode mascarar esse problema
True Lies precisava de processamento por IA?
- A avaliação é que True Lies não precisava passar por esse tipo de processamento
- Segundo The Digital Bits, a Park Road Post tinha um scan em 4K recente feito a partir do negativo original de câmera
- O site da Park Road Post também diz que a empresa possui um scanner de filme Lasergraphics Director 10K
- Nessas condições, fica a dúvida sobre qual seria o objetivo de aplicar IA a um filme que aparentemente já estava em bom estado
Preservação cinematográfica não se resolve só com aprovação do diretor
- Discussões em fóruns de Blu-ray tendem a esquentar, mas em certos casos o diretor pode estar errado sobre a aparência do próprio filme
- George Lucas é citado como exemplo clássico, e James Cameron também não estaria imune nesse tipo de tratamento de suas obras
- Wong Kar-wai também é lembrado por casos problemáticos em remasterizações recentes, como Ashes of Time e In The Mood For Love
- Cameron teria aprovado pessoalmente essas remasterizações
- Em condições tão incomuns, é preciso perguntar se o diretor de fato está defendendo o melhor interesse do próprio filme
Quando a nitidez digital vira o padrão para a película
- O aspecto mais desconfortável é que muita gente pode achar esse resultado bem bonito
- Alguns espectadores são criticados por preferirem mídias excessivamente lisas, rápidas, em alta taxa de quadros e polidas até parecerem esterilizadas
- Câmeras de smartphone já não apenas capturam imagens; elas as calculam e otimizam
- O cinema digital não só parece cristalino e sem vida, como imagens do passado também estão sendo ajustadas a esse padrão por meio de redução de ruído e controle de grão
- Pode ser uma condição conveniente e lucrativa fazer com que as pessoas deixem de lembrar como a película realmente deveria parecer
Para que preservar não vire destruir
- A avaliação não é de que quem trabalha com preservação cinematográfica esteja tentando destruir filmes
- É possível que os envolvidos tenham trabalhado duro e pensado no melhor para a obra
- Mas a natureza da restauração pode mudar bastante, e algumas empresas podem se deslumbrar com novas tecnologias e acabar produzindo um trabalho destrutivo em vez de restaurador
- Não parece haver solução clara além de, quando possível, separar a preservação cinematográfica do incentivo ao lucro
- Houve uma época em que muitos jogos queriam parecer Aliens; agora, Aliens é que parece videogame, e isso continua sendo uma mudança desconfortável
1 comentários
Comentários do Hacker News
Não sou especialista em cinema, mas achava que tinha algum gosto; ainda assim, os projetos recentes dos Beatles me fizeram chorar várias vezes
Todo mundo tem o direito de ser elitista em seu próprio blog de cinema, mas o fato de não trazer sequer um quadro comparativo do lançamento original, impedindo o leitor de julgar diretamente em um A/B, enfraquece bastante a tese do texto
Não concordo com o ódio aos curtas vintage colorizados e com upscale; pelo contrário, gosto muito deles. Na nossa família, assistir a esses clipes quase virou uma tradição de Natal, e, pessoalmente, o meu favorito é https://www.youtube.com/watch?v=EQs5VxNPhzk
Senti imediatamente: “é, realmente parece um personagem da Pixar”, e percebi que eu tinha esquecido bastante como o filme era originalmente. Não acho que esse ponto de vista seja um exagero histérico
É como ter o texto original para ler e, mesmo assim, optar por ler uma versão resumida pelo GTP e depois expandida de volta ao tamanho original. Fica a dúvida sobre o que se ganha e o que se perde, e por que citar a versão convertida pelo GTP em vez das palavras originais
Ou seja, era algo próximo do “IMAX da década de 1890”: https://www.youtube.com/watch?v=2Ud1aZFE0fU
The Matrix também foi arruinado na transferência para 4K por uma correção de cor absurdamente ruim
Este texto mistura pelo menos três técnicas, e nem todas foram usadas em todos os vídeos
They Shall Not Grow Old também fez colorização e correção de tempo. Em filmagens de 100 anos atrás, o filme era avançado girando uma manivela à mão, então a taxa de quadros por segundo variava bastante, e cenas de pessoas caminhando, em especial, tendem a parecer estranhas em comparação com vídeos modernos
Detentores de propriedade intelectual, grandes estúdios de cinema e serviços de streaming não são confiáveis nem em disponibilidade nem em fidelidade
True Lies e Titanic, citados no artigo, também devem ter sido trabalhos da Digital Domain na época; nos anos 90 e 2000, ainda que as plates filmadas em película pudessem teoricamente ter alta resolução quando escaneadas, é muito provável que os efeitos visuais tenham sido originalmente renderizados e entregues em resolução 2K
Portanto, quando se “exige” um lançamento em 4K, quase certamente seria necessário algum upscaling, a menos que a empresa original de efeitos visuais renderizasse, recompusesse e entregasse tudo de novo em 4K. Já ouvi falar de casos assim, como relançamentos de Star Wars ou alguns trabalhos da Pixar, mas isso não é comum
Segundo, a restauração faz uma ponte entre 1914 e 2014. Filmes antigos em preto e branco tendem a parecer artificiais e distantes, enquanto a versão colorizada e interpolada faz os soldados parecerem pessoas de carne e osso. A mensagem de que “isso também poderia acontecer com você” dificilmente teria sido transmitida assim apenas com as imagens originais
Hoje em dia, tanto a redução de ruído quanto o upscaling são feitos com inteligência artificial, muitas vezes na mesma etapa
Não há motivo para True Lies não conseguir bancar uma transferência em 4K. Como a Criterion mostrou, até cópias em 35 mm dos anos 1950 e 1960 podem ser uma excelente base para HD/4K
Isso é uma edição subjetiva que altera a substância da obra, uma tentativa de torná-la mais adequada aos olhos do público moderno
Este texto parece ter sido escrito quase exclusivamente para cinéfilos. Deveria ter começado com um vídeo comparativo que mostrasse exatamente o que o autor vê como problema
Tirando a cena da pasta, só olhando para as capturas de tela reduzidas eu não entendi muito bem do que ele estava falando. Só depois de ver o vídeo de Beatles Now and Then [1] percebi que, quando há movimento, fica muito menos natural, e a iluminação ruim e a textura de cera ficam mais evidentes
[1] https://www.youtube.com/watch?v=Opxhh9Oh3rg
Tudo começa a parecer criado pela imaginação, em vez de realmente filmado, e as pessoas ficam cobertas de artefatos artificiais que as fazem parecer alienígenas imitando humanos. Às vezes tenho uma repulsa tão instintiva ao ver esses rostos sinistros que chega a dar enjoo
Como os exemplos me pareceram bastante explícitos, fico surpreso que as pessoas queiram comparações lado a lado, mas é interessante ver como cada pessoa percebe coisas diferentes em uma imagem
Com as opções de VPN que costumo usar, não consigo escapar da mensagem “The uploader has not made this video available in your country”
Imagine there’s no countries....
Vejo isso não como simples “gosto”, mas pela perspectiva de pureza e autenticidade
Técnicas como upscaling por inteligência artificial, colorização e interpolação acrescentam informações que não existiam originalmente. A partir desse momento, você já não está mais vendo a mídia verdadeira
Reescanear o filme original na maior resolução possível, capturando ao máximo as informações que estavam no filme, é bom; mas acrescentar informações que nunca existiram é cruzar uma linha
É como o terrível recurso de “motion smoothing” das TVs modernas. Ele vem ativado por padrão, faz filmes parecerem novela, e a interpolação de quadros acrescenta informações que o diretor não pretendia e que originalmente não existiam
Só porque um texto antigo não menciona a cor das roupas de um imperador, não “interpolamos” uma cor que imaginamos em uma nova edição. Isso seria universalmente reconhecido como adulteração do texto, mas quando colorizadores de fotos fazem a mesma coisa com fotos sem cor, acham que estão contribuindo para o mundo
No fim, mídias históricas são interessantes e valiosas porque transmitem informações de sua época. É por isso que versões excessivamente restauradas não têm interesse. Estão contaminadas demais por informações falsas ou pouco fundamentadas
O tempo por si só já causa deterioração suficiente; não precisamos acrescentar mais. Isso é uma versão moderna de ornamentação e exagero históricos, distorcendo tudo em uma meia-verdade agradável e atraente, em vez de dizer a verdade real, mais feia
Essas ferramentas estão mais para ferramentas de ornamentação do que para ferramentas de restauração. Uma boa restauração de fato “restaura” informações. Se um manuscrito antigo tem páginas faltando ou erros, você completa com a mesma parte de outros manuscritos; do mesmo modo, arranhões em quadros de um filme deveriam ser preenchidos com o mesmo quadro de outras cópias
Um filme feito nos anos 1990 não precisa parecer que foi feito nos anos 2020. Assim como um quadro de Rembrandt não precisa parecer pintado no Photoshop
O ponto central que o upscaling por inteligência artificial e as imagens geradas compartilham com os casos citados no artigo é um processo forte de remoção digital de ruído. Em discussões sobre vídeo, isso costuma ser chamado de DNR, e é também o motivo pelo qual a famosa versão 4K de Terminator 2 parece feita de cera
No caso de T2, ao menos ela foi baseada na versão 3D, e o processo de conversão estereoscópica exigia esse tipo de remoção de ruído
Discos Ultra HD 4K Blu-ray vêm em três capacidades, BD-50, BD-66 e BD-100, e, pela minha percepção, os dois últimos são mais comuns. Lançamentos com duração não muito longa às vezes também são codificados para caber em discos mais baratos e de menor capacidade
Também há o fato de que streaming e codificação digital online sempre otimizam o tamanho do arquivo. Segundo uma comparação em um fórum do Blu-Ray.com, o bitrate máximo do iTunes, por volta de 31 Mbps, estava entre os mais altos, mas isso ainda é nível de Blu-ray 1080p. Um Ultra HD Blu-ray, em comparação, pode chegar a 90 Mbps
Ironicamente, quando sai um filme como Blade Runner: Final Cut, com o grão original bem preservado, já vi reações de familiares dizendo que acharam o grão excessivo
Acho que o fato de smartphones removerem ruído automaticamente das fotos há anos também reduziu a resistência do público não entusiasta
O AV1 usado em streaming pode até ser mais eficiente que o H.265 comum em discos UHD, mas não a ponto de compensar uma diferença tão grande de largura de banda
Vale mencionar que a indústria está, mais uma vez, ficando atrás da pirataria
Warp sharpening e filtragem foram moda há mais de 10 anos, depois passaram, numa época em que já havia telas grandes de alta resolução, mas faltava conteúdo novo. Com o tempo, os moderadores chegaram à conclusão de que precisavam barrar esse tipo de porcaria
A resposta é simples. Qualquer forma de exibição é uma decisão artística sobre “como deve parecer”. Toda vez que se coloca uma imagem na tela há uma escolha, e decisões artísticas exigem gosto. Muita gente não tem isso
Pessoas comuns mexendo com brinquedos interessantes acharam que rips filtrados em excesso ficavam incríveis, e provavelmente não entenderam o que havia desaparecido. As pessoas nesta página que não entendem por que os objetos não deveriam parecer como se tivessem sido esmagados por um rolo compressor e depois recebido bordas plásticas em relevo, e que pedem comparações, talvez realmente não consigam ver a diferença
O mundo dos negócios sabe muito bem que “gosto”, “arte” e “qualidade” não importam. O que importa é o interesse pelo produto; se vende, basta
O segredo é que muita gente ficaria igualmente satisfeita vendo conteúdo com 8 camrips em um DVD de uma camada. Coisas como anúncios na tela, sites de streaming ainda mais horríveis, “FullHD” com bitrate praticamente de conexão discada
Mas há incentivo para fazer essas pessoas comprarem TVs 4K, 8K, 3D e HDR, irem atrás dos lançamentos “mais novos e melhores” e assinarem serviços de streaming “mais novos e melhores”. A lavagem cerebral em torno de “novas tecnologias” faz com que acreditem ter conquistado uma enorme riqueza. Dizer que, na verdade, isso é péssimo não atinge apenas uma determinada qualidade, mas também suas escolhas de vida e crenças
Chego a desejar que ainda tivesse aquele antigo box em VHS
Ver vídeos upscalados como um experimento mental para imaginar como era a vida em outra época pode ser divertido, e não acho que prejudique muito o valor do filme original
Além disso, They Shall Not Grow Old foi feito em 2018, antes do boom recente de inteligência artificial. Na época era um filme experimental e ambicioso, e acho que hoje poderia ser feito muito melhor
Ainda assim, eu gostaria de ver uma versão colorizada e aprimorada por inteligência artificial
As imagens originais fazem aquelas pessoas parecerem figuras ridículas e estranhas de um mundo completamente diferente
O novo vídeo com inteligência artificial me faz sentir que elas eram, emocionalmente, pessoas como eu, e isso está muito mais próximo da verdade
Se o material for popular o suficiente, podemos entrar numa era em que, a cada vez que a tecnologia melhorar, ele seja relançado com novo upscale e restauração em ciclos de 4 a 6 anos
De forma cínica, os detentores de propriedade intelectual tentarão arrancar mais dinheiro dos donos a cada grande salto tecnológico. De forma otimista, talvez passemos a ver filmes e séries populares como obras perenes, que melhoram com o tempo. Usando uma analogia com software, em geral concordamos que software nunca fica “pronto”, e normalmente isso também é algo bom
Parece realmente horrível e, para quem pretende comprar novamente várias reescaneagens em UHD Blu-ray depois das versões de baixa resolução, é algo quase impossível de aceitar de forma generalizada
“Quando finalmente se vê uma transferência de vídeo feita corretamente, o resultado pode ser de tirar o fôlego. Boas práticas de arquivamento exigem muito conhecimento organizacional e trabalho. Quando bem feito, é arte, e as pessoas que fazem esse trabalho têm um profundo amor pelo que fazem. Mas uma grande parte do uso moderno de inteligência artificial consiste justamente em retirar esse trabalho da equação”
Estou ripando mídias físicas para uma biblioteca digital, e dá para perceber imediatamente quando se lida com uma transferência de filme. Porque a compressão fica horrível
O grão e o ruído inerentes ao filme não comprimem bem. Então parece que esses filmes upscalados por inteligência artificial foram feitos não para nós, mas para que as empresas de streaming economizem um pouco de largura de banda
Além disso, antigamente o filme era caro, então os diretores faziam filmes enxutos de 90 minutos e encerravam por aí. Agora há filmes de 2, 3, 4 horas que se arrastam sem fim
É o oposto de hoje, quando tudo precisa começar rapidamente antes que o público saia para ver outra coisa. É claro que eles não desperdiçavam filme, mas os filmes antigos também se arrastavam. Só que isso também pode ser visto não como enrolação, mas como o processo de estabelecer a atmosfera e o sentimento do filme
É preciso lembrar que os diretores eram artistas, que o cinema existia pela arte e não pelo público, e que havia muito menos tentativa de agradar
Um filme 4K de 2 horas, já suavizado e blocado, codificado em cerca de 10 GB, não parece muito diferente de um Blu-ray de alta capacidade. Uma boa transferência de filme em 4K começa a parecer estranha quando o tamanho-alvo do arquivo cai abaixo de 30 GB, ou até antes
Ainda assim, ao codificar para streaming a partir de uma boa fonte, dá para fazer um trabalho suficientemente bom, então não há necessidade de começar com uma fonte ruim. Basta acrescentar uma etapa que a deixe ruim antes da codificação. Mas isso cria o risco de que o stream 4K de “alta qualidade” seja comparado a uma fonte original muito melhor e fique evidente que, na prática, ele é horrível de assistir
A quantidade de filme rodada é ordens de grandeza maior que a versão final, e a mesma cena é filmada repetidas vezes para conseguir uma boa tomada. Um filme de longa duração também não exige necessariamente mais tempo de filmagem do que um filme curto
Não tenho sentimentos fortes sobre a opinião do post em si, mas quero elogiar a escrita do autor.
Fazia bastante tempo que eu não lia até o fim um texto sobre um assunto em que, pessoalmente, eu nem tinha pensado e pelo qual também não tinha muito interesse. O título me prendeu, e o restante continuou me fazendo ler.
O autor acha isso péssimo, e, depois de ler o texto todo, o leitor fica sabendo disso com toda a certeza.