Blu-Rays 4K têm um problema de upscaling de IA: comprador, cuidado

O que você vai ler:

Toggle

Principais conclusões

• A maioria dos filmes não é originalmente filmada em 4K UHD devido ao histórico limitado de produção de alta resolução.

• O conteúdo digital pode ser ampliado para 4K através de várias técnicas, incluindo IA, com resultados variados.

• Alguns Blu-rays 4K são mal ampliados usando IA, resultando em recursos não naturais, como rugas faciais e artefatos estranhos.

As TVs 4K são comuns, o streaming em 4K está ao alcance de muitos usuários de banda larga e os Blu-rays em 4K ainda são procurados pelos geeks do cinema. O problema é que a maior parte do conteúdo não está em 4K, e muitos estúdios estão recorrendo à tecnologia de upscaling de IA para converter conteúdo para 4K, com (para dizer o mínimo) resultados muito mistos.

Nem todos os filmes são filmados em 4K

Isso provavelmente é óbvio para a maioria das pessoas, mas a grande maioria dos programas de TV, filmes e outros conteúdos produzidos profissionalmente não foram filmados e produzidos com qualidade 4K UHD. Faz todo o sentido, já que existe mais de um século de filmes e quase um século de programas de TV. Portanto, as TVs 4K e a produção de conteúdo ainda são muito recentes se você olhar toda a biblioteca de mídia de vídeo existente.

Hoje em dia, até os filmes independentes são filmados em 4K e as produções de Hollywood de grande orçamento filmam em resoluções mais altas para ter alguma sobrecarga na sala de edição. Portanto, hoje não há problema em produzir uma versão 4K de um programa ou filme, porque esse é o formato em que foi feito.

Se um filme ou programa foi filmado, você pode digitalizar cada quadro do filme em resoluções incrivelmente altas. As imagens no filme são representadas por produtos químicos fotorreativos e há muitos detalhes nesses quadros.

Atualmente, os scanners usados ​​para digitalizar filmes podem digitalizar com resolução de até 16K. É uma boa ideia digitalizá-los em resoluções extremamente altas agora, caso você precise usar esses arquivos intermediários novamente mais tarde para formatos mais recentes.

Este é o método padrão ouro para obter uma versão 4K de um filme que só estava disponível em formatos mais antigos, como VHS, DVD ou Blu-ray padrão. No entanto, este é um processo trabalhoso e caro.

Alguns conteúdos, como Star Trek: a próxima geração foi filmado, mas certos efeitos especiais não estão presentes no filme e precisam ser refeitos. A coleção Blu-ray padrão da TNG exigia recriações meticulosas de todos os episódios com base em digitalizações de negativos de filmes e nas notas de produção da edição original. Os resultados são absolutamente impressionantes, mas não espere este tratamento para algo que não seja muito popular.

Nem todo upscaling é igual

Se o seu conteúdo foi filmado digitalmente, você estará limitado à resolução que a câmera foi capaz de produzir. Não há filmagem “original” de alta qualidade para reprocessar. Uma câmera com sensor SD produzirá vídeo com o mesmo número de pixels que uma tela SD. Não há dados adicionais capturados.

É aqui que o “upscaling” entra em cena. Literalmente.

O upscaling descreve uma ampla gama de técnicas usadas para converter um vídeo de uma resolução mais baixa para uma mais alta, fazendo com que ele tenha uma boa aparência em uma TV ou monitor de alta resolução. A escala inteira é provavelmente a forma mais simples de aumento de escala e funciona bem quando a resolução mais baixa é um múltiplo exato da resolução mais alta.

Por exemplo, como o vídeo 1080p tem exatamente um quarto da resolução de 4K UHD, basta dobrar os pixels em ambos os eixos. Isso significa que você cria um grande pixel a partir de grupos de quatro pixels.

Esta imagem não parece tão nítida quanto 4K UHD, mas além de ser um pouco mais suave em termos de detalhes, todo o resto é bem preservado. A partir daqui, existem vários algoritmos matemáticos inteligentes que podem inferir detalhes da imagem original e, como resultado, criar uma imagem mais nítida. No entanto, eles não são tão sofisticados e geralmente há uma compensação com alguma forma de artefato no vídeo ampliado, dependendo de como ele foi ampliado.

Nos últimos anos, métodos de aprendizado de máquina foram introduzidos em vídeos de alta qualidade. Esses upscalers de IA (um termo genérico que inclui “aprendizado de máquina”) “entendem” o que estão vendo, tendo sido treinados em conjuntos de dados massivos. Eles podem produzir uma versão 4K UHD de um programa de TV ou filme que realmente contém mais detalhes do que o original.

Porém, esse detalhe nunca existiu no material original. O upscaler de IA “imaginou” como seria a versão de alta resolução da mídia e a produziu.

Os resultados podem ser terríveis

Quero começar dizendo que o upscaling da IA, quando bem feito, pode produzir resultados surpreendentes. Por exemplo, DS9:Redefinido é um projeto de fãs para aprimorar Jornada nas Estrelas: Espaço Profundo 9. O criador do projeto usa Topaz AI para aprimorar imagens de DVD e LaserDisc. No entanto, isso é apenas uma pequena parte de um fluxo de trabalho meticuloso. Não é apenas pressionar um único botão e pronto, aqui está seu Star Trek 4K.

Portanto, a tecnologia não é fundamentalmente um problema, mas sim como ela tem sido usada para criar algum conteúdo 4K, especialmente Blu-rays 4K, que não deveria ter passado no controle de qualidade. Se você quiser ver exemplos disso em ação, recomendo a excelente catalogação de vídeos de Nerrel e a apresentação desse problema em vários lançamentos importantes. Esteja ciente de que ele usa uma linguagem salgada para menores de 13 anos em alguns pontos. Portanto, não reproduza este vídeo em qualquer lugar onde alguns palavrões ocasionalmente possam causar problemas.

Filmes icônicos como Mentiras verdadeiras agora temos atores que parecem absolutamente estranhos, com rugas faciais hiper-enrugadas e cabelos que parecem CG. Da mesma forma, as faces de fundo em Alienígenas deformar-se porque o upscaler de IA não consegue descobrir onde a boca de um ator deve ir. Óculos de sol em Exterminador do Futuro 2 tornam-se órbitas negras escancaradas, como se o filme já não tivesse crânios suficientes.

O exemplo mais flagrante que vi é deste post no X por WOWmd

Aqui estão as duas imagens lado a lado:

O upscaler de IA desenhou dois rostos assustadores nos personagens de fundo fora de foco. É confundido um fundo desfocado com falta de detalhes, e os resultados são assustadores!

O que há de mais flagrante em todos os filmes que mencionei e Eu amo Lucy é que eles foram feitos com filme! Portanto, em princípio, você tem a opção de digitalizar os negativos originais do filme e fazer versões originais em 4K deles.

No entanto, provavelmente devido ao tempo e ao custo, os criadores destas versões optaram por usar software de aumento de escala de IA e, em seguida, aprovaram alterações feitas por esse software que são, na minha opinião, indesculpáveis.

Pior ainda, há uma boa chance de que essas versões em 4K sejam usadas como base para fluxos de 4K desses filmes, e que os fluxos de resolução mais baixa sejam apenas versões reduzidas da versão alterada por IA. Este é apenas mais um motivo pelo qual estou feliz em colecionar versões de filmes em DVD e Blu-ray padrão.

Como evitar Blu-Rays 4K ruins

Os Blu-rays 4K UHD são bastante específicos e poucos filmes recebem o tratamento 4K. É um formato de filme para entusiastas e, portanto, você pode esperar que os lançamentos de filmes em 4K mais esperados recebam um exame detalhado nas críticas. Portanto, a melhor maneira de evitar filmes que foram danificados por um escalonamento deficiente da IA ​​é acessar o YouTube, ou seu blog favorito de nerds de cinema, e ler uma resenha desses discos.

---

Aliás, os Blu-rays padrão não serão automaticamente OK, já que não há nada que impeça alguém de, digamos, aumentar a resolução do DVD para 1080p. De qualquer forma, se você está antecipando o lançamento físico de um filme que não foi feito em 4K (ou 1080p FHD), não compre até que seus geeks de cinema favoritos o tenham assistido.