1 pontos por GN⁺ 2023-10-12 | 1 comentários | Compartilhar no WhatsApp
  • A gravação em Apple Log no iPhone 15 Pro e Pro Max permite colocar vídeos do celular em um fluxo de trabalho profissional centrado em LUTs e color grading
  • Diferente do vídeo comum do iPhone, em que contraste e saturação já vêm “embutidos”, o vídeo em Log é flat, o que facilita criar o visual desejado com correções antes da LUT
  • Assim como em um vídeo de 10 bits, que distribui 1.024 níveis de cinza ao longo de 12 stops de alcance dinâmico, o Log é bom para lidar com detalhes em altas luzes e sombras em exposição, balanço de branco e correção de cor
  • O Apple Log só funciona em ProRes, então os arquivos são grandes, mas a gravação em drive externo via USB-C no iPhone 15 reduz o peso desse fluxo ao filmar em ProRes Log 4K 60 fps
  • O Apple Log não é raw nem o sinal original do sensor, mas é um formato documentado, então pode ser integrado a fluxos de trabalho com gerenciamento de cor como DaVinci Resolve, conversões ACES e composição VFX

Por que o Log importa no iPhone

  • O iPhone 15 Pro e Pro Max suportam gravação de vídeo em Log
  • Log é a abreviação de logarithmic encoding e, para quem trabalha com vídeo, isso tem dois significados práticos
    • o vídeo é gravado de forma flat
    • ele funciona como um formato conhecido que pode ser tratado em conversões de espaço de cor

Vídeo flat e fluxo de trabalho com LUT

  • O vídeo comum do iPhone é mais voltado a gerar imediatamente uma imagem bonita, com contraste forte, saturação vibrante e detalhes visíveis em altas luzes e sombras
  • O vídeo em Log preserva alcance dinâmico e detalhes, mas no estado padrão parece uma imagem plana, com pouco contraste e saturação
  • Para o vídeo em Log parecer natural, é preciso fazer gerenciamento de cor com algo como uma LUT
    • uma LUT é uma correção de cor salva em um arquivo
    • algumas LUTs adicionam um visual criativo, e outras fazem a conversão de espaço de cor de Log para vídeo
  • A vantagem do Log cresce na etapa anterior à aplicação da LUT
    • o usuário pode escolher a LUT que quiser
    • fazer color grading antes da LUT permite que a correção de cor funcione de forma mais natural
    • dá para inserir o material na mesma timeline de câmeras de cinema digital como Canon, Sony e Arri, com gerenciamento de cor adequado

Como a correção em Log funciona de forma natural

  • O ponto central do Log é atribuir a mesma quantidade de dados a cada stop de luz
  • Por exemplo, um vídeo de 10 bits contém 1.024 níveis de cinza e, ao representar 12 stops de luz, cada stop recebe cerca de 85 níveis de cinza
  • Graças a essa estrutura, correções básicas como exposição e balanço de branco lidam melhor com detalhes em altas luzes e sombras
  • No exemplo, somar 85 a cada valor de pixel RGB equivale a aumentar a exposição em 1 stop
  • Esse tipo de ajuste por soma e subtração é chamado de Offset
    • o DaVinci Resolve tem uma roda de cor específica para Offset
    • a roda de cor Global da 4-Way Color Tool no Magic Bullet Looks faz correção de Offset em ACES Log mesmo quando a fonte não está em Log
  • Aplicar a mesma correção depois da LUT, ou em um vídeo já em espaço de vídeo, pode piorar o resultado; mas, ao aplicar nos pixels em Log antes da LUT, o resultado pode parecer natural, como se tivesse acontecido dentro da câmera
  • Aplicar a mesma LUT na etapa final também facilita manter a cor consistente entre vários planos

Altas luzes, ProRes e armazenamento externo

  • Ao tentar recuperar detalhes no pelo de um cachorro iluminado pelo sol em um vídeo de iPhone 12, o contraste adicionado pelo iPhone faz os brancos virarem áreas estouradas uniformes e causa posterização nas cores ao redor
  • Já o vídeo em Apple Log do iPhone 15 Pro Max permite recuperar detalhes ou deixar que a superexposição se comporte suavemente em uma transformação de saída ACES
  • Essa transição suave das altas luzes na conversão de Log para vídeo é chamada de shoulder no cinema e é um fator importante para que os highlights tenham aparência profissional
  • Como o Log usa a mesma quantidade de dados para cada stop, ele não é o método mais eficiente para armazenar imagem
  • Alta profundidade de bits e taxa de dados são importantes, e o Apple Log só pode ser usado com gravação em ProRes
  • A Apple adicionou ProRes ao iPhone 13, mas sem Log era difícil fazer grading por causa do visual já “embutido”, então havia pouca razão para aceitar arquivos tão grandes
  • Arquivos ProRes 4K são enormes e podem gerar problemas de fluxo de trabalho quando gravados no próprio celular
  • A linha iPhone 15 usa USB-C em vez de Lightning, e, ao conectar um drive USB-C, o vídeo ProRes Log passa a ser gravado automaticamente no drive externo, e não na biblioteca de fotos do telefone
  • Esse método permite gravação em 4K 60 fps no app Câmera da Apple e pode gerar efeito de câmera lenta quando reproduzido em 24 fps

Limitações do Apple Log

  • O Apple Log tem várias das vantagens do raw graças à alta profundidade de bits e ao alcance dinâmico, mas não é raw nem o dado original que sai diretamente do sensor
  • O vídeo ainda passa por processamento como redução de ruído, tone mapping e correção de cor
  • Ao filmar luzes muito intensas e saturadas, pode aparecer um comportamento característico de saturação excessiva em cores extremamente brilhantes e intensas, mesmo com a Apple reduzindo sharpening e tone mapping
  • Usar Log não significa que nunca haverá superexposição
  • Como o iPhone é um aparelho com sensor pequeno, não se deve esperar o alcance dinâmico de uma Arri Alexa ou Sony Venice

Controles manuais no app Blackmagic Camera

  • O app Câmera padrão da Apple não oferece muitos controles manuais para cumprir a proposta “profissional” do Log
  • O app Blackmagic Camera, gratuito, oferece os controles manuais necessários
  • O app inclui recursos profissionais como
    • histograma ao vivo
    • LUT de monitoramento
    • saída HDMI via USB-C
    • seleção entre vários formatos ProRes

Apple Log em VFX e ACES

  • A característica flat do Log permite criar o look diretamente no grading, e o fato de ser um formato conhecido permite convertê-lo com precisão para diferentes espaços de cor
  • Um colorista pode converter Apple Log para o espaço de cor preferido e inserir o vídeo do iPhone com precisão em diferentes timelines de cor
  • Um artista de VFX pode converter o vídeo em Log para linear scene-referred e compor com renders 3D com cor correta
  • No fluxo de trabalho de exemplo, o vídeo é convertido para EXR e aplicado por camera mapping em geometria simples no Cinema 4D
  • No Redshift, os valores HDR dos pixels geram luz e reflexos no modelo 3D, cuidando de boa parte da iluminação

Compatibilidade com ACES e configurações de conversão

  • Como o Apple Log é um formato documentado, ele pode ser integrado ao sistema de gerenciamento de cor ACES
  • O Apple Log não corresponde a um formato ACES já existente
  • A curva Log da Apple é um formato próprio, foi documentada pela empresa e já pode ser usada no DaVinci Resolve
  • As configurações do nó CST no Resolve são as seguintes
    • Input Gamma: Apple Log
    • Input Color Space: Rec. 2020
    • Motivo: o Apple Log usa primárias Rec. 2020
  • Com essa entrada, é possível converter para vídeo Rec. 709 ou para formatos ACES como ACEScc
  • O Apple Log comprime um pouco os stops escuros para controlar ruído, então ele se parece mais com ACEScct do que com ACEScc
  • A Apple também fornece uma LUT para converter Apple Log em vídeo Rec. 709
  • A LUT da Apple tem contraste e saturação muito ricos, o que pode ser útil para combinar com o visual do vídeo não-Log do iPhone, mas para alguns usos pode parecer colorida demais
  • Resolve e Final Cut Pro têm suporte integrado ao Apple Log, mas algumas ferramentas ainda não têm
  • A LUT Prolost Apple Log converte Apple Log para ACEScc e ACEScct, permitindo encaixá-lo em fluxos de trabalho ACES existentes
  • Há quem considere que o Apple Log só será realmente compatível com ACES quando entrar na configuração ACES OCIO amplamente distribuída
  • Até lá, pontes de conversão de espaço de cor, como o nó CST do Resolve ou a LUT Prolost Apple Log, já permitem usar Apple Log de forma compatível com ACES

Uso do vídeo de iPhone em produção

  • Com esse fluxo de trabalho, dá para colocar o vídeo do iPhone 15 Pro Max em um Magic Bullet Looks compatível com ACES e aplicar filtros de difusão que modelam filtros físicos reais, como os da Tiffen
  • Com grading básico, mais halation e granulação de filme, é possível criar um visual cinematográfico que não entrega imediatamente que foi filmado com um celular de consumo
  • Filmar de forma discreta em locais públicos com uma câmera pequena é atraente, mas os celulares anteriores não tinham capacidade suficiente para controlar a imagem e moldá-la com intenção
  • Agora que o iPhone consegue gravar em Log, o iPhone 15 Pro Max se torna o primeiro aparelho que realmente dá vontade de usar para filmar trabalhos de verdade

1 comentários

 
GN⁺ 2023-10-12
Comentários do Hacker News
  • Nunca tive um dispositivo da Apple e também não costumo tirar fotos nem gravar vídeos com o celular, mas essa apresentação em vídeo foi clara e concisa, então me prendeu
    Continuou interessante até o fim, sem conteúdo desnecessário

    • A pessoa no vídeo é Stu, e o currículo dele também é impressionante: https://www.imdb.com/name/nm0556179/
      É conhecido pela originalidade, como o visual de Sin City, e também é o autor original do MagicBullet, amplamente usado na indústria para facilitar a correção de cor
      Como é alguém que entende bem de correção de cor, LUTs e sistemas de codificação de cor, é natural que explique bem o tema sem enrolação
    • Houve exatamente uma parte desnecessária, e ela foi muito divertida
      Refiro-me à trilha Log Song, de Ren & Stimpy, tocando no vídeo da mulher subindo as escadas: https://duckduckgo.com/?t=ffab&q=ren+and+stimpy+log+song&atb...
    • Não sei se é o mesmo conceito, mas o material que eu capturava com uma Nikon D7100 sempre parecia mais manipulável do que o de iPhones e afins
      Eu achava que era efeito de usar formato RAW em um sensor de imagem maior, mas, interpretando log com esse entendimento, a leitura do texto pareceu bastante intuitiva
      Não sei se está correto, mas parece fazer sentido
    • O vídeo foi excelente
      Mais ou menos no meio, pensei: “ah, então é tipo RAW para vídeo”, e poucos segundos depois ele explicou que não era exatamente RAW
  • Para quem tem experiência com processamento de imagens digitais estáticas, o conceito de Log parece desnecessariamente confuso
    Para começar, o nome é log, isto é, logarithmic, mas não é isso que a gama em espaços de cor como sRGB já faz há muito tempo?
    Padrões comuns de vídeo, como BT.709, também têm uma função de transferência não linear, então não entendo por que enfatizam log aqui
    Pelo texto, a principal vantagem é reduzir o clipping de pretos e brancos para deixar mais margem na pós-produção, o que certamente é muito útil em trabalhos como digitalizações de alta qualidade, mas não sei se isso justifica um novo “formato”
    Se a profundidade de bits for suficiente, parece que isso também deveria ser possível com formatos de vídeo existentes

    • Curiosamente, apareceram muitas respostas erradas ou ruins, mas a resposta para a pergunta é que sRGB/gama 2.2 e log são ambos não lineares, porém quase em direções opostas
      Gama 2.2 não é log; é mais próximo de uma função exponencial, e usa muitos bits na metade inferior da faixa de brilho, enquanto log usa mais bits na região dos highlights
      Nesse ponto, parece mais próximo de HLG
      Há aqui um gráfico que permite comparar visualmente as curvas: https://www.artstation.com/blogs/tiberius-viris/3ZBO/color-s...
    • As câmeras estão chegando a um nível em que conseguem capturar muito mais informação do que somos capazes de exibir
      Para armazenar essa precisão adicional corretamente, é preciso uma grande profundidade de bits, mas aumentar os bits também aumenta muito a largura de banda
      Em princípio, bastaria armazenar tudo como ponto flutuante de 16/32 bits, e muitos editores não lineares modernos usam internamente esse tipo de pipeline
      Mas, ao aplicar uma curva não linear a dados inteiros, é possível comprimir o sinal e ajustá-lo como se quiser, aguentando-se na faixa de 8 a 12 bits, o que ajuda muito no armazenamento
      Em uma curva log, considerando o desempenho atual dos sensores, até 12 bits pode ser exagero
      Há muitos formatos log dependendo da marca da câmera ou do sensor, e eles são voltados para captura, não para distribuição
      Na distribuição, normalmente se converte para um espaço de cor como Rec.709, padrão para SDR, enquanto HDR é outra questão
      Formatos log dão muito mais margem na pós-produção em trabalhos de correção de cor
    • A função de transferência do espaço de cor Rec.709 é de fato não linear, mas os valores de pixel armazenados têm uma relação linear entre si
      Em um sinal de 8 bits, a diferença entre 20 e 21 é igual à diferença entre 120 e 121, e todos os valores de pixel carregam a mesma quantidade de informação
      Em uma etapa posterior, esses valores são mapeados para uma curva de gama não linear
      Já um espaço de cor log usa uma relação não linear nos próprios valores de pixel, funcionando como uma compressão com perdas
      Se o sinal precisa passar por valores de 8 bits, usar um esquema de compressão antes de entrar na curva de gama final é uma escolha inteligente
      Ao reduzir a precisão ao redor de valores de pixel baixos e altos e aumentar a precisão na região intermediária, dá para extrair mais informação do sensor da câmera em certas áreas e também mapear uma faixa dinâmica maior
      Em resumo, no Rec.709 existente o armazenamento é linear e depois mapeado para uma função de transferência não linear; em log, o próprio armazenamento é não linear e depois é novamente mapeado para uma função de transferência não linear
      Essencialmente, é como realizar compressão com perdas ao armazenar os pixels dentro da câmera
    • O formato RAW das câmeras digitais também armazena dados em formato log
      O processo de conversão RAW normalmente transforma isso em um espaço de cor e, na maioria das câmeras, também executa um algoritmo de demosaicing
      O conversor embutido que gera JPG dentro da câmera faz a mesma coisa
      Nossos olhos, na prática, percebem luz logarítmica como se fosse linear
      Aqui quase não há diferença entre vídeo e fotografia; apenas, no nível do consumidor, lidar com RAW em fotos se tornou muito mais comum
    • O ponto central é o suporte
      O formato .zip oferece suporte a compressão LZMA/ZStandard e a arquivos maiores que 4 GB, mas, se você criar um assim, muitos softwares que dizem suportar .zip não conseguirão descompactá-lo
      Com log é igual: em teoria, seria possível codificar H264 em log dentro de .mp4 ou .mkv, mas há uma boa chance de muitos apps não exibirem corretamente ou nem conseguirem abrir
  • Recentemente, vi um vídeo que minha esposa me mostrou e disse que dava para saber que tinha sido gravado com um iPhone; não é simplesmente por as cores serem fortes, o ponto principal parece ser a forma como ele suaviza o movimento
    Em selfies de vlog ou vídeos tipo TikTok, virou moda girar a câmera ao redor para mostrar o ambiente, e o iPhone faz isso parecer como se tivesse sido filmado com equipamento de steadicam, mas com uma leve sensação de que não consegue acompanhar totalmente

    • Recentemente também entrou vídeo HDR, que, com meu cérebro de homem das cavernas, eu entendo mais ou menos como “partes claras mais claras”
      Somado a isso, o brilho da tela também ficou muito maior, então o vídeo parece muito mais realista
      Notei isso pela primeira vez na tela do M1 Pro e fiquei realmente impressionado com o brilho máximo de 1600 nits
      Hoje, a característica mais evidente de “filmado com iPhone” é essa
      Claro que também dá para criar vídeo HDR de outras formas, e em breve isso deve ser usado mais amplamente em outras plataformas
    • Alguém postou uma gravação feita com iPhone de uma tela de desktop rodando Call of Duty, e o principal comentário no Reddit dizia que o jogo parecia ter um estilo Disney, uma avaliação precisa
    • É bastante sabido que empresas de câmeras como Nikon, Canon, Sony e Fuji também têm seu visual próprio na forma como processam dados RAW do sensor em JPEG
      Isso gera diferenças na aparência final das cores
    • Entendo exatamente o que isso quer dizer
      Não é que pareça ruim, mas vídeos gravados com iPhone sempre têm pequenas pistas reconhecíveis, e especialmente o processamento de movimento tem um peso grande nisso
    • Há algumas gerações, vídeos gravados na mão com iPhone não tinham estabilização ou ela era quase ineficaz; hoje a estabilização é boa
      Acho que a concessão de movimentos suaves demais vale a pena
  • Se eu fosse uma empresa de equipamentos de vídeo para prosumers ou hobbyistas, teria medo do que a Apple vai fazer a seguir
    A Apple já penetrou bastante no mercado de edição com o Final Cut e o design de codecs, controla vários codecs comuns, tem milhões de dispositivos em campo e uma capacidade de fabricação enorme
    Não acho que o topo do mercado de cinema esteja em risco ainda, mas o restante deveria se preocupar

    • Celulares já mataram as câmeras independentes: https://d3.harvard.edu/platform-digit/wp-content/uploads/sit...
      Agora é só o trabalho de acabamento
      O que deve sobrar são equipamentos superteleobjetivos para esportes ao vivo e câmeras de cinema digitais 4K+ IMAX
    • A Apple parece bem próxima da Blackmagic Design, mas isso não significa que eles não possam ser Sherlockados
      A Apple já tem produtos em toda essa categoria, e embora o mercado deva continuar diferente por um tempo por causa dos fluxos de trabalho e das leis da física, até as leis da física já não parecem tão seguras quanto antes
      Hoje, o melhor software de edição para redes sociais parece ser o CapCut, porque sua facilidade de uso, em relação aos recursos que oferece, está muito à frente dos demais
    • Celulares já mataram as câmeras compactas automáticas com lentes pequenas
      Mas DSLRs com lentes grandes não vão desaparecer por causa das leis da física
      Para gravar vídeo de alta qualidade em baixa luz ou trabalhar com lentes variadas, a pequena abertura de um celular nunca será suficiente
    • Deixando de lado por um momento o pipeline tradicional de vídeo profissional, do ponto de vista de captura realista para VR/AR, se eu fosse a Meta teria medo do próximo passo da Apple
      Mesmo que a próxima geração do Oculus alcance o Apple Vision Pro em qualidade de exibição, só a Apple consegue reunir uma cadeia de suprimentos comprovada capaz de criar equipamento de captura de vídeo de nível profissional e integrar esses sensores em larga escala a dispositivos de consumo
      Sou otimista quanto à possibilidade de um produto como um iPad Vision Pro incluir duas câmeras separadas pela distância entre os olhos e medição de distância a laser
      Isso permitiria captura binocular em Apple Log e, com o avanço do Gaussian splatting para renderização de nuvens de pontos e da IA generativa para estimar cor e textura de pontos ocultos, seria possível criar cenas interativas com correção de cor profissional
      O que falta é apenas uma ergonomia melhor para esse fluxo de trabalho em ferramentas como o DaVinci Resolve, e o poder financeiro da Apple poderia ter um grande papel em incentivar isso
      Conteúdo VR de alta qualidade será criado, revisado e consumido em produtos Apple
      A Apple não está com pressa porque ninguém mais tem esperança de chegar perto
    • O assustador é que a Apple é suficientemente melhor a ponto de matar requisitos específicos
      Por exemplo, você é profissional e realmente precisa de um conector de fone de ouvido, mas a Apple simplesmente o remove
      De forma mais indireta, ela mata fornecedores alternativos de baixo volume e alta margem que ofereciam conector de fone, e até fones e microfones XLR
      É parecido com a Tesla tornar a experiência do carro 90% melhor, mas remover o painel
      Agora ela também removeu alavancas de controle como PRND e indicadores de direção
  • Sempre achei surpreendente que não haja mais interesse em colocar ADC em escala logarítmica/ponto flutuante diretamente no sensor da câmera
    Tanto humanos quanto algoritmos são muito mais sensíveis a diferenças de alguns bits nas áreas escuras do que nas áreas claras, e em outras partes da ciência da computação o ponto flutuante é muito usado para representar valores de grande amplitude

    • Por volta de 2003, uma empresa chamada SMaL fez isso
      O sensor autobrite foi feito para capturar nativamente em escala logarítmica
      Depois disso, mudou de proprietário duas vezes e parece ter tido mais resultados em sistemas de visão veicular do que em vídeo profissional
      https://www.vision-systems.com/cameras-accessories/article/1...
    • Do ponto de vista do projeto analógico, acho que isso não faz muito sentido
      Não sou projetista analógico, mas trabalhei como projetista digital em sensores de câmera CMOS, em contato próximo com projetistas analógicos
      Já se extrai do sinal analógico o máximo de informação possível até o bit menos significativo, e projetar um ADC em escala logarítmica não permite extrair mais informação no bit menos significativo
      A questão é: por que extrair menos informação com circuitos analógicos mais complexos, se há pouco a ganhar?
      Em geral, é melhor deixar o lado digital decidir o que preservar e como comprimir o sinal
      Sensores de câmera CMOS conseguem fazer bastante processamento digital no próprio chip, então podem realizar tarefas como conversão para escala logarítmica antes de enviar os dados para fora do chip
      Em um ADC SAR, talvez seja possível reduzir o consumo de energia pulando a conversão AD dos bits inferiores quando houver sinal nos bits superiores, mas não acho que a economia seria grande
    • Muitos estágios de processamento esperam linearidade, então seria preciso reprojetá-los para usar dados em ponto flutuante ou em escala logarítmica
      A maioria dos sensores HDR usa alguma forma de compressão logarítmica na leitura do sensor, mas quase nunca ouvi falar de ADC de ponto flutuante
      Pelo que pesquisei, não parece ser algo facilmente disponível
    • Fico em dúvida se, nos sensores modernos na faixa de 14 bits, o erro de quantização é mesmo um problema grande em comparação com coisas como o shot noise intrínseco das áreas escuras
    • Não existe algo como ADC de ponto flutuante; é só enfiar em float um estéreo atribuído a dois níveis de volume
      HDR acelerado por hardware em câmeras é comum hoje em dia, especialmente em dashcams e câmeras de CFTV
  • Eu não sabia que dava para gravar diretamente em um dispositivo de armazenamento USB-C
    Isso elimina um dos grandes motivos para gastar uma fortuna em um celular de 1 TB e, para quem grava em 4K ProRes, é sem dúvida um recurso que muda o jogo

    • Pelo que sei, é o contrário: não é possível gravar diretamente no celular; é preciso gravar em um drive USB-C externo
      Meu palpite é que seja muito provavelmente por preocupações com aquecimento causadas pela alta velocidade de escrita
  • Graças à alta profundidade de bits e à faixa dinâmica, vídeo em log tem muitas das vantagens do RAW, mas Apple Log não é RAW nem vem diretamente do sensor
    Ainda há bastante redução de ruído, tone mapping e ajuste de cor
    Fico me perguntando se isso é porque, no fim das contas, é uma câmera minúscula com sensor pequeno e lente pequena, e sem essa magia de processamento a imagem pareceria bem ruim na maioria das situações

    • Vídeo RAW é diferente de foto RAW
      O tamanho de vídeo RAW é realmente enorme, e é comum câmeras não conseguirem gravar vídeo RAW nativamente sem um gravador externo
      Isso não quer dizer que o processamento não seja importante, mas há câmeras mirrorless de US$ 2 mil que não conseguem gravar vídeo RAW internamente
    • Todas as câmeras de celular hoje funcionam assim
      O sensor e a lente são pequenos, e o processador é muito rápido
      Além disso, a maioria das pessoas não quer fotos e vídeos “precisos” ou “realistas”; quer resultados bonitos
      Por isso o processamento se tornou essencial, e o importante passou a ser criar imagens que as pessoas vejam e gostem, independentemente de quão diferentes sejam da realidade
    • Mesmo câmeras avançadas capazes de gravar em Log, como a série Sony A7, aplicam algum grau de redução de ruído por conta própria
      Na maioria dos formatos comprimidos, isso é importante
      Ainda assim, muita gente ficaria chocada ao ver o quanto a imagem até de câmeras de cinema topo de linha é ruidosa e pouco nítida quando a maior parte do pós-processamento é desativada
  • Para quem tem fotografia e produção de vídeo como hobby, Log parece um motivo forte para trocar Android por iPhone
    O ecossistema é muito mais maduro, e a diferença parece estar aumentando, não diminuindo
    No Android há o Raw Video do MotionCam, que dá resultados incrivelmente bons e às vezes até melhores que o vídeo ProRes do iPhone, mas todo o resto é bem fraco
    [1]: https://youtu.be/O5fnGDR4i9w?feature=shared

    • Corrijam-me se eu estiver errado, mas não vejo motivo para o Android não conseguir oferecer Log ou algo parecido
      Não sou engenheiro de vídeo, mas não parece ser uma tecnologia mágica a ponto de só poder ser suportada fora do iPhone 15
      Se realmente ganhar tração, acho que vai aparecer nos próximos Android topo de linha
    • No Android existe o app mcpro24fps, que suporta vários perfis log, gravação de vídeo em 10 bits etc.
    • O MotionCam é excelente
      Ele tem voado bem abaixo do radar dos advogados da RED, que detém patentes de vídeo RAW comprimido, e espero que continue assim
  • Não sou influenciador, nem modelo de moda, nem designer de interiores, e não crio “conteúdo” com a câmera do celular
    Eu a uso para registrar objetos e preciso de fotos nítidas que representem com precisão o que vi
    Agora estamos indo além do autofoco e da velocidade automática do obturador, rumo a câmeras que corrigem e editam na hora, e isso é perigoso
    Fotos tiradas com esse tipo de câmera já não podem mais ser vistas como uma reprodução fiel
    Correção de sombras, transformar cores apagadas em cores vivas, suavizar texturas etc.: agora toda foto é uma obra de arte criada por máquina, uma representação distorcida
    Isso vai voltar para nos assombrar no futuro
    Por exemplo, imagine uma câmera corporal policial que se ajusta automaticamente à noite para mostrar melhor um rosto: o policial diz “não dava para ver o rosto”, mas a câmera corporal pode mostrar o rosto com nitidez como se fosse de dia
    Ela de fato capturou uma foto mais nítida e útil, mas não descreveu corretamente a realidade que aquele policial vivenciou

    • Toda foto ser uma obra de arte criada por máquina sempre foi assim
      A menos que você use configurações de câmera muito específicas para evitar isso, fotos de câmera sempre exibiram determinadas características, e em algumas câmeras isso era um dos principais argumentos de venda
      Hasselblad, Polaroid, Canon e Sony têm, todas, seu próprio look no resultado
      Sobre o exemplo da câmera corporal policial, dá para argumentar algo parecido no sentido oposto
      Desde o lançamento, o iPhone não conseguia capturar pessoas de pele escura do modo como as vemos com os olhos, e, quando a iluminação não era perfeita, havia problemas claros para o sensor captar o contraste do rosto
      Graças às correções de que estamos falando, o iPhone passou a mostrar algumas pessoas de um modo mais próximo de como elas realmente são vistas
      Então, se um policial alegar “não vi o rosto, a câmera é que era boa demais”, eu receberia isso com muita cautela
    • A preocupação com a mudança para correção e edição instantâneas é um bom ponto, mas não é esse o tema deste texto
      Trata-se de trazer para o celular recursos já existentes de câmeras de cinema digital
    • Até agora, talvez não estivéssemos capturando com precisão o mundo visível em fotos ou vídeos, mas sim fotografando através das lentes cor-de-rosa fornecidas pelo fabricante do aparelho
      Fotos e vídeos feitos hoje com celulares ou câmeras recebem distorções automáticas conforme os presets do software de captura
      Às vezes há opções como Vibrant, Indoor, Portrait e Landscape, mas você não está vendo o que a câmera realmente viu; está vendo o resultado que o fabricante quer que você veja
      Vídeo Log é parecido com foto RAW
      Se esse recurso se popularizar, pode se tornar requisito em investigações criminais, por exemplo, capturar evidências em modo Log ou Raw
      Se ainda não existir, precisamos de assinaturas e metadados no EXIF de fotos e vídeos que indiquem como a imagem foi capturada
      Assim seria possível avaliar até que ponto a mídia foi manipulada
    • Essa questão já foi levantada de forma notória como tema jurídico no julgamento de Rittenhouse: https://journals.library.columbia.edu/index.php/stlr/blog/vi...
      Ela também foi discutida no HN aqui: https://news.ycombinator.com/item?id=29187820
    • Nunca houve um momento em que conseguíssemos tirar uma foto que representasse de forma completamente precisa o que vemos, inclusive com câmeras e câmeras de filme
      Sensores digitais e filme não percebem como o olho humano, e garantir isso sempre foi responsabilidade do fotógrafo
      Se você fotografa no automático, escolheu deixar a câmera adivinhar a precisão
      A maioria das pessoas não gosta da realidade como ela é, então escolhe que realidade expressar com subexposição ou superexposição, longa ou curta exposição, usa iluminação artificial, maquiagem e até cria cenas montadas
      Mesmo na era do filme puro, humanos alteravam o resultado, e dodging e burning eram, na prática, o trabalho de correção no filme
      Câmeras de smartphone usam computação para obter um resultado mais “correto”, deixando de lado os casos em que a função é explicitamente descrita como alteração da imagem, como suavização de rosto
      Fabricantes de câmeras e de filmes sempre tentaram fazer seus produtos perceberem melhor o alcance que o olho humano consegue ver, ou ao menos fornecer dados para decidir entre realidade e arte
      O exemplo do policial é completamente irrelevante para o ponto central
  • As vantagens mencionadas no vídeo parecem ser quase todas falta de pós-processamento e alto alcance dinâmico
    Fico curioso se log significa isso na área de vídeo

    • Log tem baixo contraste, então é menos provável que cores totalmente saturadas ou branco/preto puros sofram clipping
      Clipping, por natureza, limita o alcance dinâmico máximo
      Além disso, log significa que um “look” não está embutido na imagem; como você começa do zero, fica mais fácil emendar naturalmente imagens de duas câmeras de fabricantes diferentes e também é mais fácil adicionar sua própria personalidade à imagem
      Em geral, na área de captação, termos técnicos muitas vezes não são usados com rigor, e há muito cargo cult em que as vantagens de uma tecnologia são confundidas com as de outra
      Tenho a sensação de que, ao aprender, muitas vezes é difícil filtrar o ruído
    • Na área de vídeo, a palavra “log” é usada com significados excessivamente variados, então é preciso perguntar mais para saber exatamente o que ela quer dizer
      Seja inteiro ou ponto flutuante, um valor de pixel sozinho não significa muita coisa; é preciso o espaço de cor, que é o contexto desse valor
      Em um processo típico, são usados em conjunto o espaço de cor de captura da câmera, o espaço de cor de trabalho para processamento de cor e o espaço de cor do display, e os pixels passam por conversões de espaço de cor ao longo do pipeline
      Em espaços de cor clássicos, os valores dos pixels têm uma relação linear e carregam a mesma quantidade de informação
      Espaços de cor log têm todos curvas de gama não lineares e são uma forma de compressão que preserva menos informação em valores de pixel muito baixos ou muito altos e preserva mais informação na região intermediária
      Como o olho humano não reage da mesma forma a todos os níveis de brilho, a escolha de descartar detalhes nas extremidades e aumentar os detalhes na região intermediária costuma ser excelente
      Graças à compressão não linear, é possível mapear um alcance dinâmico maior no mesmo número de bits, e o tamanho desse alcance é definido pelo espaço de cor usado
      Quando a qualidade da câmera aumenta, normalmente são usados 10 bits ou mais para os valores de pixel e, combinados com uma curva log, a densidade de informação fica maior, permitindo capturar um alcance dinâmico mais alto
      Como resultado, é possível corrigir coisas como exposição de forma muito mais ampla na pós-produção
      Por fim, LUT é uma aproximação linear, e uma conversão de espaço de cor “de verdade” usa curvas matemáticas para maior precisão
    • Não; “log” significa apenas que se usa algum tipo de curva de resposta logarítmica ao codificar os dados de cor
      O alcance dinâmico não melhora necessariamente, mas é possível distribuir de forma mais útil as amostras de luz recebidas pelo sensor
    • Falta de pós-processamento não é o significado de log
      Não aplicar processamento para deixar a imagem com aparência melhor é o padrão de todos os dispositivos não voltados ao consumidor
      Alto alcance dinâmico está correto
      Na prática, log é uma questão de escolher quais bits de informação de cor manter e quais descartar para otimizar o espaço
      Log é otimizado para preservar detalhes em áreas muito escuras e muito claras, sacrificando detalhes dos tons médios
      Não-log é otimizado para tons médios
      Em cenas de alto contraste, como um céu azul claro e uma pessoa sentada na sombra, use log; em cenas de contraste médio, use não-log para obter mais detalhes nos tons médios
      Em fotografia, a necessidade de otimização de espaço é muito menor, então log quase nunca é necessário
      Vídeo tem no mínimo 24 quadros por segundo, mas fotos normalmente capturam muito menos quadros, então em fotografia basta capturar tudo sempre
    • Em certa medida, está correto
      O formato log é não linear, então há mais detalhes nas sombras do que nas áreas muito claras
      Isso é parecido com o fato de os olhos e o cérebro humanos não terem uma faixa de sensibilidade linear
      O stop, uma unidade de luz muito usada em câmeras, é um clique no anel de abertura; por exemplo, ao ir de f/11 para f/16, a quantidade de luz cai pela metade
      Para nós parece linear, mas na prática é logarítmico
      O alcance dinâmico do olho humano é de cerca de 20 a 22 stops; o de uma boa câmera, 12 a 14 stops; o de uma tela decente, 8 a 10 stops; e o de mídia impressa, cerca de 5 a 7 stops
      Foto e vídeo são o trabalho de comprimir e deslocar a luz para aproveitar o alcance dinâmico de telas ou mídias impressas muito mais limitadas do que aquilo que a câmera capturou
      Normalmente se expõe para o cinza neutro, que corresponde a cerca de 18% da luz, de modo que metade das informações escuras está nessa faixa de 18% e a outra metade está nas áreas mais claras
      Mas, como o olho percebe muito melhor as partes escuras, um formato linear não é ideal para armazenamento
      O formato log aloca mais bits para a metade escura e menos bits para os 82% claros restantes
      Como uma função logarítmica é aplicada à leitura RAW do sensor, na tela todos os valores ficam concentrados perto do cinza neutro de 18%, parecendo planos
      Ao aplicar uma LUT adequada, isso é revertido, fazendo as sombras ficarem quase pretas e os destaques quase brancos, e permitindo mover livremente o ponto branco, o ponto cinza e o ponto preto
      Também é possível aplicar matemática de cor aos valores log antes de aplicar a LUT
      Não é muito diferente de processar um formato linear, mas, como o ponto de partida usa mais bits nas áreas escuras, há mais alcance dinâmico capturado para aproveitar na pós-produção
      O ponto fraco do iPhone é que, mesmo salvando em formato log, praticamente não há capacidade de trocar ou visualizar a LUT na câmera durante a gravação
      Presume-se que isso pese demais na CPU ou na bateria, e é preciso esperar até a pós-produção para ver como o resultado final vai ficar
      Algumas câmeras avançadas oferecem muito processamento ajustável dentro da própria câmera