O gerente de produto do iPhone. Francesca Sweet e Jon McCormack, vice-presidente de engenharia de software de câmeras da Apple, falam em uma entrevista no PetaPixel sobre como a Apple aborda o design e o desenvolvimento de câmeras.
Segundo os executivos, a Apple vê a tecnologia incluída na câmera do iPhone como uma união holística de hardware e software.
Na entrevista, diz-se que a Apple vê como um foco principal para a fotografia de smartphones permitir que os usuários "fiquem no momento, tirem uma ótima foto e continuem com o que estavam fazendo" sem se distrair com a tecnologia por trás disso. .
McCormack explica que, embora os fotógrafos profissionais passem por todo um processo de retoque de imagem, a Apple tenta fazer com que as fotos pareçam perfeitas no momento em que o botão do obturador é pressionado.
“Tentamos replicar o máximo possível o que o fotógrafo faria na pós-produção”, diz McCormack. “Há dois aspectos em tirar uma fotografia: a exposição e como você a retoca depois. Usamos muito a fotografia computacional em exposição, mas cada vez mais na pós-produção e tudo é feito automaticamente para o usuário. O objetivo disso é produzir fotografias que pareçam mais realistas, replicando como seria estar fisicamente lá”.
A seguir, descreve como a Apple usa o aprendizado de máquina para dividir cenas em partes naturais para processamento usando imagens computacionais.
“O fundo, o primeiro plano, os olhos, os lábios, o cabelo, a pele, as roupas, o céu… processamos todas essas partes independentemente, como faria na câmara escura com muitos ajustes locais”, diz McCormack. “Ajustamos tudo: exposição, contraste e saturação, para combiná-los… Entendemos como a comida deve ser e podemos ajustar a cor e a saturação de acordo para torná-la muito mais realista.
Os céus são particularmente difíceis de acertar e o Smart HDR 3 nos permite isolar o céu e tratá-lo de forma independente, depois embaralhá-lo para recriar com mais precisão a sensação que você teve quando o viu."
McCormack também explica por que a Apple escolheu incluir a capacidade de gravar vídeo Dolby Vision HDR na faixa do iPhone 12.
“A Apple quer desvendar a complexa indústria de HDR e a maneira de fazer isso é com ótimas ferramentas de criação de conteúdo. Isso varia de produção de vídeo HDR, que era um nicho e complicado porque eu precisava de câmeras enormes e caras e um conjunto de ferramentas de vídeo que minha filha de XNUMX anos agora pode usar para criar vídeo HDR com Dolby Vision. Muito mais conteúdo Dolby Vision estará disponível em breve. É do interesse do setor que as ferramentas e a compatibilidade agora aumentem”.
Os executivos também falam sobre as melhorias de hardware da câmera no iPhone 12 e iPhone 12 Pro: "A nova câmera grande angular e os algoritmos de mesclagem de imagem aprimorados levam à redução de ruído e mais detalhes". Os avanços específicos da câmera iPhone 12 Pro Max também merecem menção especial:
"Com o Pro Max podemos ir ainda mais longe porque o sensor maior nos permite capturar mais luz em menos tempo, o que permite um melhor congelamento do movimento em ambientes noturnos."
Quando perguntado por que a Apple decidiu aumentar o tamanho do sensor agora, no eniPhone 12 Pro Max, McCormack afirma do ponto de vista da Apple:
"Não é mais relevante para nenhum de nós falar sobre uma velocidade e obturador específico da imagem, ou um sistema fotográfico", diz ele. software... obviamente você pode optar por um sensor maior, que apresenta problemas de espaço, ou pode olhe para isso do ponto de vista de todo o sistema e pergunte a si mesmo se existem outras maneiras de alcançar o mesmo resultado. Então definimos qual é o objetivo e descobrimos que não é ter um sensor maior para se gabar. O objetivo é como fazer fotos mais bonitas no maior número de situações em que as pessoas se encontram. Este é o caminho que nos levou à fusão profunda, modo noturno e processamento de sinal de imagem temporal”.
Muito mais na entrevista com Sweet e McCormack no PetaPixel.
