Como as câmeras de smartphone continuam melhorando? É o processamento de imagens?

Já existe muito pós-processamento em tempo real de imagens tiradas pela câmera do smartphone, mas a maioria envolve atenuação de ruído, conversão do formato raw para jpeg e algumas transformações simples como interpolação para obter uma imagem maior e zoom. Estas operações são frequentemente feitas diretamente pelo hardware.

As operações mais comuns feitas pelo software de melhoria de fotos são a correção de cores, brilho e contraste, correção de três vezes e algumas pequenas correções de rotina como a remoção de olhos vermelhos. Os aplicativos podem fazer isso facilmente, a maioria dos aplicativos da câmera tem esses recursos.

O hardware garante que você obterá uma imagem realista, e o software que você obterá uma bela imagem. Uma imagem realista pode não ser bonita e vice versa.

O estado da arte atual é que você obterá imagens realistas dos sensores, a ponto de que eles tenham mais detalhes e dados do que os olhos podem capturar nas mesmas condições.

No entanto, o cérebro processa a imagem muito melhor identificando formas, formas e gradientes, e tem um espaço de cor diferente.

Even se você vir uma imagem desfocada que pode ser reconhecida, as bordas são mais nítidas, e o verde é muito mais vívido. Comparado com um sensor a imagem resultante não pareceria real, mas não porque o sensor é defeituoso, mas porque o processador de imagem do cérebro é tendencioso ao ver a luz com receptores vermelhos, verdes, azuis que são equivalentes a receptores de ~400nm, ~530nm, ~650nm, em vez de uma matriz de sensores uniformemente espaçados.

A nós mal estamos vendo coisas comparados com todo o espectro eletromagnético. Se um alienígena pudesse nos ver com um espectrômetro completo, veríamos a tela e as fotos como a maioria escura com algumas cores exageradas.

Existem também diferenças biológicas sobre como as cores são vistas, como daltonismo.

Como descobrimos mais sobre como vemos a câmera certamente irá melhorar ainda mais.