O que é o núcleo neural do Google Pixel 4?

O Google Pixel 4 ainda não compartilhou detalhes sobre exatamente o que se passa dentro do seu núcleo neural. No entanto, sabemos como funciona o Visual Core da geração anterior e o tipo de técnicas tipicamente usadas no aprendizado de máquinas (ML) processadores.

Não como uma CPU tradicional construída para lidar com uma grande variedade de tarefas computacionais, processadores de aprendizado de máquinas (NPUs), como o Neural Core, são otimizados para algumas tarefas matemáticas complexas específicas. Isso os torna mais parecidos com processadores de sinais digitais (DSP) ou unidades de processamento gráfico (GPU), mas otimizados para as operações específicas usadas pelos algoritmos de aprendizagem da máquina. Ao contrário das CPUs modernas de 32 e 64 bits, estas operações são realizadas em tamanhos de dados de apenas 16, 8, e até mesmo 4 bits. Blocos de hardware personalizados são necessários para suportar estas operações com a máxima eficiência.

O Núcleo Neural parece ser um ingrediente chave em uma série de novas funções embaladas no Google Pixel 4 e Pixel 4 XL. Estas melhorias centram-se principalmente no processamento de imagem e voz.

No lado da fotografia, a lista inclui Controlos de Exposição Dupla, um modo de astrofotografia, pré-visualizações ao vivo HDR+ e Visão Nocturna. O Pixel 4 do Google realiza ajustes de exposição dupla e HDR+ em tempo real para que os usuários possam ver os resultados de suas fotos antes de acertar o obturador. Isto aponta para um grande aumento no poder computacional das imagens em comparação com o Pixel 3.

Além disso, estes telefones introduzem o equilíbrio de branco baseado no aprendizado em seu sistema de câmera, que fixa tons amarelos frequentemente associados a imagens com pouca luz. Múltiplas capturas de exposição, detecção de céu e combinação de imagens são usadas para o modo astro noturno, o que requer uma grande quantidade de processamento e detecção de imagem inteligente. Finalmente, a característica do Pixel 4 identifica e recomenda melhores fotos de pessoas que você fotografa frequentemente.

O Pixel 4 também possui um assistente atualizado com modelos de linguagem melhorada que agora podem ser executados nativamente no dispositivo em vez de na nuvem. Os novos recursos de voz também incluem conversas contínuas, transcrição de áudio através do aplicativo gravador e reconhecimento de voz melhorado. O Núcleo Neural também provavelmente desempenha um papel na tecnologia de desbloqueio facial 3D do telefone.