A nova IA de fotos do Google está causando um rebuliço

Em breve, os fotógrafos poderão “ver no escuro” efetivamente depois que o Google Research adicionou uma nova ferramenta de redução de ruído de IA ao seu projeto MultiNeRF.

Para obter informações, o NeRF é um compositor de visualização. É uma ferramenta capaz de escanear milhares de fotos para recriar renderizações 3D precisas. De acordo com Ben Mildenhall, um dos pesquisadores do projeto, o NeRF funciona melhor com fotos bem iluminadas e de baixo ruído. Em outras palavras, ele foi projetado para fotografar durante o dia.

Apresentando o RawNeRF

Fotografar à noite e com pouca luz provou ser problemático. De fato, eles escondiam detalhes nas sombras ou ficavam mais barulhentos quando o brilho era aumentado. Foi então que Mildenhall e sua equipe descobriram o problema. Na realidade, as ferramentas de redução de ruído podem reduzir parte do ruído, mas isso tem um custo para a qualidade da imagem resultante.

Assim, com a introdução do RawNeRF, a inteligência artificial está configurada para reduzir o ruído sem remover detalhes. Isso permitiria que as persianas enxergassem no escuro. O programa RawNeRF pode ler as imagens. Ele usa inteligência artificial para adicionar um nível mais alto de detalhes e, portanto, artefatos muito menos feios, a fotos tiradas em condições de pouca luz.

Como é esse projeto?

De acordo com a equipe por trás do projeto, ele funciona melhor do que qualquer outra ferramenta de redução de ruído. Em um artigo da Universidade de Cornell, os pesquisadores por trás deste projeto explicam como ele funciona. Eles apontaram que o NeRF produz uma representação de cena tão precisa que suas visualizações recém-renderizadas são melhores do que qualquer dispositivo que remova ruídos profundos. Isso acontece quando otimizado em muitas entradas ruidosas. Em um vídeo de demonstração, NeRF in the Dark, ou NeRF dans le Noir, publicado em maio de 2022, Mildenhall captura uma foto de um telefone iluminado apenas à luz de velas.

O pesquisador do Google explica que o RawNeRF tem a capacidade de combinar imagens tiradas de diferentes perspectivas para juntos esclarecer e reconstruir a cena. A imagem reproduzida é então exibida em um espaço de cores HDR linear. Isso permite que os usuários trabalhem muito mais profundamente com ângulos, exposição, mapeamento de tom e foco.

Embora ainda em fase de pesquisa e ainda não seja um produto oficialmente suportado pelo Google, o RawNeRF oferece uma visão fascinante de como a IA pode ajudar os anúncios a refletir melhor o mundo ao seu redor.

fonte