Problemas com cores de fotos em smartphones? Spectricity espera corrigi-los

Aqui está o texto traduzido em:
  • Uma startup chamada Spectricity espera que sua câmera de propósito específico que captura 16 cores diferentes signifique que seu futuro telefone será capaz de lidar com as sutilezas da cor do mundo real de forma mais capaz.
  • A empresa desenvolveu uma forma muito compacta do que é chamado de câmera multiespectral, um módulo que captura muitas mais frequências de luz do que o vermelho, verde e azul das câmeras digitais tradicionais.
  • Ao casar seus dados de imagem multiespectral com a foto tirada pela câmera tradicional, o sistema pode lidar melhor com situações de iluminação complicadas, melhorar os tons de pele em fotos, aumentar aplicativos para escolhas de maquiagem e diagnósticos dermatológicos e ajudar com compras on-line onde a cor precisa ser precisa.

“Smartphones são cegos para cores. É um problema que todos os fabricantes de smartphones estão tentando resolver”, disse o CEO Vincent Mouret, que lidera o spin-off de 35 pessoas do Imec, um importante centro de pesquisa e desenvolvimento de chips na Bélgica. Ele falou da CES 2024, onde a Spectricity está mostrando sua câmera multiespectral S1, agora compactada para caber em um telefone. De fato, a empresa tem pelo menos três clientes que ele espera incluirão a câmera Spectricity em telefones de 2025.

Câmeras são provavelmente o aspecto de maior destaque de qualquer novo telefone e o principal motivo pelo qual muitos de nós fazemos upgrades. Estão ficando continuamente melhores à medida que os fabricantes de telefones aumentam o tamanho do sensor, adicionam novas câmeras para perspectivas ultralargas e teleobjetivas e melhoram o software de fotografia computacional que retira melhores fotos de pequenos sensores de imagem. Os fabricantes de telefones estão desesperados por uma vantagem que os ajude a se destacar em relação aos rivais.

Não está claro com que frequência a tecnologia Spectricity melhoraria uma foto. Nem todas as fotos são complicadas por iluminação incomum ou situações difíceis, como iluminação mista com luzes internas de tom mais quente e sol da parte externa com tom mais fresco. Mas os problemas de cores podem ser significativos, como evidenciado pelo esforço de empresas como Google e Apple em renderização mais fiel de tons de pele, especialmente para pessoas negras.

Michael Jacobs, engenheiro de aplicações da Spectricity, demonstrou a tecnologia da empresa tirando uma foto de uma boneca retratando uma pessoa negra em frente a um fundo rosado. O Pixel 7 Pro do Google distorceu dramaticamente a cor, dando à face da boneca um tom azulado e tornando a parede roxa. As mesmas fotos modificadas pelas informações de cor da Spectricity mostraram tons muito mais naturais. “Podemos detectar o rosto nesta imagem multiespectral e depois encontrar a iluminância que ilumina esse rosto”, disse Jacobs. “Usamos essa informação para corrigir a iluminância e depois obter a cor correta para esse rosto.”

A Spectricity não está sozinha em seu interesse. Marc Levoy, pesquisador da Adobe e anteriormente do Google, que foi pioneiro na fotografia computacional, vê os sensores multiespectrais como uma avenida para melhorias na fotografia de smartphones. O módulo da câmera S1 da Spectricity, incluindo o sensor de imagem e sua própria lente, cabe no pequeno volume de um módulo de câmera de smartphone regular. Custará apenas cerca de $3. Uma preocupação potencialmente mais significativa para os fabricantes de smartphones poderia ser o volume que a câmera ocupa, já que cada micrômetro cúbico dentro de um telefone é precioso.

O sensor de imagem filtra a luz usando padrões de interferência que filmes transparentes finos podem causar, transmitindo ou refletindo frequências de luz particulares dependendo da espessura do filme. É o que causa os padrões de arco-íris que você pode ver quando óleo é derramado em um poço na estrada. O sensor da Spectricity tem uma resolução de 5 megapixels, mas desde que cada pixel captura apenas uma cor, produz uma imagem de 640×480 com todas as 16 cores por pixel. O processamento dessas combinações de cor para cada pixel é o que permite que a tecnologia da Spectricity infira as cores reais de uma cena, diz a empresa. O S1 produz uma imagem de resolução relativamente baixa em comparação com smartphones que normalmente tiram fotos de 12, 24 ou 48 megapixels. Mas os dados de cor podem ser mapeados para a foto de alta resolução. O S1 funciona em conjunto com a câmera do telefone e não a substitui.