O chefe de pesquisa e desenvolvimento de câmeras da Samsung Mobile deseja que seu telefone “personalize” suas fotos

29 de janeiro de 2021 0 551

Exclusivo: Cho da Samsung investiga AI, Space Zoom e o que pode vir a seguir.

A Samsung anunciou seu primeiro smartphone Galaxy S nos dias agitados de 2010 e, na época, as pessoas estavam muito entusiasmadas com sua tela Super AMOLED de 4 polegadas e processador de 1 GHz para se preocupar muito com suas câmeras. O mesmo poderia ser dito da própria Samsung – o comunicado de imprensa original da empresa nos EUA mencionou um total de zero vezesfora da folha de especificações.

Onze anos e milhões de telefones Galaxy depois, as câmeras se tornaram uma parte crucial da identidade do smartphone da Samsung. Se você precisar de alguma prova, basta olhar para os novos dispositivos carro-chefe da empresa, que já estão à venda. O Galaxy S21 e o S21 Plus vêm com quatro câmeras cada um, enquanto o S21 Ultra de última geração possui cinco (e geralmente enfatiza mais a fotografia telefoto). E embora os especialistas e críticos tendam a ir e vir sobre os méritos da abordagem da Samsung com as câmeras, a maioria deles (eu inclusive) ficou impressionado com o que a empresa conseguiu este ano.

Aquela recepção calorosa foi música para os ouvidos de Joshua Sungdae Cho. Depois de obter dois diplomas de pós-graduação no Rensselaer Polytechnic Institute no interior do estado de Nova York, Cho assinou com a Samsung em 2004 e subiu na hierarquia para se tornar vice-presidente e chefe de P&D de software visual da Samsung Mobile. Em uma conversa exclusiva com o Engadget, Cho – ladeado por pessoas de relações públicas e um intérprete em uma pequena sala de conferências na Coréia – puxou a cortina sobre como a empresa chega a uma vibe para seu processamento de imagem, destacou a importância crescente da IA ​​e sugeriu como o futuro das câmeras Samsung pode envolver fazer suas fotos parecerem totalmente diferentes das minhas.

Tendência perfeita

Se você leu qualquer análise recente de um smartphone Samsung premium – sério, escolha um ao acaso – você provavelmente encontrará algo que chama a atenção para a abordagem da empresa em relação ao processamento de imagens. Detalhes finos nas fotos são nitidamente nítidos, às vezes até demais. Dependendo do ano, você pode encontrar menções sobre a Samsung auto-suavizar os rostos das pessoas com um aerógrafo computacional, embora isso seja menos problemático este ano. Talvez mais notavelmente, as cores e o brilho são ampliados até o ponto em que parecem mais incisivos e atraentes do que a realidade. Goste ou não, este é o Samsung Look, e temos lidado com variações dele há anos. Mas por que é o que é?

Bem, você tem outros usuários para culpar – ou agradecer, conforme o caso.

Apesar do papel de Cho como chefe de P&D de câmeras, ele não age como um visionário apaixonado articulando como deveriam ser as fotos da Samsung. Nenhuma pessoa o faz. Em vez disso, Cho disse, por meio de um intérprete, que a empresa conta com especialistas internos em imagens e cientistas de cores, junto com um painel de fotógrafos profissionais, para aprimorar os fatores que tornam as fotos atraentes. Mas os conselhos de especialistas levam a Samsung apenas até certo ponto; é aí que entra a pesquisa global da empresa.

Todos os anos, a Samsung alcança milhares de clientes em todos os seus principais mercados, dos EUA ao Canadá, à Espanha e China e além, para descobrir por que eles gostam das fotos de que gostam. Em um alto nível, os representantes perguntam a essas pessoas – seja por meio de grupos de foco ou questionários distribuídos – sobre suas preferências fotográficas e os pontos problemáticos que elas enfrentam. As conversas podem ficar bem granulares, no entanto. Ao tentar descobrir o que as pessoas gostam em suas imagens favoritas, Cho diz que as discussões podem se voltar para assuntos como tom de cor e saturação, níveis de ruído, nitidez de detalhes, brilho geral e muito mais, tudo para que a Samsung possa ajustar seus modelos HDR e sua cena inteligente otimizador para entregar o que ele chama de fotos “perfeitamente na moda”.

Em outras palavras, se você não gosta da maneira como o S21 aprimora os detalhes e aumenta a saturação, você não está apenas discordando da Samsung – você também discorda de todos que eles entrevistaram. (Não que isso seja uma coisa ruim.)

A Samsung dá muito peso aos resultados desta pesquisa porque deseja desesperadamente agradar a todos, mesmo sabendo que não pode. Como poderia? A empresa é responsável por cerca de um quinto de todos os smartphones usados ​​em todo o mundo e gostos individuais, alimentados pela experiência pessoal e moldados por mudanças na cultura, não ficam parados por muito tempo. Ao reunir e mastigar todas essas informações puramente subjetivas, no entanto, Cho e sua equipe estão tentando capturar uma sensação de zeitgeist visual de um ano e refleti-la de volta para você.

Próximas etapas da Samsung

Como já estabelecemos, o Galaxy S21s vem com muitos câmeras – sem dúvida o suficiente para a maioria das situações em que você se encontraria. Mas agora que todas essas bases parecem adequadamente cobertas, para onde vai a Samsung?

Uma abordagem potencial é óbvia: basta adicionar mais câmeras. Cho acredita que não há limite máximo para quantas câmeras um smartphone deve ter, desde que todas atendam aos critérios básicos da Samsung: produzir imagens atraentes, independentemente das condições. Mas o outro lado também é verdadeiro. Não há nada que impeça a Samsung, ou qualquer outra empresa, de avançar em direção a uma única câmera que – graças a alguma ajuda da IA ​​- pode desempenhar várias funções. Com o tipo certo de treinamento, por exemplo, o aprendizado de máquina pode ajudar um único sensor a funcionar em dobro como um atirador macro ou telefoto. (Para ser claro, esse é o meu exemplo, não o de Cho.)

“Quando há dez pessoas tirando fotos do mesmo objeto, quero que a câmera forneça dez fotos diferentes para cada pessoa com base em sua preferência.”

Embora ele não tenha confirmado se a Samsung planejava ativamente adotar uma câmera “tamanho único” com IA, é uma área de interesse óbvio para o chefe de software de imagem da empresa – ele mesmo mencionou a possibilidade em um artigo publicado para o Samsung site de mídia . 

“Nossa tecnologia de IA está melhorando continuamente graças à tecnologia de treinamento de imagem que desenvolvemos na Samsung”, disse ele em novembro. “Ao mesmo tempo, também estamos trabalhando para fornecer o melhor hardware de câmera para nossos dispositivos. Se formos capazes de obter os mesmos resultados de várias câmeras com apenas uma única câmera alimentada por IA, então iremos unir as tecnologias.”

Por enquanto, diz ele, o fator limitante é o silício – ou mais especificamente, as unidades de processamento neural atualmente disponíveis em chipsets como Snapdragon 888 da Qualcomm ou Exynos 2100 da própria Samsung.

“No momento, estamos no terceiro ano do NPU”, disse Cho. “Eu diria que ainda é um estágio inicial. Você tem que atingir pelo menos quatro ou cinco anos desde o lançamento inicial do NPU para vê-lo substituir os servidores. E quando esse momento chegar, acho que um dos jogadores do campo – não precisa ser Samsung – poderia vir com uma única câmera AI. “

Dado o peso que a empresa dá à sua pesquisa global e seu desejo intenso de satisfazer o maior número possível de público, talvez não seja surpresa que Cho pareça mais apaixonado pela ideia de ajustar as câmeras Galaxy aos gostos individuais. Em outras palavras, em um futuro próximo, as fotos que seu telefone Galaxy tira podem não se parecer com as que o meu tira.

“Meu objetivo é fornecer uma câmera que possa satisfazer a todos 100 por cento por meio da personalização”, disse Cho. “Quando há dez pessoas tirando uma foto do mesmo objeto, eu quero que a câmera forneça dez fotos diferentes para cada indivíduo com base em sua preferência de brilho, tom de cor, realce de detalhes, etc.”

Os mecanismos subjacentes para fazer esse aprendizado no dispositivo acontecer não estão totalmente prontos, novamente porque as unidades de processamento neural ainda estão essencialmente em sua infância. Quando questionado sobre quanto tempo levaria para que uma empresa de smartphones pudesse fazer uma câmera verdadeiramente “personalizada”, Cho admitiu que “ninguém pode responder isso no momento”. Mesmo assim, ele tem uma noção clara de onde ele e sua equipe podem começar assim que o silício começar a corresponder às suas ambições. 

“Você pode olhar o álbum do usuário para descobrir quais fotos eles salvaram nos últimos anos em vez de excluir”, observou ele. “Além disso, você pode ver que tipo de edição eles fazem, quais filtros eles mais usaram. Essas são algumas das coisas que poderíamos olhar para garantir que o sistema aprenda sobre o usuário.”

Embora o futuro possa trazer fotos ultra-personalizadas que brilham para você e apenas você, espere que a Samsung mantenha sua fórmula testada e comprovada enquanto isso. Isso significa desenvolver mais sensores de câmera novos, criar recursos excêntricos que pesquisam seus usuários para capturar o espírito visual do momento, ajustando zelosamente seu processamento de imagem ano após ano. E se você não gosta da vibração em que a Samsung pousou? Basta ajustar as fotos você mesmo – talvez a empresa escolha seu cérebro este ano.

Smartphone