Facebook melhora sua IA para descrever fotos com mais detalhes para usuários com deficiência visual

Postado em


A equipe do Facebook anunciou grandes melhorias na IA que usa para gerar descrições de imagens que são publicadas na plataforma. Uma tecnologia projetada para usuários com deficiência visual.

Este sistema, desenhado pelo Facebook em 2016, foi aprimorado para oferecer uma dinâmica mais rápida e precisa. Mas sua atualização mais recente o leva um passo adiante, pois pode oferecer descrições ainda mais detalhadas das imagens.

Para cada imagem postada no Facebook, a IA gera automaticamente uma legenda tentando descrever a cena. O Facebook não quer que essa IA descreva apenas elementos individuais da imagem, mas seja capaz de transmitir toda a cena para que os usuários possam entender o contexto e aproveitar a postagem.

Um objetivo que está presente nesta nova versão da IA, já consegue reconhecer muitos mais elementos e oferecer uma descrição mais detalhada da cena. Não só pode distinguir se existem pessoas ou animais, mas também pode reconhecer diferentes tipos de atividades, lugares e até a posição dos elementos.

Por exemplo, na imagem acima, a IA foi capaz de reconhecer que são 5 pessoas tocando instrumentos musicais, usando chapéus e bateria. Mas não só isso, também pode descrevê-la de uma forma que a pessoa entenda como a cena está configurada e quais elementos são importantes. Como pode ver na imagem, todas as informações são classificadas de forma que todo o contexto da cena possa ser fornecido.

Todas essas informações ajudarão as pessoas com deficiência visual a entender do que tratam as imagens ou fotografias compartilhadas por seus amigos. Claro, eles podem não querer obter essa informação para todas as imagens que aparecem em seu feed, então o Facebook permitirá que escolham quando desejam receber uma descrição mais detalhada da foto.