Colocar cores em um vídeo em preto e branco não é uma tarefa fácil, mas a Inteligência Artificial pode ajudar muito nesse assunto.
Microsoft vem trabalhando com o problema e publicou um artigo em Arxiv.org onde indica que criaram um sistema de ponta a ponta para colorização de vídeo autônoma baseado em um exemplo (uma imagem de referência). Dizem que, em experimentos quantitativos e qualitativos, alcançaram resultados superiores ao que pode ser feito hoje no setor.
Leia também:MICROSOFT APRESENTA BOT QUE PODE GERAR IMAGENS A PARTIR DE DESCRIÇÕES DE TEXTO
O principal desafio é alcançar a consistência temporal, permanecendo fiel ao estilo de referência. Uma vez alcançada, vídeos realistas podem ser produzidos com boa estabilidade temporal. IA é capaz de converter clips monocromáticos em coloridos de forma semelhante como fez Nvidea em setembro, ou Google quando apresentou um algoritmo que colore os vídeos em tons de cinza sem supervisão manual do humano, mas até agora se viam erros proporcionais a duração do vídeo de entrada.
Neste caso, o método dos investigadores converte o resultado de um quadro de vídeo anterior como entrada (para preservar a consistência) e executa coloração utilizando uma imagem de referência, permitindo que essa imagem guie a coloração, quadro por quadro, reduzindo o erro de acumulação.
Foram utilizados dados de treinamento em código aberto Videvo corpus, que contém principalmente animais e paisagens, e complementados com vídeos de retratos, totalizando 768 vídeos. Para cada vídeo, eles extraíram 25 quadros e expandiram ainda mais a categoria de dados com fotos do ImageNet, que usaram para aplicar distorção geométrica aleatória e ruído de luminância para gerar quadros. O resultado final: 70.000 vídeos de várias categorias.
Leia também:MICROSOFT WORD OFERECERÁ SUGESTÕES PARA REESCREVER O CONTEÚDO
Os resultados não são muito vibrantes, porém, mostram uma cor semelhante à realidade.
Uma técnica que poderia ajudar a trazer filmes de volta os filmes antigos.