Por que isso é importante
O aprimoramento do vídeo continuará a melhorar, tendo um grande impacto no entretenimento, na aplicação da lei e no vídeo do consumidor. Tornar a rede de IA envolvida mais rápida e menor ajudará a trazer futuras ferramentas de aprimoramento de vídeo para todos nós, possivelmente em nossos próprios dispositivos pessoais.
Melhorando drasticamente a resolução do vídeo tem estado no centro das atenções ultimamente, com incríveis transformações de filmes antigos em resolução 4K moderna. A tecnologia para fazer isso também está melhorando rapidamente. Pesquisadores da Purdue University, da University of Rochester e da Northeastern University encontraram uma maneira de aumentar drasticamente a resolução do vídeo em três vezes a velocidade dos métodos atuais usando uma rede de IA quatro vezes menor.
Experiências extensas mostram que nossa estrutura de um estágio é mais eficaz e eficiente do que as redes existentes de dois estágios.
State of the Art: O processo que esses pesquisadores estão propondo, Space-Time Video Super-Resolution (STVSR), usa um passo de processamento de estágio único em vez de dois estágios, como outros métodos em uso hoje (chamados de redes VFI).
Este novo processo insere quadros de vídeo "ausentes" com base nos quadros existentes e os agrega ao mesmo tempo. Enquanto isso, a rede de IA prevê quadros de vídeo em câmera lenta e os coloca no vídeo também.
O que eles disseram: Os pesquisadores realizaram vários experimentos para ver se seu modelo produziria resultados melhores e mais rápidos do que as redes VFI atuais. Até agora, o sistema deles mostrou uma grande melhoria na velocidade de processamento e no tamanho que a rede de IA precisava.
Por que você se importa: Como a capacidade de melhorar drasticamente a resolução de vídeos e filmes mais antigos continua a ficar mais rápida e ocupa menos espaço, é fácil imaginar um futuro sistema residente em seu próprio laptop ou smartphone. Imagine todos os seus filmes caseiros dos dias de definição padrão, documentos pessoais e úteis para a história, recebendo o tratamento 4K. Pense em documentários trazendo uma nova luz e insights para documentos de filmes antigos e melhorias potenciais para a aplicação da lei e imagens de vigilância. Em breve, o botão "aprimorar" de Hollywood pode ser uma coisa real, e pode até estar no seu iPhone.
