[ad_1]
A maioria dos novos recursos e experimentos que a Adobe anunciou recentemente envolvem IA, como adição e remoção de objetos para Premiere Pro e geração de imagem baseada em texto no Photoshop. Agora, a empresa revelou VídeoGigaGANum recurso experimental de IA que pode aumentar o vídeo em oito vezes sem os artefatos usuais, como oscilação ou distorção, A beira relatado.
VideoGigaGAN supera outros métodos de Super Resolução de Vídeo (VSR) porque evita os artefatos usuais e oscilações introduzidas pela GAN (General Adversarial Networks), de acordo com a Adobe. Ao mesmo tempo, acrescenta nitidez e detalhes – onde a maioria dos outros sistemas não consegue fazer as duas coisas ao mesmo tempo.
É claro que o sistema está inventando detalhes que não existem do nada, então isso não seria adequado para coisas como aprimoramento de vídeo forense, à la Programas policiais no estilo CSI. Mas os detalhes adicionados parecem impressionantemente reais, como texturas de pele, cabelos finos, detalhes de penas de cisne e mais.
O modelo se baseia em um upsampler de imagem em grande escala chamado GigaGAN, de acordo com pesquisadores da Adobe. Os modelos VSR anteriores tiveram dificuldade em gerar detalhes ricos nos resultados, então a Adobe casou “atenção temporal” (reduzindo artefatos que se acumulam ao longo do tempo), propagação de recursos (adicionando detalhes onde não existem), anti-aliasing e algo chamado “transporte HF” (transferência recursos de alta frequência) para criar o resultado final.
Se adicionado a produtos como Premiere Pro ou After Effects, poderia permitir que os produtores de vídeo fizessem com que as fotos de baixa resolução parecessem muito melhores, embora o uso de IA para melhorar as pessoas seja uma vantagem. prática controversa. Ainda não se sabe se a Adobe planeja fazer isso (atualmente, os clipes são curtos e reproduzidos apenas a 12fps), mas muitas empresas, incluindo NVIDIA, Microsoft, Blackmagic Design e outras, também estão trabalhando na tecnologia de upscaling de IA.
[ad_2]
Fonte: