Sora da OpenaI abriu a caixa de Pandora em relação à geração de vídeo por IA (é assim que funciona), e agora a Adobe também está prestes a trazer esses tipos de ferramentas para o Premiere Pro.

A suíte de edição de vídeo realmente usa seu próprio modelo vaga-lume, bem como de terceiros como Sora e também RunwayML, para remover ou adicionar objetos, estender a duração dos clipes e também para criá-los completamente novo começando com um prompt. Veja como funciona.

Em um vídeo compartilhado no YouTube, Adobe mostra o potencial do Premiere Pro graças à IA generativa. Vamos começar adicionando ou removendo objetos, que fazem uso do modelo proprietário Firefly (o mesmo usado para gerar imagens).

Adicionando objetos

Se quiser adicionar um objeto, basta selecionar uma área e selecionar a ferramenta Adicionar objeto. Neste ponto, selecionando o modelo Adobe Firefly (não se sabe se outros modelos estarão disponíveis) você pode inserir um incitar para descrever um novo.

Removendo objetos

Da mesma forma, a função “Mascaramento inteligente” desenvolvido com Adobe Firefly permite remover objetos de forma generativa, por exemplo, imagens protegidas por direitos autorais ou das quais você não gosta.

As duas ferramentas juntas permitem até que você substituto objetos em um vídeo, como um relógio no pulso de um personagem. Essas funções são não destrutivo então você sempre pode voltar para filmagem original.

Extensão generativa é útil se você quiser manter um determinado enquadramento mais do que o que estava disponível na filmagem original. Novamente, pode ser usado Adobe Firefly para estender o clipe de uma forma que pareça natural, em vez de apenas ter um quadro congelado por dois segundos.

Não só isso, mas neste caso o Adobe Premiere Pro também permitirá que você use modelos de IA terceiras partes vir Pica.

Finalmente, graças a ferramentas de terceiros como Irmã IA e PistaML, você pode simplesmente gerar videoclipes completamente novos.

A Adobe se refere a esse recurso como b-roll generativo.

A ideia é utilizá-lo como plano de fundo de uma cena ou para ter uma ilustração genérica de algo. Basta escolher onde adicionar o vídeo, escolher o modelo, inserir o incitar de texto para o tipo de vídeo que deseja criar e escolha entre as opções disponíveis. Neste ponto, o Premiere Pro irá gerar a filmagem e adicioná-la.

Com essas ferramentas incluídas em um conjunto de editando vídeo assim como o Adobe Premiere Pro, a geração de vídeo torna-se verdadeiramente acessível a todos, porque se adapta diretamente ao fluxo de trabalho.

E é perturbador. Adobe enfatiza que o “credenciais de conteúdo eles sempre tornarão isso transparente se” IA foi usada”, assim como acontece atualmente com o conteúdo gerado pelo Firefly, mas não é difícil imaginar que será possível removê-lo em produto final.

Assim que o vídeo estiver difundido sui social sobre são YouTube, tememos que seja virtualmente impossível entender o que você está vendo (um processo que já está em andamento).

Quanto ao lançamento no mercado, a Adobe não compartilhou nenhum tempo, e apenas afirmou que estas são “explorações iniciais de uso”. No vídeo podemos ver como ainda é um beta, mas podemos imaginar que uma vez que Sora for lançado, esses recursos também não deveriam atraso.