A ferramenta Director do OpenArt é boa?

Ao longo da curta e longa história dos modelos de renderização de vídeo, cada novo lançamento é acompanhado pelo entusiasmo de que este modelo será um avanço que finalmente se tornará o padrão.

Ainda não há razão definitiva para pensar que esse será o caso do “Director” da OpenArt, uma ferramenta de uma empresa de Redwood City dirigida por dois ex-engenheiros do Google que a empresa planeja lançar na terça-feira. Mas o programa oferece alguns novos recursos interessantes que podem levar a um caminho mais rápido para o topo da pilha.

O Diretor do OpenArt permite aos usuários criar um filme de até cinco minutos de duração, em vez de exigir a montagem meticulosa de clipes de cinco ou dez segundos, como a maioria das ferramentas oferece. O programa também monta um sistema de conversação que começa com o storyboard e termina com a submissão, essencialmente acompanhando o usuário na finalização de um pequeno segmento (ou uma cena de cinco minutos de um longa-metragem).

Coletivamente, os novos elementos permitem o que a cofundadora/CEO Coco Mao e outros executivos da empresa chamam de “manipulação de sentimento”, a transferência do termo vibe coding para o reino do autor. O objetivo do OpenArt é permitir que alguém sem habilidades técnicas de cinema, mas com muita visão narrativa, produza um filme da mesma forma que um codificador de pontilhamento pode criar um aplicativo.

“Com a codificação vibratória, você vibra e esquece que o código existe”, disse Mao em entrevista. “Você orienta, você tarefas, você dá feedback, e então a máquina simplesmente cria. E eu acho que a direção vibratória é muito semelhante a isso, onde o usuário pode esquecer qualquer ferramenta ou artesanato e apenas imaginar, reagir e provar. E então a máquina apenas cria”, acrescentou o executivo, que fundou a empresa com o ex-colega do Google, John Qiao.

A empresa combina diversos modelos para produzir seus filmes, de Sedance a Runway; A sua vantagem reside na forma como escolhe o modelo mais adequado numa determinada situação e também, mais importante, na sua interface de utilizador simples. Pense na maneira tradicional de basicamente juntar seus impostos versus o modo de negociação do TurboTax e você terá uma ideia da experiência que eles procuram. (“Podemos lidar com a maioria dessas pequenas decisões para que as pessoas não fiquem presas na escrita com pressa”, como diz Mao.)

A questão permanece se a codificação vibratória funcionará no campo artístico, onde o objetivo não é apenas um produto final funcional, mas uma obra de arte mais ambígua e subjetiva. Neste último caso, a precisão e o esforço têm muitas vezes um impacto direto no produto final.

Também resta saber se esse tipo de recurso amigável terá repercussão tão boa entre os diretores profissionais quanto com o Joe comum que procura fazer filmes. (Mao e a diretora de produtos Amy He dizem que querem atingir ambos). Mas, no mínimo, esta ferramenta não desmistifica a produção cinematográfica e potencialmente reduz as barreiras, encorajando as pessoas que podem sentir-se intimidadas pelo processo e tornando assim a realização de filmes uma actividade muito mais mainstream.

“Queremos ajudar os usuários que têm ótimas ideias, mas não sabem nada sobre ângulos ou lentes de câmeras”, disse ele em entrevista.

O executivo acrescentou que uma mudança técnica que proporciona uma interface mais intuitiva é que as empresas não treinam tanto modelos, mas fornecem orientação no estilo da IA ​​de agência, que essencialmente tenta alcançar resultados específicos por meio de um conjunto de regras baseadas em objetivos, em vez de apenas carregá-los em um grande conjunto de dados e aguardar resultados como o LLM.

Para divulgar o diretor, a OpenArt está comprando anúncios no metrô de Nova York e um outdoor em West Hollywood, além de anúncios em salas de cinema como parte do pré-show. Seu objetivo é atrair a atenção de pessoas criativas e amantes do cinema e dar-lhes uma pista sobre um diretor que eles ainda não conhecem. O cerne do objetivo da empresa é tanto sociológico quanto tecnológico: há um diretor escondido dentro de todos nós, e você não pagaria alguns dólares em empréstimos todos os meses para uma empresa do Vale do Silício desbloqueá-lo para você?

Um rápido test drive da ferramenta mostrou que um roteiro pode ser criado com apenas algumas frases e um filme pode ser criado a partir desse roteiro. Mas o trabalho começa aí; A primeira geração de um roteiro, por exemplo, era bastante primitiva e refletia apenas vagamente o que se pretendia; Muito mais reescrita (o sistema permite inserir e editar) foi necessária antes que algo utilizável surgisse.

Ainda assim, a capacidade de escrever algumas ideias de script com o mínimo esforço impulsionou o processo de uma forma que um simples chatbot não conseguiria. Na outra ponta do processo, o OpenArt também ajustou o programa para que os usuários possam editar um filme com a mesma facilidade (a maioria dos modelos exige uma geração totalmente nova se algo der errado).

A OpenArt afirma ter oito milhões de assinantes ativos para suas ferramentas de imagem e vídeo existentes e gera US$ 70 milhões em receitas. De acordo com a empresa de pesquisa SacraSegundo Mao, tem apenas 50 funcionários.

Cerca de US$ 30 milhões foram arrecadados como parte de uma recente rodada de financiamento – o que não é uma grande mudança, mas uma pequena fração, digamos, dos mais de US$ 800 milhões que a Runway arrecadou.

A OpenArt também estabeleceu parcerias informais com muitos criadores, incluindo um ex-redator editorial. O programa de Ellen DeGeneresGil Rief e o criador de música viral de IA King Willonius são mais conhecidos por sua paródia aprimorada de Drake “BBL Drizzy.”

Rief disse que o diretor não gostou muito de estar no set, mas achou “como dar uma nota a um editor” quando a modelo ouvia uma pergunta e depois voltava com uma nova versão. “Sinto-me mais criativo do que nunca porque estou eliminando muitos atritos”, disse Rief sobre a IA em geral, ecoando o que muitos experimentadores de IA disseram sobre antigos obstáculos; os scripts que estavam trancados em uma gaveta agora foram removidos porque podem evocar rapidamente uma versão visual das palavras na página (ele disse que pretende usar IA principalmente para apresentações e desenvolvimento de material interno, não para o produto final).

Willonius afirmou que o Diretor possui “maior grau de flexibilidade e controle”. “Isso permite que você vá do ponto A ao ponto B muito mais rápido, sem sacrificar a qualidade”, disse ele, observando que as primeiras gerações através das quais suas instruções se espalharam eram um pouco “vaporosas”, mas acrescentou que isso também aconteceu nas versões humanas. Tanto Willonius quanto Rief usaram a ferramenta Director para criar videoclipes; no entanto, a empresa tem como alvo uma variedade de casos de uso de formato curto e de natureza menos intangível, como comerciais de TV, curtas-metragens e conteúdo social; eles também acreditam que podem disponibilizá-lo aos cineastas por meio de um pacote Enterprise, tanto para estúdios quanto para usuários amadores.

Mao e Qiao trabalharam no império Google durante anos e foram os mais ChorarUm serviço de vídeos curtos focado na criatividade que fazia parte de uma incubadora do Google antes de ser adquirido pela Pesquisa Google; Eles saíram para iniciar o OpenArt em 2022.

Mao diz acreditar que uma nova paisagem se está a abrir diante dos nossos olhos.

“Nós realmente achamos que esta será uma nova era na narrativa”, disse ele. “Podemos treinar muitos novos contadores de histórias e, ao mesmo tempo, dar aos contadores de histórias do passado muito mais liberdade e expressão criativa do que têm atualmente.”

Link da fonte