Como substituir um objeto no vídeo com IA local

A resposta curta

No KwaFlux, substituir um objeto no vídeo significa manter o objeto e trocar o que está atrás dele: clique no objeto em um quadro, deixe o rastreamento SAM2 acompanhá-lo e escolha um fundo transparente, sólido, da galeria ou desfocado. É para assuntos que não são pessoas; pessoas vão para a substituição de pessoa. Apagar o objeto é outra ferramenta. Use a Substituição de fundo do objeto.

Quando a substituição de objeto vence a de pessoa

• O assunto é uma garrafa, placa, carro ou outro objeto — não um retrato
• Você quer uma máscara de clique-rastreio, não um matte de corpo afinado para pessoa
• Você precisa de um alfa ou uma troca de plate simples sem After Effects

O que ainda precisa de um compositor

• Oclusão pesada, motion blur, ou um alvo que parece o fundo
• VFX em várias camadas ou um movimento de câmera rastreado
• Você precisa de um alfa em ProRes 4444 ou WebM para o grafo de outra pessoa

Como usar o módulo

1. Importe o clipe e clique no objeto a isolar
2. Escolha transparente, sólido, galeria ou desfoque; pré-visualize 1s/3s/5s em um quadro difícil
3. Exporte localmente, ou envie o composto por Conversão de formato

Confira a plate em um quadro difícil

O fundo que você escolhe é uma forma de entrega, não um nível de qualidade. Transparente mantém um canal alfa para que outro editor coloque o objeto rastreado sobre outro fundo. Sólido preenche a parte de trás com uma cor. Galeria coloca uma imagem parada que você escolhe. Desfoque mantém a cena original e suaviza tudo o que fica fora do clique, útil quando o objeto deve ficar no lugar e a rua deve ir para segundo plano. Você marca um objeto no material que está editando (uma garrafa, uma placa, um veículo) e troca a área em volta dele.

O SAM2 acompanha o objeto clicado ao longo de toda a tomada. Quando o contorno vaza para uma parede ou mesa da mesma cor do objeto, o painel de anotação oferece desfazer, refazer e gerar de novo. Coloque a prévia grátis de 1, 3 ou 5 segundos no momento difícil: uma virada, uma passagem atrás de outro objeto ou um quadro em que a borda deveria ficar nítida e não fica. Um quadro de abertura calmo esconde esse vazamento. A prévia não pede conta. Exportar, converter, reparar um arquivo e baixar um arquivo de um link exigem entrar na conta e um plano pago. As duas etapas acontecem no seu computador, sem upload.

A Remoção de objeto IA preenche um buraco para que um pedestre ou uma lixeira parada desapareçam. A substituição de fundo do objeto mantém o que você selecionou e troca o fundo atrás dele, ou entrega o canal alfa. Se a garrafa deve sumir, use a remoção; se ela deve ficar sobre um fundo limpo, use este módulo. Pessoas continuam com o Recorte inteligente IA, cujo matte é ajustado para cabelo e corpo. Um objeto na mão de alguém pode ser o alvo do clique, mas não peça a este módulo que recorte a pessoa.

Os casos que ainda precisam de um compositor não ficam mais fáceis porque o fundo parece arrumado em uma imagem parada. Oclusão forte, desfoque de movimento e um alvo que se mistura ao fundo continuam difíceis. Efeitos em várias camadas e um movimento de câmera rastreado continuam sendo trabalho para outro app. Quando um parceiro precisar de ProRes 4444 ou WebM com alfa, exporte o alfa e deixe que ele termine a composição no projeto dele. Com a Conversão de formato, você muda o codec de uma composição que já aprovou, e essa etapa também acontece localmente.

Uma passada útil é curta de propósito. Importe o clipe e clique uma vez no objeto, em um quadro em que o contorno dele esteja claro. Se a primeira máscara incluir a mesa, o céu ou outro objeto parecido, gere de novo e clique outra vez, em vez de torcer para a exportação resolver. Depois escolha o fundo conforme a entrega: Transparente se outra pessoa vai fazer a composição, Sólido ou Galeria se este arquivo é o resultado final, Desfoque se o objeto fica na cena e você só quer que o entorno vá para segundo plano. Veja a prévia no movimento mais difícil. Se a borda se mantém ali, exporte localmente; se não, mude o clique ou leve a tomada para um compositor.

Trabalhe só com material que você tem direito de editar. O clique seleciona um objeto dentro daquela tomada. Os casos comuns são tomadas de produto, B-roll e conteúdo de usuários: um objeto ou veículo, rastreado na sua GPU, com o arquivo original guardado ao lado da exportação. A imagem desta página mostra o módulo com um clipe carregado e nada marcado ainda, então não mostra nenhuma substituição. Julgue a sua própria prévia de 1, 3 ou 5 segundos.

A falha que vale procurar de propósito é a de cores parecidas. Uma garrafa escura diante de um balcão escuro, uma placa branca contra um céu nublado ou um carro da cor do asfalto fazem a máscara oscilar. Clique no objeto em um quadro em que o limite esteja claro, avance até o quadro em que ele não está e rode a prévia curta ali. Se nem gerando a máscara de novo esse limite se mantiver, o próximo passo honesto é um compositor, não exportar por mais tempo a mesma máscara.

• Clique em um objeto, placa ou veículo no clipe que você está editando
• Transparente, sólido, galeria e desfoque são tipos de plate, não níveis
• Julgue a prévia curta onde o objeto está ocluído ou perto da cor do fundo
• Use a remoção se o objeto deve sumir, e este módulo se ele deve ficar
• Exporte só quando o quadro difícil segurar, e guarde o arquivo original