ArtificialGuyBR

Home / Blog / Fixing things

FollowCam Redmond WAN2 T2V 14B

LoRA de texto para vídeo Wan 2.2 para ação imersiva de rastreamento de câmera em ambientes como tempestades, cavernas e salinas.

2 sources cited Fixing things

FollowCam Redmond WAN2 T2V 14B

DR

  • Treina Wan 2.2 T2V para produzir movimento contínuo de câmera de acompanhamento em vez de cenas estáticas.
  • Palavra-gatilho: FollowCam; avise explicitamente o assunto e o ambiente da foto.
  • O melhor ponto de partida no ComfyUI é um modelo Wan básico com força LoRA em torno de 0,8–1,0.
  • A saída prioriza o vídeo, portanto, a seleção do quadro e a formulação do movimento são mais importantes do que as solicitações apenas de detalhes.

O que o modelo faz

A FollowCam Redmond foi construída para um comportamento estreito, mas visualmente forte: capturas de rastreamento imersivas nas quais a câmera segue um objeto através de um espaço ao longo do tempo. Em vez de solicitar um único quadro composto, você descreve o movimento e o ambiente, e o LoRA direciona a geração para um movimento sustentado para frente ou correspondente.

Os exemplos de resultados mostram um motociclista atravessando planícies de sal brilhantes sob um amplo céu iluminado pelo sol, um mergulhador nadando por uma estreita passagem subaquática de calcário e um trabalhador escalando o esqueleto de um edifício com estrutura de aço. Eles são consistentes com os casos de uso reivindicados pelo autor e mostram o modelo priorizando o movimento da câmera e a continuidade espacial em detrimento dos detalhes.

Motorcycle follow-camera tracking across salt flats

Como é treinado e o que esperar

Este é um LoRA de difusão para o pipeline Wan 2.2 T2V-A14B, distribuído como um único arquivo de safetensors para ComfyUI. O cartão HuggingFace lista exemplos de prompts no formulário FollowCam. A continuous ... shot following ..., cada um enfatizando uma perspectiva, estilo de movimento e ambiente específicos. Essa estrutura é útil porque o modelo parece responder tanto ao gatilho FollowCam quanto à descrição do movimento, e não sozinho.FollowCam

A partir de amostras inspecionadas, o modelo lida bem com diferentes escalas: movimento externo aberto, movimento interno confinado e movimento subaquático. O visual é cinematográfico de ação, em vez de documentário fotorrealista, portanto, espere iluminação estilizada e desfoque de movimento consistente com imagens em primeira pessoa ou de câmera de ação.

Underwater cave follow-camera tracking shot

Uso recomendado

  • Modelo básico: Wan-AI/Wan2.2-T2V-A14B.
  • Fluxo de trabalho: carregue o modelo base, aplique o LoRA e execute o KSampler normalmente.
  • Força inicial de LoRA: 0,8–1,0.
  • Padrão de solicitação: FollowCam. A continuous [shot type] following [subject] through [environment].
  • A especificidade do assunto e do ambiente é mais importante do que longas listas de estilos.

Erros e correções comuns

Erro | Causa | Correção | Fonte

|---|---|---|---

Foto estática | Frase de movimento fraca ou gatilho omitido | Alerta de lead com FollowCam. A continuous ... shot | LEIA-ME DE HF Rastreamento de assunto distorcido | Resistência LoRA muito alta com base ruidosa | Reduza ligeiramente o modelo_de_força e aumente as etapas de amostragem | Civitai Artefatos subaquáticos aquáticos | O movimento subaquático é difícil para o T2V | Adicionar underwater, caverna e sinais de iluminação como farol | Exemplos de alta frequênciacaveheadlamp

Perguntas frequentes

Isso funciona no A1111? O cartão tem como alvo o ComfyUI e lista a geração baseada em Wan. Use o mesmo modelo Wan básico e aplique o LoRA com seu carregador Wan preferido, se disponível.

Pode fazer cenas sem ação? Ele é treinado para seguir o movimento. Cenas de diálogo estáticas ou lentas não são o caso de uso pretendido.

O vídeo é consistente? A consistência da câmera de acompanhamento é o comportamento central. Clipes mais curtos com restrições ambientais explícitas tendem a permanecer no assunto por mais tempo.

Construction-site follow-camera climbing shot

Fontes

  • https://huggingface.co/artificialguybr/FollowCam-Redmond-WAN2-T2V-14B
  • https://civitai.com/models/2068735