ArtificialGuyBR

Home / Blog / Training LoRAs

AceStep Refine Redmond: DPO LoRA para uma melhor geração musical

Adaptador LoRA refinado por DPO para ACE-Step 1.5 Turbo, melhorando a musicalidade, a coerência do arranjo e o caráter vocal na geração de texto para áudio.

1 sources cited Training LoRAs

On this page

  1. O que este modelo faz
  2. Detalhes do treinamento
  3. Como usar
  4. Limitações conhecidas
  5. Uso responsável
  6. Licença
  7. Erros e correções comuns
  8. Perguntas frequentes
  9. Fontes

AceStep Refine Redmond: DPO LoRA para uma melhor geração musical

TL;DR

  • Adaptador LoRA refinado por DPO para ACE-Step 1.5 Turbo com taxa de vitória de 70% em testes cegos A/B
  • Treinamento em dois estágios: ajuste fino de LoRA de 75 épocas + refinamento de DPO (classificação LoRA 96, alfa 192)
  • Funciona em fluxos de trabalho padrão ACE-Step e ComfyUI; Licenciado pelo MIT

O que este modelo faz

AceStep Refine Redmond é um adaptador LoRA que melhora a qualidade de saída do ACE-Step 1.5 Turbo (acestep-v15-turbo) para geração de texto para áudio. O refinamento visa três áreas específicas: musicalidade, coerência do arranjo e caráter vocal. Foi desenvolvido usando computação GPU patrocinada por Redmond.AI.

O adaptador é compatível com o pipeline ACE-Step e vem em dois formatos:

  • padrão/ — Adaptador PEFT para carregamento regular do ACE-Step
  • comfyui/ — Exportação LoRA de arquivo único para fluxos de trabalho ComfyUI

Para melhores resultados de solicitação, o autor recomenda usar o acestep-5Hz-lm-4B modelo de linguagem para composição e engenharia imediata.

Detalhes do treinamento

O modelo foi treinado em duas etapas:

  1. Large-dataset LoRA fine-tuning: 75 epochs on the base acestep-v15-turbo posto de controle
  2. Refinamento DPO: Otimização de preferência direta na parte superior do adaptador da época 75, continuada até a época 81

Configuração LoRA:

  • Classificação: 96
  • Alfa: 192
  • Taxa de aprendizagem: 8e-5
  • Tipo de adaptador: LoRA (PEFT)

Em testes A/B cegos contra o ACE-Step 1.5 Turbo básico, esse refinamento alcançou uma taxa de vitória de aproximadamente 70% em vários usuários.

Como usar

Passo ACE padrão (PEFT)

de acestep.pipeline importar ACEStepPipeline

pipe = ACEStepPipeline.from_pretrained(
    "ACE-Step/Ace-Step1.5",
    adaptador_name_or_path="artificialguybr/AceStep_Refine_Redmond",
    subpasta = "padrão"
)

UI confortável

Coloque o arquivo de comfyui/ em seu diretório ComfyUI models/loras/ e models/loras/padrão LoRA.

Configurações recomendadas

  • Modelo básico: ACE-Step/Ace-Step1.5 (acestep-v15-turbo)
  • Alerta LM: acestep-5Hz-lm-4B
  • Use instruções descritivas para melhor estabilidade vocal

Limitações conhecidas

  • Avisos esparsos: podem produzir um timbre vocal menos estável com descrições mínimas de avisos
  • Arranjos densos: arranjos muito complexos podem introduzir ruído de textura ou aspereza de alta frequência
  • Generalização de gênero: ajustado em um conjunto de dados de preferência específico; o desempenho pode variar entre os gêneros

Uso responsável

  • Não use para imitar ou se passar por artistas reais sem permissão
  • Respeite os direitos autorais, os direitos de voz e as regulamentações locais
  • Revise os resultados antes do lançamento público, especialmente em fluxos de trabalho comerciais

Licença

Licença MIT - consulte o cartão modelo Hugging Face para obter detalhes.

Erros e correções comuns

Erro | Causa | Correção | Fonte

|-------|-------|-----|--------

LoRA não carrega no ComfyUI | Caminho ou formato de arquivo incorreto | Use o comfyui/ exportação de arquivo único, coloque em models/loras/ | Cartão modelomodels/loras/ Instabilidade vocal | Prompt esparso/subespecificado | Use prompts descritivos com acestep-5Hz-lm-4B para composição | Cartão modelo Aspereza de alta frequência | Solicitações de arranjo muito denso | Simplifique a densidade do arranjo imediatamente | Cartão modelo

Perguntas frequentes

P: Qual modelo básico este LoRA exige? R: ACE-Step/Ace-Step1.5 (acestep-v15-turbo). Não funcionará com outras versões do ACE-Step.

P: Posso mesclar este LoRA no modelo básico? R: Sim, as ferramentas de mesclagem PEFT padrão podem mesclar os standard/ adaptador nos pesos do modelo base.

P: Este modelo é adequado para uso comercial? R: Sim, a licença do MIT permite o uso comercial. Revise as diretrizes de uso responsável em relação à personificação do artista e aos direitos de voz.

P: Qual é a diferença entre as pastas padrão e comfyui? R: standard/ é um diretório do adaptador PEFT para carregamento programático. comfyui/ é comfyui/Arquivo .safetensors para uso de arrastar e soltar do ComfyUI..safetensors`

Fontes