ComfyUI
O comfyui-sync-lipsync-node é um nó personalizado para ComfyUI que gera videos sincronizados com os lábios perfeitamente dentro de seu fluxo de trabalho, tornando a sincronização de áudio e video simples e eficiente.
Clonar e configurar ComfyUI
Primeiro, clone e configure o repositório ComfyUI. Escolha um dos seguintes métodos:
Usando Comfy-CLI (recomendado)
Instale e use o Comfy-CLI para uma configuração guiada e confiável. Instruções completas: https://github.com/Comfy-Org/comfy-cli
Clone direto (manual)
Instale o nó Lipsync Sync Labs
Existem 3 maneiras de configurar o nó lipsync:
<AccordionGroup>
<Accordion title=“Método A: usando a instalação do Comfy Node (recomendado)”> ```bash
Run this inside the custom_nodes folder
comfy node install comfyui-sync-lipsync-node
Um link aparecerá no terminal - abra-o em seu navegador para acessar a GUI do ComfyUI.
Configurar o fluxo de trabalho
Escolha um dos seguintes métodos para configurar seu fluxo de trabalho ComfyUI: <AccordionGroup> <Accordion title=“Conexão manual de nó”> Configure o fluxo de trabalho conectando manualmente os nós na interface ComfyUI:
- Localize os nós Sync Labs: Na barra lateral esquerda, vá para a guia Nós e procure por Sync Labs. Você encontrará estes nós exatos: - sync.so lipsync - entrada de video: Para configuração de entrada de video - sync.so lipsync - entrada de áudio/tts: Para configuração de entrada de áudio ou texto para fala - sync.so lipsync - chave api: Para configuração de chave Sync Labs API - sync.so lipsync - generate: Para processar a geração de lip sync - sync.so lipsync - saída: Para lidar com a saída final
- Conecte os nós: Conecte os três primeiros nós ao nó gerador como entradas e, em seguida, conecte-se ao nó de saída: - Conecte entrada de video para gerar - Conecte entrada de áudio/tts para gerar - Conecte chave de API para gerar - Conecte gerar a saída</Accordion>
<Accordion title=“Carregamento direto YAML”>
- Baixe o fluxo de trabalho JSON neste link
- Arraste e solte o arquivo JSON na tela ComfyUI</Accordion> </AccordionGroup> Configurar entradas: - Video e Áudio: Você pode fornecer um URL ou um caminho local como entrada. Para arquivos locais, eles devem estar no repositório ComfyUI que você está usando. - Carregando arquivos locais: se você deseja carregar um video ou áudio do armazenamento local, conecte os nós de áudio/video de entrada aos nós LoadVideo/Audio. - API key: Insira sua chave Sync Labs API no nó API key. Você pode obter sua API key na página Chaves API.
Gerar saída
Clique no botão Executar para iniciar o processo de geração de lip sync. O sistema processará suas entradas de video e áudio para criar uma saída sincronizada.
Manuseio de saída: - O video sincronizado com os lábios será salvo automaticamente junto com o job_id em um arquivo JSON para sua referência. - Salvamento manual: O video também pode ser salvo manualmente especificando um caminho desejado e um nome de video no nó de saída. - Download da UI: Você pode baixar o video gerado diretamente da UI clicando nos 3 pontos do video gerado e depois clicando em download.
Monitoramento de erros e rastreamento de trabalhos: - Quaisquer erros aparecerão no terminal onde o ComfyUI está sendo executado. - Para cada geração, o job_id e o status serão salvos automaticamente no /path/to/ComfyUI/output/ como um arquivo JSON. - Isso permite que você acompanhe o progresso e o status de suas gerações de lip sync.
Características - Integração perfeita: funciona diretamente na interface baseada em nó do ComfyUI
Entrada flexível: suporta URL e caminhos de arquivo locais para video e áudio **Fluxo de trabalho de cinco nós **: nós separados para entrada de video, entrada de áudio, API key, processo de geração e saída para separação clara do fluxo de trabalho - Informações interativas do nó: passe o mouse sobre os nós para obter informações adicionais sobre sua funcionalidade - Várias opções de saída: salvamento automático, especificação de caminho manual e download direto da interface do usuário - Monitoramento abrangente: exibição de erros em tempo real no terminal e rastreamento automático de trabalhos com arquivos de status - Suporte a arquivos locais: Fácil integração com nós LoadVideo/Audio para processamento de arquivos locais
Requisitos - Instalação ComfyUI - Ambiente virtual Python - Chave Sync Labs API - Arquivos de video e áudio (URL ou caminhos locais)
Solução de problemas
Problemas de instalação - Dependências: certifique-se de que todas as dependências estejam instaladas corretamente usando o arquivo requisitos.txt - Erro de segurança do gerenciador ComfyUI: se você encontrar o erro “Esta ação não é permitida com esta configuração de nível de segurança” ao usar “Instalar via Git URL”, siga estas etapas:
Mensagem de erro: ``` ERROR: To use this feature, you must either set ‘—listen’ to a local IP and set the security level to ‘normal-’ or lower, or set the security level to ‘middle’ or ‘weak’. Please contact the administrator. Reference: https://github.com/ltdrdata/ComfyUI-Manager#security-

