YuE2 Studio
GitHubEstrelas no GitHub Descarregar

Músicas inteiras com partitura editável, na sua própria placa gráfica

Um estúdio de secretária para o YuE2, o modelo aberto de canções que escreve uma partitura antes de cantar.

Windows 10/11 x64 e uma placa gráfica com 6 GB de VRAM: NVIDIA (GTX 900 ou mais recente) em CUDA; AMD e Intel em Vulkan são experimentais. Os modelos são descarregados de dentro do estúdio quando o decidir.

A escrever uma música: estilo, letra, um dos 110 exemplos carregado.

Músicas feitas com ele

Renderizadas numa instalação limpa com o conjunto recomendado, tal como o estúdio as guardou. Em inglês, espanhol, mandarim, japonês e russo.

Houseplant PartyFunk disco em inglês.
My Truck Talks BackCountry com pedal steel e rabeca.
La SiestaPop latino em espanhol.
外卖小哥City pop em mandarim.
月曜日のサムライRock japonês ao estilo de uma abertura de anime.
Дача, лето, комарыMúsica inteira a partir de um estilo e de uma letra.
Mais exemplos (6)
Дача, лето, комары — джазVersão: o SheetSage2 escreveu a melodia da música acima, o YuE2 cantou-a em jazz.
ПонедельникBlues rock, voz rouca.
Бабушка на дискотекеRenderizada de novo a partir dos códigos de áudio guardados, com 64 passos.
Борщ на орбитеSka punk a 150 BPM.
Кот-программистPop synthwave, a segunda tentativa.
Ночной вор БарсикO estilo e a letra foram escritos pelo assistente incorporado a partir de uma ideia de uma linha.

O que faz

Uma partitura editável

A partitura em notação musical e em texto ABC: melodia com acordes, só melodia, ou nenhuma.

A composição volta em notação ABC, gravada como partitura.

Versões (covers)

Modo de versão: escolha uma gravação e o SheetSage2 escreve a sua melodia.

O SheetSage2 escreve a melodia de uma gravação como partitura, e o YuE2 canta-a no seu estilo.

Qualquer faixa para MIDI

Qualquer faixa para MIDI: um piano roll de todos os instrumentos, tocado contra o original, com silenciar e isolar.

Uma música, uma pista ou uma versão processada torna-se MIDI com vários instrumentos - 34 grupos de instrumentos e bateria - com o MuScriptor na sua placa.

A sua própria LoRA

A sua própria LoRA treinada na placa: a perda e o desvio enquanto aprende, um checkpoint a cada 50 passos, um clique para a biblioteca.

Músicas de um artista ou de um estilo tornam-se uma LoRA na sua placa, com o treinador e a receita do HOT-Step.

Uma capa para cada faixa

Uma capa para cada faixa: fotografias do Commons para o estilo, padrões, geração ou um ficheiro seu.

Uma faixa sem capa recebe uma fotografia CC0 gratuita do Wikimedia Commons que combina com o seu estilo, um padrão num de 21 estilos, ou uma capa gerada através do OpenRouter.

Conduzido pelo seu agente (MCP)

Ligar um agente por MCP: o endereço e as linhas a colar no Claude Code ou em qualquer outro cliente.

Ligue o Claude Code, o Claude Desktop ou o Cursor e o agente faz tudo o que o estúdio faz: escreve e cria músicas, enche um conjunto de dados e treina, desenha capas, corta clipes no editor de vídeo, toca músicas - e vê a janela e carrega nos seus botões.

Análises da comunidade

Análises em vídeo e tutoriais feitos pela comunidade.

AI Controversy
ArtSonica
AI VINCI
Mamedov Info
ЮЛАВИ Studio
Wizzdome-Music
Mais (8)
Dream Travel
Luki AI Lab
Skillo Labs
아빠너구리 TV
Frihandhika
Run It Local
Franck D Digital AI
EZTV

Fez uma análise ou um tutorial? Ponha uma ligação para o projeto na descrição — as melhores aparecem aqui. Envie a sua através de Issues →

Capturas de ecrã

O próprio estúdio, na sua língua.

Quão rápido é

Quanto demora uma música de 3 minutos, por placa gráfica. São médias do que as instalações do YuE2 Studio comunicaram em 30 dias (versão 3.8, com o carregamento dos modelos incluído; as pessoas usam conjuntos de modelos diferentes, por isso o seu resultado pode ser outro).

A sua placa gráficaUma música de 3 minutosVelocidade
NVIDIA, 24 GB ou maiscerca de 1 minuto2,7× mais rápido do que o tempo real
NVIDIA, 16 GBcerca de 2 minutos1,6×
NVIDIA, 12 GBcerca de 2 minutos1,4×
NVIDIA, 8 GB ou menoscerca de 5 minutos0,6×
AMD, 16 GB ou mais (Vulkan)3–4 minutos0,9×
Intel Arc, 12 GB (Vulkan)cerca de 7 minutos0,4×
Apple silicon, 24 GB ou maiscerca de 8 minutos0,4×
Apple silicon, 16 GBcerca de 15 minutos0,2×
AMD, 8 GB ou menos (Vulkan)cerca de uma hora0,05×
Sem placa gráfica (processador)cerca de 2,5 horas0,02×

Na nossa máquina (RTX 4090, Ryzen 9 9950X3D, Windows 11, conjunto Q8_0): uma música de 1 minuto em 20 s, uma de 4 minutos em 54 s, uma de 10 minutos em cerca de 3 minutos; a placa ocupa 5–8 GB enquanto trabalha.

Como começar

  1. 1InstalarCorrer o instalador, ou descompactar o arquivo portátil em qualquer sítio.
  2. 2Escolher um conjuntoO primeiro ecrã pré-seleciona o que a sua placa consegue correr; só descarrega o que falta.
  3. 3EscreverUm estilo e uma letra, ou carregar um exemplo; um instrumental é um só interruptor.
  4. 4CriarO motor arranca sozinho e a música chega à biblioteca com a sua partitura.

Perguntas

De que placa gráfica preciso?

Windows 10/11 x64 e uma placa gráfica com 6 GB de VRAM: NVIDIA (GTX 900 ou mais recente) em CUDA; AMD e Intel em Vulkan são experimentais. Os modelos são descarregados de dentro do estúdio quando o decidir.

Um conjunto que funciona é o modelo principal YuE2-3B e o VAE; o SheetSage2 é opcional e só é preciso para versões.

A sua placaConjuntoTransferência
12 GB+Nativo completo — BF16, pesos originais9.7 GB
8 GB+Qualidade — Q8_0, quase sem perdas4.9 GB
7 GB+Equilibrado — Q6_K4.0 GB
5.5 GB+Leve — Q5_K_M3.6 GB

Os tamanhos incluem o SheetSage2. O estúdio pré-seleciona o conjunto que a sua placa consegue correr, mas a transferência é sempre decisão sua. Cada ficheiro é verificado por SHA-256 contra uma revisão fixa do Hugging Face, e uma transferência interrompida é retomada.

É gratuito?

Sim. O estúdio é gratuito e de código aberto, e os modelos descarregam-se gratuitamente de dentro dele.

Funciona offline? A minha música é enviada para algum lado?

A sua música é sua, e fica no seu disco.

  • Sem conta — Não há nada em que se registar.
  • Sem telemetria — O estúdio não comunica o que gera.
  • A nuvem é opcional — Nada sai da máquina até acrescentar uma chave, e depois só para essa função.
Posso usar as músicas que faço?

O estúdio e o yue2.cpp são MIT. Os pesos do YuE2-3B e do YuE2 VAE são CC BY-NC 4.0 com uma permissão para criadores individuais: músicos e criadores que trabalham por conta própria podem vender e monetizar as músicas que fazem; as empresas precisam de uma licença dos autores. O SheetSage2, usado nas versões, é CC BY-NC 4.0.

Posso treiná-lo no meu próprio estilo?

Músicas de um artista ou de um estilo tornam-se uma LoRA na sua placa, com o treinador e a receita do HOT-Step. Todas as definições são editáveis, e os conjuntos de dados passam entre este estúdio e o MiniMax Music3 Studio.

Um agente de IA pode usá-lo?

Ligue o Claude Code, o Claude Desktop ou o Cursor e o agente faz tudo o que o estúdio faz: escreve e cria músicas, enche um conjunto de dados e treina, desenha capas, corta clipes no editor de vídeo, toca músicas - e vê a janela e carrega nos seus botões. As regras de escrita do modelo vêm com ele, por isso o agente escreve os estilos e as letras sozinho. Escolha-o como assistente de escrita e ele escreve em vez do modelo local.

O que vem na transferência?

Local por defeito. Uma chave de nuvem é acrescentada por si, para a função que escolher.

ParteCorre emTamanho
Motor YuE2 (yue2.cpp)A sua placa: CUDA, Vulkan ou o processadorincluído
Conjunto de modelos YuE2A sua placa3,6–9,7 GB
NVIDIA cuBLASSó placas NVIDIA391 MB, uma vez
Tempos do karaoke — Parakeet ou WhisperA sua máquinaopcional
Separação de pistas — HT-DemucsA sua placa ou o processadoropcional
Assistente de escritaGemma local ou OpenRouteropcional
Treinador de LoRA — HOT-Step ace-trainNVIDIA RTX 30 ou mais recente, 11 GB de VRAM8 GB, opcional
Descrever músicas de ouvido — MOSS-Music-8Bcerca de 12 GB de VRAM10 GB, opcional
Anfitrião VST3 — HOT-StepA sua máquina, num processo próprioincluído
Áudio para MIDI — MuScriptor (HOT-Step ace-midi)NVIDIA GTX 16 / RTX 20 ou mais recente0,5–5,6 GB, opcional
Como é feito?

O serviço é compilado dentro do executável de secretária e supervisiona o motor em C++. As músicas terminadas são importadas pelo próprio serviço, por isso um resultado sobrevive a um recarregamento ou a uma janela fechada.

React UI ─┐
          ├─ YuE2-Studio.exe   (Tauri window + Rust/Axum service)
Rust axum ┘        │
                   └─ yue2.cpp `yue-server`   (C++/CUDA, GGUF)

Quem fez isto

Nerual Dreming — artista, fundador do ArtGeneration.me e da comunidade Neuro-Cartel, autor do ACE-Step Studio e do MiniMax Music3 Studio, de onde este estúdio nasceu.