ComfyUI ACE-Step 네이티브 예제

​

ACE-Step ComfyUI 텍스트-to-오디오 생성 워크플로우 예시

​

1. 워크플로우 및 관련 모델 다운로드

​

2. 워크플로우 단계별 완료하기

1. Load Checkpoints 노드가 ace_step_v1_3.5b.safetensors 모델을 로드했는지 확인하세요.
2. (선택사항) EmptyAceStepLatentAudio 노드에서 생성할 음악의 길이를 설정할 수 있습니다.
3. (선택사항) LatentOperationTonemapReinhard 노드에서 multiplier를 조정해 보컬의 볼륨을 제어할 수 있습니다(숫자가 높을수록 보컬이 더 두드러집니다).
4. (선택사항) TextEncodeAceStepAudio의 tags 필드에 해당하는 음악 스타일 등을 입력하세요.
5. (선택사항) TextEncodeAceStepAudio의 lyrics 필드에 해당하는 가사를 입력하세요.
6. Run 버튼을 클릭하거나 단축키 Ctrl(cmd) + Enter를 사용해 오디오 생성을 실행하세요.
7. 워크플로우가 완료된 후, Save Audio 노드에서 생성된 오디오를 미리 들을 수 있습니다. 클릭해 재생하고 들어보세요. 또한 오디오는 ComfyUI/output/audio 폴더에 저장됩니다(저장 위치는 Save Audio 노드에 따라 결정됨).

​

ACE-Step ComfyUI 오디오-to-오디오 워크플로우

​

1. 워크플로우 파일 다운로드

​

2. 워크플로우 단계별 완료하기

1. Load Checkpoints 노드가 ace_step_v1_3.5b.safetensors 모델을 로드했는지 확인하세요.
2. 제공된 오디오 파일을 LoadAudio 노드에 업로드하세요.
3. (선택사항) TextEncodeAceStepAudio의 tags 및 lyrics 필드에 해당하는 음악 스타일과 가사를 입력하세요. 가사 제공은 오디오 편집에 매우 중요합니다.
4. (선택사항) Ksampler 노드의 denoise 파라미터를 수정해 샘플링 과정에서 추가되는 노이즈를 조정해 원본 오디오와의 유사성을 제어할 수 있습니다(값이 작을수록 원본 오디오와 더 유사해집니다; 1.00으로 설정하면 입력 오디오가 없는 것과 거의 동일합니다).
5. Run 버튼을 클릭하거나 단축키 Ctrl(cmd) + Enter를 사용해 오디오 생성을 실행하세요.
6. 워크플로우가 완료된 후, Save Audio 노드에서 생성된 오디오를 미리 들을 수 있습니다. 클릭해 재생하고 들어보세요. 또한 오디오는 ComfyUI/output/audio 폴더에 저장됩니다(저장 위치는 Save Audio 노드에 따라 결정됨).

​

3. 추가 워크플로우 참고사항

1. 예시 워크플로우에서는 TextEncodeAceStepAudio의 tags를 male voice에서 female voice로 변경해 여성 보컬을 생성할 수 있습니다.
2. TextEncodeAceStepAudio의 lyrics를 수정해 가사를 변경하고 생성된 오디오를 바꿀 수도 있습니다. 자세한 내용은 ACE-Step 프로젝트 페이지의 예시를 참조하세요.

​

ACE-Step 프롬프트 가이드

• tags: 주로 음악 스타일, 장면 등을 설명하는 데 사용됩니다. 다른 생성 작업에서 사용하는 프롬프트와 비슷하며, 주로 전체적인 스타일과 요구 사항을 영어 쉼표로 구분해 설명합니다.
• lyrics: 주로 가사를 설명하는 데 사용되며, [verse], [chorus], [bridge]와 같은 가사 구조 태그를 지원해 가사의 각 부분을 구분할 수 있습니다. 순수한 연주곡의 경우 악기 이름을 입력할 수도 있습니다.

​

Tags (프롬프트)

​

주류 음악 스타일

• electronic
• rock
• pop
• funk
• soul
• cyberpunk
• Acid jazz
• electro
• em (전자 음악)
• 부드러운 전자 드럼
• 멜로딕

​

장면 유형

• 파티용 배경음악
• 라디오 방송
• 운동 플레이리스트

​

악기 요소

• 색소폰
• 재즈
• 피아노, 바이올린

​

보컬 유형

• 여성 보컬
• 남성 보컬
• 클린 보컬

​

전문 용어

• 110 bpm (분당 박자 수 110)
• 빠른 템포
• 느린 템포
• 루프
• 필
• 어쿠스틱 기타
• 일렉트릭 베이스

​

Lyrics

​

가사 구조 태그

• [outro]
• [verse]
• [chorus]
• [bridge]

​

다국어 지원

• ACE-Step V1은 여러 언어를 지원합니다. 사용 시 ACE-Step는 각 언어를 영어 알파벳으로 변환한 뒤 음악을 생성합니다.
• ComfyUI에서는 모든 언어를 영어 알파벳으로 변환하는 기능을 완전히 구현하지 않았습니다. 현재는 일본어 히라가나 및 카타카나 문자만 구현되어 있습니다. 따라서 여러 언어를 사용해 음악을 생성하려면 먼저 해당 언어를 영어 알파벳으로 변환한 뒤, lyrics의 앞부분에 언어 코드 약자를 입력해야 합니다. 예를 들어 중국어 [zh], 한국어 [ko] 등이 있습니다.

[verse]

[zh]wo3zou3guo4shen1ye4de5jie1dao4
[zh]leng3feng1chui1luan4si1nian4de5piao4liang4wai4tao4
[zh]ni3de5wei1xiao4xiang4xing1guang1hen3xuan4yao4
[zh]zhao4liang4le5wo3gu1du2de5mei3fen1mei3miao3

[chorus]

[verse]​
[ko]hamkke si-kkeuleo-un sesang-ui sodong-eul pihae​
[ko]honja ogsang-eseo dalbich-ui eolyeompus-ileul balaboda​
[ko]niga salang-eun lideum-i ganghan eum-ag gatdago malhaess-eo​
[ko]han ta han tamada ma-eum-ui ondoga eolmana heojeonhanji ijge hae

[bridge]
[es]cantar mi anhelo por ti sin ocultar
[es]como poesía y pintura, lleno de anhelo indescifrable
[es]tu sombra es tan terca como el viento, inborrable
[es]persiguiéndote en vuelo, brilla como cruzar una mar de nubes

[chorus]
[fr]que tu sois le vent qui souffle sur ma main
[fr]un contact chaud comme la douce pluie printanière
[fr]que tu sois le vent qui s'entoure de mon corps
[fr]un amour profond qui ne s'éloignera jamais

• 영어
• 중국어: [zh]
• 러시아어: [ru]
• 스페인어: [es]
• 일본어: [ja]
• 독일어: [de]
• 프랑스어: [fr]
• 포르투갈어: [pt]
• 이탈리아어: [it]
• 한국어: [ko]

​

ACE-Step 관련 자료

• 프로젝트 페이지
• Hugging Face
• GitHub
• 훈련 스크립트