프로젝트

Redrob Tune

60초 오디오 ~14s Fast · ~23s Pro

우리 GPU에서 진행한 7월 28일 Fast/Pro 선호도 비교 실험의 관측 wall time입니다(순차 complete, seed 42). Fast는 turbo DiT 8 step, Pro는 SFT DiT 50 step + APG를 씁니다. 아래 샘플은 그 런의 승자와 이전 비교 실험 트랙을 포함합니다.

요약

ComfyUI 위에서 ACE-Step 1.5로 음악을 생성합니다(Tune Fast / Tune Pro). 60초 곡 기준 Fast는 약 14초, Pro는 약 23초입니다(2025년 7월 28일 비교 실험 기준). Tune은 따로 배포하지 않고, Redrob Studio 안 Music 도구로만 공개합니다.

담당

Fast/Pro 그래프(APG, 참조 오디오 제거, step 수)와 선호도 비교 실험을 담당했습니다. 가사 안전 검사는 Studio의 프롬프트 검사에 맡겼습니다.

목적

같은 날 여러 프리셋을 비교 실험할 수 있을 만큼 빠르게, 실제로 쓸 만한 길이의 오디오를 만듭니다. 「SFW suite」가 안전 스토리인 척하지 않으면서 유해 가사·프롬프트를 제품 경로 밖으로 걸러냅니다.

아키텍처

생성은 ComfyUI 위에서 ACE-Step 1.5 가중치로 동작합니다. 그래프는 DiT, 이중 ACE 텍스트 인코더, 오디오 VAE를 로드합니다. 스타일 캡션, 가사, BPM, 키, 언어, 길이(duration) 정보가 ACE 텍스트 인코더로 입력됩니다. 빈 latent 오디오 버퍼를 AuraFlow 스케줄링으로 샘플링하고, VAE로 디코드한 뒤 MP3로 저장합니다. Studio는 클라이언트 역할을 하며, 선호도 평점은 평가(eval) 하네스에 기록됩니다.

두 프리셋이 같은 그래프를 공유합니다. Fast는 반복 작업용입니다. Pro는 Adaptive Projected Guidance를 켜는데, 이 계열 모델에서는 KSampler 경로의 일반 DiT CFG를 신뢰하기 어렵기 때문입니다. Reference audio는 제거했습니다. 가사 준수도를 흐리고 latent 공간을 손상시켰기 때문에, 텍스트와 가사만 컨디셔닝 신호로 남겼습니다.

Tune Fast
8 steps · CFG ≈ 1 · no APGacestep_v1.5_xl_turbo_bf16
Tune Pro
50 steps · CFG 1.05 · APGacestep_v1.5_xl_sft_bf16
Graph
DiT + DualCLIP + audio VAE → MP3AuraFlow sampling; SaveAudioMP3

생성 시간

Tune에서 중요한 주장은 외부 클라우드 음악 API 대비 선호도 p-value가 아니라, 쓸 만한 트랙을 만드는 데 걸리는 실제 소요 시간(wall-clock time)입니다.

7월 28일 Fast/Pro 선호도 비교 실험(순차 작업, seed 42, 60초 타깃 기준)에서 연속된 완료 사이의 파일 타임스탬프 간격은 Fast 약 14초, Pro 약 23초였습니다. 이는 우리 GPU에서 관측한 스위트 실행 시간(wall time)이며, 콜드 스타트를 제외한 정식 지연 시간 연구는 아닙니다.

그것이 성과입니다. 프리셋에 따라 약 1분 분량의 음악을 15~25초 안에 생성합니다. 11개 프롬프트로 구성된 Fast/Pro 매트릭스를 몇 분 만에 돌리고 같은 날 승자를 가릴 수 있을 만큼 빠릅니다.

콘텐츠 안전

이 스위트를 「SFW」라고 부르는 것은 틀린 프레임입니다. 일반적인 음악 생성은 기본적으로 이미 비(非)포르노입니다. 실제로 중요한 제품 리스크는 스타일 캡션과 가사에 담긴 혐오 발언, 인종주의, 성차별입니다. 이에 대한 정책은 Studio의 LLM 프롬프트 게이트에 있으며, 선호도 비교 실험은 Fast와 Pro의 품질을 측정할 뿐 모호한 safe-for-work 체크리스트 통과 여부를 평가하는 것이 아닙니다.

무엇이 이겼나

가사 명료도, 스타일 일치도, 청취 만족도에 대한 선호도를 기준으로 삼았습니다. 이전 비교 실험 승자(neo-soul, Korean ballad, trap, indie pop, Korean trot, hyperpop, Korean boom bap)는 아래에 그대로 유지합니다. 7월 28일 실행에서 일곱 개를 추가했습니다. Fast 네 개(Hindi Bollywood, Atlanta trap, NYC boom bap, Chicago drill), Pro 세 개(US chart pop, US synth-pop, US pop-rock)입니다. 이후 실행에서는 Korean ballad, neo-soul, lo-fi를 평가하지 않았습니다.

결정

  • 깨진 DiT CFG를 Pro에서 APG로 교체

    이 ACE Step 계열에서는 KSampler 경로의 평범한 classifier-free guidance를 신뢰하기 어려웠습니다. Pro는 SFT 체크포인트에 Adaptive Projected Guidance(CFG 1.05 + APG)를 쓰고, Fast는 APG 없이 turbo 가중치에서 CFG ≈ 1을 유지합니다.

  • 한 체크포인트가 아니라 한 그래프에서 Fast/Pro 분리

    8-step turbo와 50-step SFT는 같은 Comfy 그래프와 프롬프트 계약을 공유합니다. 반복 속도와 완성도 차이는 서로 다른 제품이 아니라 같은 시스템의 다른 운영점입니다.

  • 생성 경로에서 reference audio 제거

    Ref-audio 팀브레 컨디셔닝이 가사 준수를 방해하고 latent 공간을 흐리게 만들었습니다. 텍스트·가사가 유일한 컨디셔닝 신호가 되도록 이를 제거했고, 덕분에 Fast/Pro 비교 실험이 같은 프롬프트 계약을 비교할 수 있게 됐습니다.

  • 안전을 SFW 라벨이 아니라 혐오·차별 정책으로

    평범한 음악 프롬프트는 기본적으로 비포르노입니다. 실제 제품 리스크는 가사·스타일 텍스트에 담긴 혐오 발언, 인종주의, 성차별입니다. Studio의 LLM 프롬프트 게이트가 실질적인 통제 장치이며, 브랜드용 「SFW bake-off」 표현이 그 정책을 대체하지는 않습니다.

과제

  • 아직 정직한 상용 선호도 연구 없음

    외부 클라우드 음악 API 대비 승률 같은 지표는 아직 만들지 않았습니다. 지금 측정 가능한 주장은 wall-clock 생성 속도와 이 페이지의 비교 실험 승자뿐입니다.

  • 단독 배포는 없음

    Tune은 Studio 안 Music으로만 돌고, 별도 레포나 체크포인트로 공개하지 않았습니다. 쓰려면 Studio를 클론하고 GPU 호스트를 붙여야 합니다.

성과

  • 당일 Fast/Pro 매트릭스

    60초 트랙 기준 14~23초라는 속도 덕분에 11-프롬프트 매트릭스를 현실적으로 돌릴 수 있었고, 밤새 잡을 돌리지 않고도 승자를 가릴 수 있었습니다.

결과물

  • Audio

    Korean boom bap · Redrob Tune Fast

  • Audio

    Neo-soul night · Redrob Tune Pro

  • Audio

    Korean ballad · Redrob Tune Pro

  • Audio

    Trap rap · Redrob Tune Pro

  • Audio

    Indie pop · Redrob Tune Pro

  • Audio

    Korean trot · Redrob Tune Pro

  • Audio

    Hyperpop · Redrob Tune Pro

  • Audio

    Hindi Bollywood · Redrob Tune Fast

  • Audio

    Atlanta trap · Redrob Tune Fast

  • Audio

    NYC boom bap · Redrob Tune Fast

  • Audio

    Chicago drill · Redrob Tune Fast

  • Audio

    US chart pop · Redrob Tune Pro

  • Audio

    US synth-pop · Redrob Tune Pro

  • Audio

    US pop-rock · Redrob Tune Pro

시스템

  • Redrob Tune

    ~14-23s

    60초 트랙당

    ComfyUI 위에서 ACE Step 1.5 모델로 음악을 생성합니다. 60초 트랙 기준으로 Tune Fast는 약 14초, Tune Pro는 약 23초가 걸리며, Pro에는 APG를 적용하고 참조 오디오(ref audio)는 제거합니다. 혐오·인종주의·차별 표현을 걸러내는 LLM 프롬프트 정책을 적용하며, 선호도(preference) 테스트에서의 우승 모델 정보는 아래에 표시됩니다.