YuE2-3B: 오픈 음악 모델이 처음으로 Suno v5를 넘어섰다

음악 생성은 오래 소수 폐쇄형 서비스가 지배했고, 오픈 진영은 대체로 뒤쫓는 쪽이었다. 그 상황이 2026년 9월에 바뀌었다. MAP 팀이 YuE2-3B를 공개했다. 3B 음악 모델로, 팀은 WildSongBench에서 Suno v5를 앞선다고 말한다. 가중치가 공개됐고 지원은 ComfyUI master에 병합됐으며, 대부분의 음악 모델에 없는 것도 갖췄다. 편집 가능한 악보다.
헤드라인 숫자는 인용하기 쉽고 과대 해석하기도 쉽다. 한 벤치마크에서 폐쇄형 서비스를 이기는 것이 모든 스튜디오에서 오픈 모델이 더 낫다는 뜻은 아니다. YuE2-3B가 주목할 만한 것은 벤치마크의 대등함과, 오픈이고 악보를 다루는 모델만 할 수 있는 일의 결합이다.
파형이 아니라 악보
대부분의 텍스트-투-뮤직 시스템은 오디오만 준다. 코드가 잘못된 느낌이 들거나 멜로디가 마지막 여덟 마디에서 멈추면, 다시 생성하고 바랄 뿐이다. YuE2-3B는 멜로디와 코드 정보를 편집 가능한 악보로 유지한다. 이는 생성을 슬롯머신에서 편곡에 가까운 일로 바꾼다. 되는 부분은 남기고 안 되는 부분만 고칠 수 있다. 음악을 쓰는 사람이 실제로 일하는 방식이다.
이 구조는 모델을 다루기 쉽게도 한다. 형용사를 쌓아 템포가 맞기를 바라는 대신, 음악가가 쓰는 어휘로 곡을 묘사할 수 있다. 결과물은 나중에도 수정 가능하다. 이것이 초안과 테이크의 차이다.
{{INLINE1}}
아무도 받지 못한 인코더
한 가지 세부가 오픈 공개의 실제 생존 방식을 보여준다. YuE2-3B는 자신의 녹음을 모델의 의미 토큰으로 바꾸는 오디오 인코더 없이 출시됐다. 커뮤니티가 그것을 만들었다. YuE2-3B용 '실제 오디오 인코더'는 가진 소재를 모델이 이해하는 표현으로 바꾸게 해 주고, 개인 또는 허가된 오디오로 어댑터를 훈련하는 문을 연다.
섹션 프롬프트를 받는 악기 LoRA도 있다. 각 부분을 묘사해 곡을 빚을 수 있다. 둘 다 원래 릴리스 밖에서 왔다. 이것이 개방 가중치의 거래다. 만들 자유를 얻는 대신, 첫 버전에 빠진 부품을 누군가 채워 주기를 받아들인다.
라이선스가 진짜 한계
YuE2-3B는 CC-BY-NC-4.0으로 공개됐다. 제품을 생각하는 사람에게 비상업 조항이 가장 큰 제약이다. 연구, 실행, 수정은 가능하고 연구와 개인 작업에서 그 위에 세울 수 있다. 하지만 상업 조건을 정리하기 전에 유료 서비스에 넣을 수는 없다. 취미와 연구에는 활짝 열린 문이고, 구독 제품을 계획하는 스타트업에는 벽이다.
이것이 오픈 음악 분야에서 반복되는 모양이다. 가장 강한 가중치일수록 라이선스 조건이 붙기 쉽고, 완전히 관대한 선택지는 품질에서 뒤진다. 둘 다 필요한 팀은 보통 하이브리드로 간다. 탐색은 오픈으로, 출시하는 것은 라이선스 서비스로.
벤치마크가 증명하는 것과 못 하는 것
WildSongBench는 생성된 곡을 비교하고, 이기는 것은 확실한 성과다. 다만 그것은 하나의 렌즈일 뿐이다. 벤치마크는 측정할 수 있는 것을 보상한다. 보통 총체적 음악성과 짧은 구간의 일관성이다. 맥락에서 쓸 수 있게 하는 성질을 잡아내는 데는 약하다. 루프가 대사 아래에서 부딪히지 않고 깔리는지, 빌드가 편집이 필요한 지점에 오는지, 곡이 끝나는지 사라지는지.
벤치마크를 깎아내리는 말이 아니라 주장을 읽는 법이다. "WildSongBench에서 Suno v5를 앞선다"는 정의된 과제에서 경쟁력이 있다는 뜻이고, 모든 일에서 유료 서비스를 대체한다는 뜻도, 비상업 라이선스 아래 상업 출시 준비가 됐다는 뜻도 아니다. 둘을 분리하면 그림이 정직해진다.
오픈 음악이 여전히 지는 곳
폐쇄형 서비스는 과소평가되기 쉬운 영역에서 우위를 지킨다. 세련된 화면, 통합된 마스터링, 요청형 스템, 그리고 유료 고객이 지목할 수 있는 법적 입장. 완성된 트랙과 영수증이 필요한 사람에게 그 편의가 곧 제품이고, 모델은 절반에 불과하다. 개방 가중치는 엔진을 주고 나머지는 스스로 하게 한다.
지원 문제도 있다. 폐쇄형이 고장 나면 티켓을 연다. 오픈이 고장 나면 코드를 읽고 누군가 같은 벽에 부딪혔기를 바란다. 실제 오디오 인코더가 이 방식이 통한 좋은 예다. 릴리스의 빈틈을, 도구를 더 쓸모 있게 만들고 싶은 낯선 사람이 메웠다. 작동할 때는 인상적이고, 안 될 때는 답답하다.
오늘 어떻게 쓰나
솔로 프로듀서에게 합리적인 방식은 YuE2-3B를 스케치 악기로 다루는 것이다. 넓게 생성하고, 뭔가 있는 부분을 남기고, 마지막은 손으로 또는 유료 도구에서 조립한다. 라이선스가 그렇게 요구한다면 더욱 그렇다. 악보 편집이 이것을 가능하게 한다. 생성된 착상을 막다른 길이 아니라 프로젝트 파일로 바꾼다.
스튜디오는 비상업 조항 때문에 계산이 달라진다. 연구, 프로토타입, 내부 탐색은 열려 있다. 유료 고객에게 납품하는 것은 별도 합의가 필요하다. 이 분할은 오픈 분야에서 흔하고, 일찍 받아들인 팀은 나중의 놀라움을 피한다.
정직한 독해
YuE2-3B는 생성 음악을 둘러싼 윤리 문제를 해결하지 않으며, 비상업 라이선스는 훈련한 쪽이 자기 영역을 지키고 있음을 상기시킨다. 보여주는 것은 오픈 음악 생성이 시연 가능한 수준을 넘어 쓸 수 있는 수준에 도달했다는 점이다. 편집 가능한 악보는 시간이 갈수록 중요해질 세부이고, 통제가 생성기를 도구로 바꾼다. 남은 격차는 품질이 아니라 명확성이다. 어떤 자료가 훈련에 쓰였는지, 각 라이선스가 무엇을 허용하는지, 모델이 '누군가의 스타일'을 낼 수 있을 때 프로 음악가가 어떻게 보상받는지. 다음 릴리스가 답할 질문이다.
관련 글
Modal의 샌드박스: 에이전트에게 부숴도 되는 한 대를 주다
완전한 VM 샌드박스는 각 에이전트에게 버려도 되는 컴퓨터를 준다. 배관이며, 에이전트가 실권한을 맡을 수 있는지를 정한다.
Prism: 오픈 2K 오디오·비디오 모델과 그것이 원하는 80GB 카드
네이티브 2K 영상에 동기화된 오디오까지 만드는 오픈 모델은 확실한 진전이다. 누가 쓸 수 있는지를 정하는 것은 그것이 요구하는 하드웨어다.
에이전트가 스스로 미디어를 렌더링할 때: GitHub 트렌드의 세 도구
Hyperframes는 HTML을 영상으로, ArtCraft는 제작 엔진을 묶고, text-to-cad는 CAD를 에이전트에게 준다. 에이전트는 보이는 것을 만드는 법을 배우고 있다.
Gemini Live의 Guided Vision: 저시력 사용자에게 '보기'를 돌려주다
구글은 처음부터 시각장애와 저시력 사용자와 함께 실시간 시각 보조를 만들었다. 조용하지만 날카로운, 멀티모달 어시스턴트가 무엇을 위한 것인지에 대한 테스트다.