오픈소스 AI 작곡 툴 'Tonefold' 공개…모든 음표 피아노 롤에서 직접 수정

Tonefold는 텍스트 프롬프트를 바탕으로 음표를 하나씩 편집할 수 있는 멀티트랙 악보를 생성해 주는 무료 오픈소스 데스크톱 작곡 앱이다. 평평한 오디오 파일 하나만 덩그라니 내놓는 기존 생성형 AI 음악 도구들과 달리, 모든 음표를 피아노 롤 위에 직접 배치해 사용자가 DAW처럼 세부 사항을 다듬을 수 있도록 설계됐다.

구조는 단순하면서도 실용적이다. AI에게 파형을 직접 계산하게 하는 대신 음악 이론적 구성을 맡긴다. 원하는 분위기나 곡의 흐름을 텍스트로 설명하면 코드, 멜로디, 베이스, 드럼은 물론 패드, 아르페지오, 대선율, 화음 등 총 11가지 레이어를 자동으로 작곡해 준다. 각 트랙에는 벨로시티 조절 레인과 전용 드럼 레인이 갖춰져 있다.

무엇을 할 수 있는가

Tonefold의 가장 큰 장점은 제어권이 온전히 사용자에게 있다는 점이다. 생성된 베이스 라인이 마음에 들지 않으면 마음에 드는 코드 진행을 그대로 잠근 채 베이스 트랙만 다시 쓰도록 요청할 수 있다. 이미 생성되어 확정된 파트들은 다음 트랙을 생성할 때 참고 자료로 반영되어 곡 전체의 음악적 일관성을 유지한다.

내부에는 GeneralUser GS 기반의 General MIDI 신디사이저가 기본 내장되어 있어 가상 악기나 복잡한 시퀀서를 따로 켜지 않아도 즉시 재생해 들을 수 있다. 완성된 결과물은 표준 MIDI 파일이나 스테레오 WAV 믹스, 혹은 트랙별 분리 음원인 스템 WAV 파일로 손쉽게 내보낼 수 있다.

독특한 프로듀서 모드도 지원한다. AI 에이전트가 조성, 템포, 곡의 형식과 함께 어떤 트랙의 어느 마디를 손댈지 계획서를 먼저 제시하며, 사용자가 화면에서 승인 버튼을 누르기 전까지는 피아노 롤에 단 하나의 음표도 마음대로 적지 않는다.

설치 및 실행 방법

앱 본체와 오디오 엔진은 Rust로 제작되어 가볍고 빠르게 구동되며, 생성, 재생, 편집, 내보내기 등 주요 작업이 로컬 컴퓨터에서 처리된다. 작곡 지시를 내리는 챗 컴포넌트는 Node.js 기반 사이드카로 실행되며 Claude Code 로그인이나 로컬 Ollama 모델과 연결할 수 있다.

Ollama를 사용할 경우 외부 인터넷 연결 없이 완전한 오프라인 환경에서 비용 없이 무료로 음악을 만들 수 있다. 기존 DAW 환경에서 작업하고 싶은 사용자를 위해 FL Studio에서 테스트된 CLAP 및 VST3 플러그인도 함께 제공된다.

라이선스는 GPL-3.0 오픈소스이며, 소프트웨어 코드가 아닌 사용자가 만든 음악의 저작권은 전적으로 사용자에게 있다. macOS 11 이상(애플 실리콘 및 인텔 공용)과 Windows 10/11을 지원한다. 다만 macOS 빌드는 아직 애플 공증을 받지 않아 처음 실행할 때 시스템 설정의 개인정보 보호 및 보안에서 수동으로 열기를 승인해야 한다.

왜 중요한가

기존의 생성형 AI 음악 모델들은 완성된 오디오 통파일을 뱉어내는 블랙박스 형태가 대부분이었다. 듣기에는 그럴듯해도 음표 하나, 악기 밸런스 하나를 수정할 수 없어 마음에 들 때까지 뽑기 하듯 다시 돌려야만 했다. Tonefold는 AI를 미디 시퀀서의 어시스턴트로 배치해 이 문제를 똑똑하게 풀어냈다.

우리는 이러한 접근 방식이 실제 음악 작업을 하는 사람들에게 훨씬 실용적이라고 본다. 창작자의 통제권을 빼앗지 않고 아이디어를 빠르게 스케치할 수 있는 미디 파트너 역할을 해주기 때문이다. 곡 작업 중 영감이 막힌 프로듀서나 게임 및 영상 배경음악 스케치가 필요한 1인 개발자라면 지금 당장 설치해 볼 만한 가치가 있다.