用 Claude Code + ACE-Step 1.5 + ffmpeg 生成 AI 音樂!免費用開源模型製作 AI 配樂!

先前我寫過一篇文章叫「Suno 免費 AI 寫歌工具,超強線上音樂生成網站!超好聽曲風與流行歌曲」,不過很可惜,Suno 是要付費的,免費版的生成音樂只能自己聽聽,不能上傳到 Youtube 上面播放。
最近我找到了一款開源軟體叫 ACE-Step 1.5,基本上可以免費下載跟使用,而且生成的音樂很自然,聽不太出來是 AI 生成的,我自己對於用 ACE-Step 1.5 生成的音樂質量還是滿滿意的,而且 ACE-Step 1.5 可以搭配 Claude code 或是 ChatGPT 來生成音樂,我們可以直接請 Claude code 或是 ChatGPT 去使用電腦上安裝的 ACE-Step 1.5 來生成音樂,非常方便。
如果你還沒有使用過 ACE-Step 1.5 來生成音樂,可以試試看喔,本篇文章也會有完整教學。
Claude Code + ACE-Step 1.5 是什麼?
先分清楚這兩個工具各自負責什麼:
| 工具 | 負責的工作 | 需要注意 |
|---|---|---|
| Claude Code | 理解需求、檢查環境、協助安裝及執行工具 | 不是音樂生成模型,但是可以調用電腦上安裝的 ACE-Step 1.5。 |
| ACE-Step 1.5 | 根據文字、歌詞與設定生成音樂 | 需要在電腦上自己安裝。 |
簡單說,你用中文交代要做什麼,Claude Code 把需求轉成工具可以執行的工作,再交給 ACE-Step 處理。Claude Code 本身具備讀檔、修改檔案與執行指令的能力,這也是它能協助架設及操作本機工具的原因。
可以製作哪些 AI 音樂?
ACE-Step 1.5 支援文字生成音樂,也能搭配歌詞製作有人聲的歌曲。官方模型另外提供風格轉換、音訊片段重繪等能力,不同模型的任務支援範圍並不完全相同。參考:官方模型介紹與能力表。
如果你是第一次使用,可以先從這些需求開始:
- YouTube 教學影片配樂:節奏平穩、旋律不要搶走旁白。
- Podcast 短配樂:做一小段開場或段落銜接音樂,再自行剪輯。
- 閱讀、工作或放鬆音樂:描述樂器、情緒與節奏,生成不同版本試聽。
- 自寫歌詞的歌曲 Demo:先準備歌詞與曲風,再嘗試人聲生成。
先用短版無人聲配樂確認環境正常,會比一開始就要求完整歌曲、精準咬字、指定編曲及無縫循環,更容易知道問題出在哪裡。。
ACE-Step 1.5 真的免費嗎?
ACE-Step 1.5 的程式與官方模型頁均標示 MIT 授權,可以下載到自己的電腦執行。參考:程式授權、官方模型頁。
不過除了 ACE-Step 1.5,可能來需要訂閱一款 AI 工具,像是 ChatGPT 或是 Claude ,讓 AI 工具去幫我們調用本機安裝的 ACE-Step 1.5 來生成音樂。
Claude Code + ACE-Step 1.5 音樂生成教學
步驟一、打開 Claude 應用程式切換到 Code 模式,並建立專案
▼由於我們要請 Claude 幫我們使用 ACE-Step 1.5 製作音樂,所以進入到 Claude 應用程式之後,要先切換到 Code 模式。

▼一開始我們可以先建立一個專案,專門用來生成音樂。

步驟二、請 Claude Code 安裝 ACE-Step 1.5 與 ffmpeg
▼建立好專案之後,我們可以在該專案下方新增一個聊天視窗,然後請 Claude 幫我們安裝 ACE-Step 1.5 與 ffmpeg。
▼例如你可以輸入以下提示詞:
請幫我安裝 ACE-Step 1.5 與 ffmpeg,如果有相關的套件也一併安裝。

步驟三、給 Claude Code 歌詞與需求,調用 ACE-Step 1.5 生成音樂
▼安裝好 ACE-Step 1.5 與 ffmpeg,接下來我們就可以輸入提示詞請 Claude 幫我們生成音樂。
▼而提示詞可能可以包含歌詞、曲風、歌手聲音、氣氛、長度等等。以下表格提供參考:
必填
| 項目 | 說明 |
|---|---|
| 歌詞 | 不想要人聲也可以,跟 Claude 說「純音樂」就好。 |
建議提供(影響最大)
| 項目 | 例子 |
|---|---|
| 曲風 | 華語流行、Lo-fi、搖滾、民謠、電子、抒情、City Pop |
| 歌手聲音 | 女聲/男聲、清亮、溫柔、沙啞、有力 |
| 氣氛 | 輕快、溫暖、感動、熱血、放鬆、神秘 |
| 長度 | 30 秒、1 分鐘、2 分鐘(最長 10 分鐘) |
選填(有特別想法再給)
| 項目 | 例子 |
|---|---|
| 樂器 | 木吉他、鋼琴、弦樂、合成器、爵士鼓 |
| 速度 | 慢(70)、中等(100)、快(130 BPM),不懂 BPM 說「快慢」就好 |
| 用途 | YouTube 片頭、影片背景音樂、主題曲。背景音樂我會讓人聲不要太搶 |
| 版本數 | 一次生成幾個版本讓你挑,預設 2 個 |
| 輸出格式 | MP3、WAV,或直接做成音樂律動影片 |
▼以下是我自己輸入的提示詞,提供參考:
請你用 ACE-Step 1.5 幫我製作音樂。
以下是歌詞:
[Intro]
(低聲)在這裡 光醒來
[Verse 1]
我學會了 把心跳放輕
學會在黑暗裡 不說想你
窗外的燈 一盞一盞地暗去
沒有人問 天亮還有多遠
[Pre-Chorus]
閉上眼睛 我看得見結局
每一條路 都有人倒在前面
明知道會痛 明知道會輸
還是 往那裡走去
[Chorus]
破曉 劃開這一場長夜
就算整個世界 都要我別出聲
你留下的那一盞燈 我會一直點著
一劫又一劫 我們還在
[Verse 2]
有些名字 只剩牆上的刻痕
有些背影 再也不會轉過身
我把害怕 一點一點握緊
握成 手裡的刀
[Bridge]
如果明天 碎成一千片
我就一片一片 撿起來拼回去
(低聲)每一道光 醒來以後 都不一樣
[Final Chorus]
破曉 劃開這一場長夜
就算整個世界 都要我別出聲
你留下的那一盞燈 我會一直點著
一劫又一劫 我們還在
破曉 握緊發抖的手
你倒下的地方 我替你站著
這一場劫 到我們為止
[Outro]
(低聲)在這裡 光醒來
======
曲風:好聽的華語流行音樂
聲音:女聲、清亮有力
樂器:鋼琴、吉他、和弦樂
長度:2分鐘
輸出格式:MP3
先做一個版本給我。

▼Claude 會使用 ACE-Step 1.5 幫你生成音樂,需要花一些時間,生成好之後就可以直接點擊播放來聽聽看,也可以直接下載到自己電腦。

下面我們就來聽聽看 Claude 搭配 ACE-Step 1.5 生成的 AI 音樂。
總結
我自己使用 Claude 搭配 ACE-Step 1.5 來製作音樂之後,發現生成的音樂非常自然,也可以生成好聽的音樂,而且完全免費,有需要的人可以試試看。


