用 Claude Code + ACE-Step 1.5 + ffmpeg 生成 AI 音樂!免費用開源模型製作 AI 配樂!

用 Claude Code + ACE-Step 1.5 + ffmpeg 生成 AI 音樂
用 Claude Code + ACE-Step 1.5 + ffmpeg 生成 AI 音樂

先前我寫過一篇文章叫「Suno 免費 AI 寫歌工具,超強線上音樂生成網站!超好聽曲風與流行歌曲」,不過很可惜,Suno 是要付費的,免費版的生成音樂只能自己聽聽,不能上傳到 Youtube 上面播放。

最近我找到了一款開源軟體叫 ACE-Step 1.5,基本上可以免費下載跟使用,而且生成的音樂很自然,聽不太出來是 AI 生成的,我自己對於用 ACE-Step 1.5 生成的音樂質量還是滿滿意的,而且 ACE-Step 1.5 可以搭配 Claude code 或是 ChatGPT 來生成音樂,我們可以直接請 Claude code 或是 ChatGPT 去使用電腦上安裝的 ACE-Step 1.5 來生成音樂,非常方便。

如果你還沒有使用過 ACE-Step 1.5 來生成音樂,可以試試看喔,本篇文章也會有完整教學。

Claude Code + ACE-Step 1.5 是什麼?

先分清楚這兩個工具各自負責什麼:

工具負責的工作需要注意
Claude Code理解需求、檢查環境、協助安裝及執行工具不是音樂生成模型,但是可以調用電腦上安裝的 ACE-Step 1.5。
ACE-Step 1.5根據文字、歌詞與設定生成音樂需要在電腦上自己安裝。

簡單說,你用中文交代要做什麼,Claude Code 把需求轉成工具可以執行的工作,再交給 ACE-Step 處理。Claude Code 本身具備讀檔、修改檔案與執行指令的能力,這也是它能協助架設及操作本機工具的原因。

可以製作哪些 AI 音樂?

ACE-Step 1.5 支援文字生成音樂,也能搭配歌詞製作有人聲的歌曲。官方模型另外提供風格轉換、音訊片段重繪等能力,不同模型的任務支援範圍並不完全相同。參考:官方模型介紹與能力表。

如果你是第一次使用,可以先從這些需求開始:

  • YouTube 教學影片配樂:節奏平穩、旋律不要搶走旁白。
  • Podcast 短配樂:做一小段開場或段落銜接音樂,再自行剪輯。
  • 閱讀、工作或放鬆音樂:描述樂器、情緒與節奏,生成不同版本試聽。
  • 自寫歌詞的歌曲 Demo:先準備歌詞與曲風,再嘗試人聲生成。

先用短版無人聲配樂確認環境正常,會比一開始就要求完整歌曲、精準咬字、指定編曲及無縫循環,更容易知道問題出在哪裡。。

ACE-Step 1.5 真的免費嗎?

ACE-Step 1.5 的程式與官方模型頁均標示 MIT 授權,可以下載到自己的電腦執行。參考:程式授權、官方模型頁。

不過除了 ACE-Step 1.5,可能來需要訂閱一款 AI 工具,像是 ChatGPT 或是 Claude ,讓 AI 工具去幫我們調用本機安裝的 ACE-Step 1.5 來生成音樂。

Claude Code + ACE-Step 1.5 音樂生成教學

步驟一、打開 Claude 應用程式切換到 Code 模式,並建立專案

▼由於我們要請 Claude 幫我們使用 ACE-Step 1.5 製作音樂,所以進入到 Claude 應用程式之後,要先切換到 Code 模式。

用 Claude Code + ACE-Step 1.5 + ffmpeg 生成 AI 音樂!免費用開源模型製作 AI 配樂!

▼一開始我們可以先建立一個專案,專門用來生成音樂。

用 Claude Code + ACE-Step 1.5 + ffmpeg 生成 AI 音樂!免費用開源模型製作 AI 配樂!

步驟二、請 Claude Code 安裝 ACE-Step 1.5 與 ffmpeg

▼建立好專案之後,我們可以在該專案下方新增一個聊天視窗,然後請 Claude 幫我們安裝 ACE-Step 1.5 與 ffmpeg。

▼例如你可以輸入以下提示詞:

請幫我安裝 ACE-Step 1.5 與 ffmpeg,如果有相關的套件也一併安裝。
用 Claude Code + ACE-Step 1.5 + ffmpeg 生成 AI 音樂!免費用開源模型製作 AI 配樂!

步驟三、給 Claude Code 歌詞與需求,調用 ACE-Step 1.5 生成音樂

▼安裝好 ACE-Step 1.5 與 ffmpeg,接下來我們就可以輸入提示詞請 Claude 幫我們生成音樂。

▼而提示詞可能可以包含歌詞、曲風、歌手聲音、氣氛、長度等等。以下表格提供參考:

必填

項目說明
歌詞不想要人聲也可以,跟 Claude 說「純音樂」就好。

建議提供(影響最大)

項目例子
曲風華語流行、Lo-fi、搖滾、民謠、電子、抒情、City Pop
歌手聲音女聲/男聲、清亮、溫柔、沙啞、有力
氣氛輕快、溫暖、感動、熱血、放鬆、神秘
長度30 秒、1 分鐘、2 分鐘(最長 10 分鐘)

選填(有特別想法再給)

項目例子
樂器木吉他、鋼琴、弦樂、合成器、爵士鼓
速度慢(70)、中等(100)、快(130 BPM),不懂 BPM 說「快慢」就好
用途YouTube 片頭、影片背景音樂、主題曲。背景音樂我會讓人聲不要太搶
版本數一次生成幾個版本讓你挑,預設 2 個
輸出格式MP3、WAV,或直接做成音樂律動影片

▼以下是我自己輸入的提示詞,提供參考:

請你用 ACE-Step 1.5  幫我製作音樂。

以下是歌詞:
[Intro]
(低聲)在這裡 光醒來

[Verse 1]
我學會了 把心跳放輕
學會在黑暗裡 不說想你
窗外的燈 一盞一盞地暗去
沒有人問 天亮還有多遠

[Pre-Chorus]
閉上眼睛 我看得見結局
每一條路 都有人倒在前面
明知道會痛 明知道會輸
還是 往那裡走去

[Chorus]
破曉 劃開這一場長夜
就算整個世界 都要我別出聲
你留下的那一盞燈 我會一直點著
一劫又一劫 我們還在

[Verse 2]
有些名字 只剩牆上的刻痕
有些背影 再也不會轉過身
我把害怕 一點一點握緊
握成 手裡的刀

[Bridge]
如果明天 碎成一千片
我就一片一片 撿起來拼回去
(低聲)每一道光 醒來以後 都不一樣

[Final Chorus]
破曉 劃開這一場長夜
就算整個世界 都要我別出聲
你留下的那一盞燈 我會一直點著
一劫又一劫 我們還在

破曉 握緊發抖的手
你倒下的地方 我替你站著
這一場劫 到我們為止

[Outro]
(低聲)在這裡 光醒來

======
曲風:好聽的華語流行音樂
聲音:女聲、清亮有力
樂器:鋼琴、吉他、和弦樂
長度:2分鐘
輸出格式:MP3
先做一個版本給我。
用 Claude Code + ACE-Step 1.5 + ffmpeg 生成 AI 音樂!免費用開源模型製作 AI 配樂!

▼Claude 會使用 ACE-Step 1.5 幫你生成音樂,需要花一些時間,生成好之後就可以直接點擊播放來聽聽看,也可以直接下載到自己電腦。

用 Claude Code + ACE-Step 1.5 + ffmpeg 生成 AI 音樂!免費用開源模型製作 AI 配樂!

下面我們就來聽聽看 Claude 搭配 ACE-Step 1.5 生成的 AI 音樂。

總結

我自己使用 Claude 搭配 ACE-Step 1.5 來製作音樂之後,發現生成的音樂非常自然,也可以生成好聽的音樂,而且完全免費,有需要的人可以試試看。

如果你喜歡學習各種科技軟體,想得知各種科技新知與資訊,歡迎追蹤科技兔的 FB 粉絲專頁、Instagram,以及Line 官方帳號。

加入好友