Riffusion
Riffusion, Inc. (now part of Google) · 語音與語言
Riffusion 是一款 AI 音樂生成器，能把文字變成歌曲或純音樂。它源自一個開源專案，如今則活在 Google 的 Flow Music 工作室裡。
關於 Riffusion
What Is Riffusion
Riffusion 最初是一個把圖片生成技術套用到聲音上的實驗。創作者拿來專門畫圖的 Stable Diffusion 模型，訓練它改畫聲譜圖。聲譜圖就是聲音的圖像：時間由左往右推進，音高由下往上攀升。Riffusion 讀取這張圖，把看見的頻率播放出來，所以用文字描述曲風或情緒，就能變成一段真實的音訊。團隊表示，這個手法讓它成為最早能一邊打字一邊即時生成音樂的工具之一。
這個專案後來長成完整的 AI 歌曲生成器。後續版本跳脫短小的純音樂循環，轉而產出含有歌詞、人聲與可再混音分軌的完整曲目。原始的網頁應用程式是開源的，只要有一張 GPU，任何人都能自己架設。託管版則用便利換掉了這份掌控權。
到了 2026 年有個重要變化。Riffusion 不再以獨立產品的形式運作，官網現在導向 Google 的 Flow Music，一個以 Lyria 系列模型打造的 AI 音樂工作室。如果你搜尋 Riffusion，期待的是當年那個可互動玩聲譜圖的工具，最後會落在另一個東西上。好處是工作室更精緻了，代價是讓 Riffusion 與眾不同的生猛手動聲譜圖編輯消失了。
Getting Started
- 打開 Riffusion 官網，或它現在導向的 Flow Music 工作室，登入後開一個新專案。
- 用平實的字詞描述你要的聲音，例如讀書用的 lo-fi 節奏，或關於城市燈火的 synth pop 曲子。你也可以貼上自己寫的歌詞。
- 挑一種風格，決定要人聲或純樂器，再設定曲目長度。
- 生成曲目，在播放器裡試聽，調整描述文字後重新生成，直到符合你的想法。
- 下載喜歡的作品，或匯出後用在影片與剪輯專案裡。
產品資訊
快速了解 Riffusion 的定價、支援平台與效能。
適合對象
這項工具最適合的使用者、任務與情境。
使用者
- 業餘音樂玩家：Riffusion 讓你不用碰樂器、不開 DAW，也能勾勒旋律或節奏，前提是你願意用文字描述想要的聲音。
- 內容創作者：需要一段影片或播客配樂的人，可以快速生成，不必煩惱商用歌曲的授權問題。
- 想認識 AI 音訊的學生：開源版本加上它的聲譜圖做法，能實際看到擴散模型怎麼處理聲音，前提是你有夠力的機器可跑。
任務
- 把寫下的點子變成試聽音訊：輸入一種情緒或曲風，幾分鐘內就有片段可以試聽與調整。
- 製作純樂器襯底：選好風格、去掉人聲，就得到一段能墊在旁白底下的音樂。
- 用歌詞搭出歌曲雛形：貼上自己的段落，生成含人聲的完整編曲，之後再修改。
- 取樣特殊聲響：描述一種質地或樂器，把結果當成更大混音裡的起點。
情境
- 深夜在家隨興玩音樂：生成一段節奏、循環播放，直接在上面哼唱，不必預約錄音室。
- 社群影片趕件：一支 Reel 或 Short 的短配樂，從下描述到拿到檔案一次搞定。
- 認識聲譜圖與聲音的對應：一邊改文字，一邊看著聲音的圖像變化，把看到的和聽到的連起來。
主要功能
文字轉音樂生成
你寫下一段描述，Riffusion 就產出符合內容的音訊。它認得曲風、樂器、情緒與具名的風格，幾個字就能起步。這是整件工具的核心，也是多數人最先來試的部分。
以聲譜圖為基礎的合成
Riffusion 的運作方式是先生成聲譜圖，也就是聲音的視覺地圖，再把它轉成音訊。這正是它推出時和其他生成器拉開距離的地方，也讓成品帶有一種略帶紋理的電子感，用在循環與氛圍音樂上特別合適。
即時修改描述文字
原始版本讓你一邊打字、一邊聽成果隨文字長出來。你可以靠即時改字，把一段曲目從一種風格推向另一種。這份即時感，是它玩起來像遊戲、不像製作流程的原因。
風格之間的插值
Riffusion 能把兩段描述融成一首曲目，讓聲音從一頭走到另一頭。設定得當，你就能指定開頭與結尾的情緒，讓模型填滿中間的空間。想要手工很難做順的轉場，這是很簡單的辦法。
開源、可自行架設
Riffusion 應用程式是開源的，只要你有相容的 GPU，就能在自己機器上跑。這讓你掌握自己的描述文字與資料，也能自由改動程式碼。這也是技術型使用者至今仍會回頭找它的主因。
人聲與完整歌曲
新版早已遠遠超出短小的純音樂。你現在能生成含歌詞與人聲、橫跨多種曲風的歌曲，再把人聲與樂器的分軌抽出來。這讓成品能真正投入剪輯作業，而不只是當個新鮮玩意。
優缺點
優點
- 幾秒內把文字描述變成可播放的音訊，很適合快速試探想法。
- 聲譜圖檢視讓聲音與圖像的關聯看得見，這在音樂工具裡很少見。
- 開源程式碼讓你自行架設，也能一窺內部運作。
- 風格插值不必手動剪輯，就能做出平順的轉場。
- 新版能處理含人聲的完整歌曲，不只是循環片段。
缺點
- Riffusion 的獨立官網現在導向 Google Flow Music，原本的體驗已不像從前那樣存在。
- 成品的電子味相當明顯，用在原聲或古典風格上可能顯得突兀。
- 自行架設需要夠力的 GPU，這讓許多一般使用者無法採用。
- 人聲成果不穩定，一段曲目有時得跑好幾次，歌詞與旋律才對得上。
常見問題
Riffusion 是一款 AI 音樂生成器，能把文字變成音樂。你描述一種曲風、情緒或樂器，它就會產出一段音訊或一整首歌，取決於你用的是哪個版本。
相關內容
探索與 Riffusion 相關的工具、技能與文章。
Riffusion 替代方案
Foley
Hanamori Labs, LLC · 語音與語言 · 生產力 · AI 助理Foley 是一款語音待辦清單，把一句話變成歸檔好的任務，專案、日期與時間都先填好，接著再幫你依現有清單排出一整天的順序。
HireKey
HireKey · 語音與語言 · 生產力 · AI 學習HireKey 是由前科技業招募主管打造的 AI 求職副駕駛。它分析職缺契合度、客製化履歷、帶你練習面試，並把每份申請整理在同一處。
Fluence
Yay Software (Yannick Huchard) · 寫作 · 語音與語言 · 生產力Fluence 是 Android 上的文件閱讀器，能朗讀 PDF、EPUB、Word 檔與網路文章，逐句跟著語音標示，並在手機上直接回答你對內容的提問。