Gemini音乐模型lyria 3初试

Lyria 3 是 Google 的音乐生成模型系列，可通过 Gemini API 使用。借助 Lyria 3，您可以根据文本提示或图片生成高质量的 48kHz 立体声音频。这些模型可提供结构连贯的音频，包括人声、定时歌词和完整的乐器编排。

https://api.oaibest.com 已上架lyria 3。

Lyria 3 系列包含两个模型：

型号 模型 ID 适用场景 时长 输出
Lyria 3 Clip lyria-3-clip-preview 短片段、循环、预览 30 秒 MP3
Lyria 3 Pro lyria-3-pro-preview 包含主歌、副歌、过渡段的完整歌曲 几分钟（可通过提示控制） MP3、WAV

这两个模型都可以使用标准 generateContent 方法和新的 Interactions API，支持多模态 输入（文本和图片），并生成 48kHz 高保真立体声 音频。

官方文档

curl --request POST \
  --url https://api.oaibest.com/v1beta/models/lyria-3-pro-preview:generateContent \
  --header 'Content-Type: application/json' \
  --header 'x-goog-api-key: sk-' \
  --data '{
    "contents": [{
      "parts": [
        {"text": "写一首忧伤情歌，歌词及结构如下:[主歌] 哪裡有彩虹 告訴我 能不能把我的願望還給我？ 為什麼天這麼安靜？ 所有的雲都跑到我這裡 有沒有口罩一個給我？ 釋懷說了太多就成真不了 也許時間是一種解藥 也是我現在正服下的毒藥  [導歌] 看不見你的笑 我怎麼睡得著？ 你的聲音這麼近我卻抱不到 沒有地球 太陽還是會繞 沒有理由 我也能自己走  [副歌] 你要離開 我知道很簡單 你說依賴是我們的阻礙 就算放開 但能不能別沒收我的愛？ 當作我最後才明白  [主歌] 有沒有口罩一個給我？ 釋懷說了太多就成真不了 也許時間是一種解藥 也是我現在正服下的毒藥  [導歌] 看不見你的笑 我怎麼睡得著？(睡得著) 你的聲音這麼近我卻抱不到 (抱不到) 沒有地球 太陽還是會繞 (還是會繞) 沒有理由 我也能自己走 (能自己走)  [副歌] 你要離開 我知道很簡單 (知道很簡單) 你說依賴是我們的阻礙 (我們的阻礙) 就算放開 但能不能別沒收我的愛？ 當作我最後才明白  [橋段] 看不見你的笑 我怎麼睡得著？ 你的聲音這麼近我卻抱不到 沒有地球 太陽還是會繞 會繞 沒有理由 我也能自己走掉 釋懷說了太多就成真不了 也許時間是一種解藥 解藥 也是我現在正服下的毒藥  [副歌] 你要離開 我知道很簡單 (知道很簡單) 你說依賴是我們的阻礙 (我們的阻礙) 就算放開 但能不能別沒收我的愛？ 當作我最後才明白"}
      ]
    }],
    "generationConfig": {
      "responseModalities": ["AUDIO", "TEXT"]
    }
  }'| jq -r '.candidates[0].content.parts[] | select(.inlineData) | .inlineData.data' | base64 -d > rainbow.mp3

带版权保护，尝试让他模仿周杰伦风格生成歌曲被拒绝了🤣

📣 AI新闻频道

Google AI for Developers

Generate music with Lyria 3  |  Gemini API  |  Google AI for Developers

Generate music with the Gemini API using Lyria 3 Clip and Lyria 3 Pro