琴樂大模型是由騰訊琴實驗室和騰訊 ai Lab 聯合研發的 AI 音樂大模型，具備豐富的 AI 作曲和編曲能力。只需輸入中英文關鍵詞、描述性語句或音頻，琴樂大模型就可直接生成音樂。

琴樂大模型主要功能特點：

• 音樂生成：琴樂大模型能夠根據用戶提供的中英文關鍵詞、描述性語句或音頻輸入，智能生成音樂，實現音樂的自動創作。

• 樂譜生成：除了生成音頻，琴樂大模型還能生成詳細的樂譜，包含旋律、和弦、伴奏和打擊樂等多個軌道，為用戶提供了豐富的音樂結構。

• 自動編輯：模型支持對生成的樂譜進行一系列自動編輯操作，包括續寫樂譜、重新生成特定的音軌或小節、調整配器、修改樂器類型和節奏。

• 音頻文本對齊：通過對比學習技術，琴樂大模型構建了一個共享特征空間，將音頻標簽或文本描述與音頻本身進行對齊，為生成模型提供條件控制信號，增強了音樂生成的相關性和準確性。

• 樂譜/音頻表征提取：模型能夠將樂譜或音頻轉換成一系列離散的特征（token）序列，這些序列為大語言模型的預測提供了基礎。

• 大語言模型預測：使用decoder-only結構，琴樂大模型通過特征預測（next token prediction）訓練，預測出的序列可以轉換回樂譜或音頻，實現了從文本到音樂的轉換。

• 音頻恢復：通過流匹配和聲碼器技術，琴樂大模型能夠將預測出的音頻表征序列恢復成可聽音頻，增強了音頻的真實感和質量。

• 音樂理論遵循：在生成音樂的過程中，琴樂大模型遵循音樂理論，確保旋律、和弦、節拍等元素符合音樂邏輯和人類審美。

琴樂大模型應用領域

• 音樂創作：為專業音樂人提供高效的作曲和編曲工具，簡化創作過程中的繁瑣任務。
  

• 教育領域：幫助學生理解和學習音樂理論，通過自動生成的樂譜進行實踐練習。

• 娛樂產業：普通用戶也可以通過簡單操作體驗音樂創作的魅力，增加互動性和娛樂性。

騰訊音樂天琴實驗室面向QQ音樂、全民k歌、騰訊音樂人、酷我、酷狗等產品的多媒體與AI應用型技術研究與落地。負責的明星項目包括QQ音樂上的聽歌識曲、哼唱識別、翻唱識別、歌詞時間戳、臻品音質、DMEE、mv視頻剪輯、字幕識別、明星識別；全民K歌上的唱歌評分、智能修音、智能音效、歌聲合成；懶人暢聽上的AI朗讀、AI文稿；直播互動上的智能品鑒、高光識別、端云一體視頻質量提升。同時還在探索元宇宙中的虛擬人技術，以虛擬形象、虛擬舞蹈、歌唱表情生成、音樂燈光秀等為核心的小天小琴兄妹虛擬人即將面世，敬請期待。

目前，琴樂大模型相關技術已經上線騰訊音樂啟明星平臺，用戶可以免費注冊體驗。