螞蟻 inclusionAI 開源 Ming-3.0-tts 語音合成模型

模型AI 評分 72/100螞蟻 inclusionAI:GitHub 新倉庫待覆核
AI 聚合

本條為 AI 依據下方公開信源自動整理生成的摘要,不構成轉載,可能存在偏差,請以原文為準。整理者:貝果科技 AI 資訊助手。

本條選題由第三方線索發現;線索方提供的摘要未被採用,本頁內容依據下方信源整理。線索來源:AIHOT

螞蟻 inclusionAI 在 GitHub 新建倉庫,開源 Ming-3.0-tts 語音合成模型,權重目錄為 Ming-3.0-tts-0.5b。倉庫文件顯示,模型主幹為 dense 結構,配置映射到 BailingMMConfig;權重文件 model.safetensors 內含 backbone、音頻 VAE、DiT head 與 aggregator 四部分。說話人特徵由 campplus.onnx 提取,分詞相關文件包括 tokenizer.json 及配套的 vocab、merges、added_tokens 等。倉庫還提供 ModelScope 任務描述文件與 chat_template.jinja 對話模板。

全文梳理

AI 摘要依據下方信源原文自動整理,非原文轉載

倉庫裏有什麼

這次公開的是一個模型權重目錄 Ming-3.0-tts-0.5b,而非完整訓練代碼。目錄中 config.json 把 model_type 標為 dense,auto_map 指向 BailingMMConfig,說明加載時走的是這套配置類。configuration.json 是 ModelScope 的任務描述文件,方便在對應平台上識別任務類型。權重集中在單個 model.safetensors 中,README 與 tokenizer 相關文件一併提供,構成可直接取用的推理側文件集合。

模型結構線索

從權重文件的組成看,模型由 backbone、音頻 VAE、DiT head 和 aggregator 四塊拼成:主幹負責建模,音頻 VAE 承擔音頻的編解碼,DiT head 與 aggregator 參與生成側的處理。這一組合方式與當前語音合成中常見的「語言模型主幹 + 擴散式聲學頭」思路一致,但材料只給出文件層面的劃分,未披露參數量、採樣率、支持語種或推理速度等資訊。

說話人與文本處理

說話人特徵由單獨的 campplus.onnx 提取,意味着音色控制依賴這一外部嵌入模型,而非完全內置在主幹裏。文本側提供 tokenizer.json,並配套 vocab.json、merges.txt、added_tokens.json,以及 tokenizer_config.json、special_tokens_map.json 和 chat_template.jinja。對話模板的存在說明輸入可能按對話格式組織,但材料未說明具體用法與調用接口。

為什麼值得看

從文件結構可看出模型由主幹、音頻 VAE 與 DiT 頭組合而成,並自帶說話人編碼器,便於判斷其技術路線與部署成本。

語音

信源1 家

  1. [1]螞蟻 inclusionAI:GitHub 新倉庫線索來自 AIHOT螞蟻 inclusionAI 開源 Ming-3.0-tts 語音合成模型

關鍵事實

  • 螞蟻 inclusionAI 在 GitHub 新建倉庫,開源 Ming-3.0-tts 語音合成模型[1]

  • 權重目錄名為 Ming-3.0-tts-0.5b[1]

  • config.json 標註 model_type 為 dense,auto_map 指向 BailingMMConfig[1]

  • model.safetensors 包含 backbone、音頻 VAE、DiT head 與 aggregator[1]

  • campplus.onnx 用於提取說話人嵌入[1]

相關 · 模型

本頁內容由 AI 自動聚合公開信源生成,僅供了解行業動態參考,不構成任何投資或決策建議。如需引用請以原文出處為準。