基于分層聯(lián)邦框架的音頻模型生成技術研究

摘要： 針對音頻模型，圍繞下一代音頻生成技術研究，構建聯(lián)邦音頻模型訓練框架，面向超大規(guī)模音頻數(shù)據(jù)進行音頻表征學習，為音頻下游任務提供高效魯棒的解決方案。提出一種適用于音頻模型的聯(lián)邦學習框架，解決數(shù)據(jù)異構性、通信效率、隱私保護等問題；提出一種基于對比學習的音頻模型的預訓練方法，利用<音頻，文本描述>數(shù)據(jù)學習語義特征，提高模型的泛化能力和多樣化能力；提出一種基于提示學習的音頻生成微調方法，... （共9頁）