BloombergGPT:金融领域混合数据训练的语言模型
一种针对金融领域的语言模型BloombergGPT,采用混合数据训练的方式,兼顾专业领域和通用数据的特点。通过大规模金融数据集FinPile的训练、Unigram模型的分词和Press等人提出的位置编码方法,BloombergGPT在金融领域任务中表现优异并且在通用LLM基准测试中也有良好表现。本文的工作为金融领域NLP的应用提供了有价值的启示。
下载地址
用户评论