摘要:金融界 2025 年 3 月 28 日消息,国家知识产权局信息显示,中国南方电网有限责任公司申请一项名为“基于 BERT 和强化学习的电力系统语言理解预训练方法”的专利,公开号 CN 119691142 A,申请日期为 2024 年 10 月。
金融界 2025 年 3 月 28 日消息,国家知识产权局信息显示,中国南方电网有限责任公司申请一项名为“基于 BERT 和强化学习的电力系统语言理解预训练方法”的专利,公开号 CN 119691142 A,申请日期为 2024 年 10 月。
专利摘要显示,本申请属于电力技术领域,涉及基于 BERT 和强化学习的电力系统语言理解预训练方法,本发明通过收集和预处理电力领域数据,为模型提供了专业语料基础;将电力专有词汇加入 BERT 模型并进行微调,提高了模型对领域术语的理解能力;构建电力系统知识图谱并嵌入模型中,增强了模型的领域知识表示;通过定义任务环境和应用强化学习,实现了模型在特定电力任务上的优化;这种方法充分利用了有限的领域资源,结合了预训练模型、知识图谱和强化学习的优势,有效提升了 BERT 模型在电力系统专业领域的语言理解能力,为解决专业领域自然语言处理问题提供了新的思路。
天眼查资料显示,中国南方电网有限责任公司,成立于2004年,位于广州市,是一家以从事电力、热力生产和供应业为主的企业。企业注册资本9020000万人民币,实缴资本6000000万人民币。通过天眼查大数据分析,中国南方电网有限责任公司共对外投资了36家企业,参与招投标项目5000次,财产线索方面有商标信息352条,专利信息4865条,此外企业还拥有行政许可65个。
来源:金融界