赞
踩
面向金融领域的实体关系抽取系统设计与实现
提示:适合用于课程设计或毕业设计,工作量达标,源码开放
项目分享:
https://gitee.com/asoonis/feed-neo
经过大量的调研发现,有监督的机器学习方法在关系抽取的效果上要优于半监督和无监督的机器学习方法,因此本系统将使用有监督的机器学习方法来进行关系抽取。因为实体种类繁多,针对金融领域,我们只抽取机构与机构之间、人与机构之间的实体关系。基于有监督的机器学习方法来进行关系抽取,系统的开发大致分为两个部分:一是模型训练,二是应用训练好的模型进行关系抽取。主要工作内容可概括为以下几个方面:
(1)使用爬虫技术爬取新闻,搭建训练语料库;
(2)人工标注语料库;
(3)针对不同的分类算法进行调参,并选择最佳的分类算法;
(4)使用最佳的分类算法训练模型并保存模型;
(5)使用已有的模型对金融新闻进行实体关系抽取。
实体关系抽取的进行是在实体识别的基础上进行的,因此系统首先应该允许用户选择需要进行关系预测的实体对,然后让系统读取描述实体间关系的新闻内容,再进行实体间关系抽取,并给出模型预测的实体间关系。
本系统在特定的金融网站上采集数据,搭建语料库并进行人工标注。在标注完成后,选定分类算法进行训练,训练完完成后即可使用该模型来对新来的文本进行实体关系抽取,文本的来源可以使微信、股吧、公告和新闻网站等。将关系抽取的结果进行保存,以服务于其他应用。
本系统主要包括模型训练和关系抽取两个方面,关系抽取是在模型训练完成的基础上,利用已经训练好的模型来对实体关系进行抽取。模型训练模块和关系抽取模块又可以根据其处理的流程,细分为一些具体的小模块。
面向金融领域的实体关系抽取系统主要包含两部分,模型训练和关系抽取,关系抽取是应用模型训练完成后保存的模型来进行关系抽取活动的。下图展示了这两个部分的实现流程以及之间的交互关系。从图可以看出,两部分的实现流程基本一致。
(1)买卖关系
(2)合并关系
(3)合作关系
(4)从属关系
项目分享:
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。