当前位置:   article > 正文

neo4j,python,关于使用csv批量建立节点时,会重复建立相同名称节点。去重。_neo4j,python,关于使用csv批量建立节点时,会重复建立相同名称节点。去重

neo4j,python,关于使用csv批量建立节点时,会重复建立相同名称节点。去重

neo4j,python,关于使用csv批量建立节点时,会重复建立相同名称节点。去重。

准备的数据:

一共有34个省份名称,一千八百多行数据。
准备建立关系为:多条河流→水利厅→省份

在这里插入图片描述
在这里插入图片描述

小白正常的思路:

先连接数据库
再连接csv文件
再转化为list
再用for循环批量建立节点关系
就比如
在这里插入图片描述
然后一运行,感觉没毛病,结果一看neo4j关系图,就会发现建立了很多相同的节点。
节点和节点之间的关系也就乱七八糟了。

开始想办法解决
一个办法就是转换为set元素集,虽然set不重复但他是无序的,说白了就是乱七八糟,小量数据排排表格没准可以解决重复节点的问题,但是大量、无序的数据就很难受了,几天都不一定能弄完。

接下来开始想第二个办法
那就是建立节点的时候,用for、if判断当前节点的name是否在(0,i-1)中出现过
在这里插入图片描述
我感觉思路没得错,但是还是不成功,也尝试了将c=-1下面加break,但是还是么得卵用。
问题应该是使用forif 对list列表的数据进行查询的时候出的错。

以往我使用简单的代码处理大量数据的时候,会经常出错。但是换成小量数据又不会有错了,应该是结构承载不住这么多的数据,就跟脸盆和瀑布一样,想用脸盆接瀑布,顶多接一盆,剩下的全没了。


接下来是干货:

经过度娘得知,可以使用第三方包去重,但只管去重,你后面关系乱了人家第三方包不管。=-=

或者

直接在neo4j里面使用数据库语言去重,但关系还是得重新建立。况且,我想用python去重。

干货来了

后来,我换了个思路,那么就是合并节点。(虽然跟去重差不多)
但总归总做出来了
使用NodeMatcher函数,注意3.5.4才推出的函数

解释一下思路
for循环录入节点关系
使用NodeMatcher判断是否重复
重复的情况下

直接建立关系(干货!)(新节点如何与旧节点建立关系
就是 node一下旧节点的内容 但不提交!!!
直接新旧节点建立关系(记得提交新节点)

cong = Node(‘水利局’, name=data[i][1])
graph.create(cong)
zhu = Node(‘省份’, name=data[i][0])
zhucong = Relationship(cong,‘属于’,zhu)
graph.create(zhucong)

继续
不重复的情况下
建立新节点
又一轮新的if NodeMatcher判断水利局是否建立过

xxx云云云 我就解释第一二层的思路,剩下的看会代码就会了
在这里插入图片描述
在这里插入图片描述

最后给个结果图

在这里插入图片描述

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/我家小花儿/article/detail/427735
推荐阅读
相关标签
  

闽ICP备14008679号