赞
踩
本案例首先利用Python文本挖掘技术,对碎片化、非结构化的电商网站评论数据进行清洗与处理,转化为结构化数据。然后对文本数据进一步挖掘与分析,采用决策树算法构建情感分类模型,探索用机器学习算法对评论标注type的可能性;依据情感词库匹配情感词,计算每条评论的情感值,进而机器标注每条评论的正负类型type,用词云图直观呈现正负评论的关键词,初步获得用户的反馈意见。最后利用gensim库构建主题挖掘模型,深入了解用户的意见、购买原因、产品的优缺点等。
说明:本案例侧重分析思路及代码实现,不深入展开分析结果的业务解释与决策指导!
重要事情说三遍~
想听我讲案例,请点这里,进入B站
想听我讲案例,请点这里,进入B站
想听我讲案例,请点这里,进入B站
工具准备
一、导入数据
二、数据预处理
(一)去重
(二)数据清洗
(三)分词、词性标注、去除停用词、词云图
三、模型构建
(一)基于决策树的情感分类
(二)情感分析
(三)基于LDA模型的主题分析
import os import numpy as np import pandas as pd import matplotlib.pyplot as plt import seaborn as sns from matplotlib.pylab import style #自定义图表风格 style.use('ggplot') from IPython.core.interactiveshell import InteractiveShell InteractiveShell.ast_node_interactivity = "all" plt.rcParams['font.sans-serif'] = ['Simhei'] # 解决中文乱码问题 import re import jieba.posseg as psg import itertools #conda install -c anaconda gensim from gensim import corpora,models #主题挖掘,提取关键信息 # pip install wordcloud from wordcloud import WordCloud,ImageColorGenerator from collections import Counter from sklearn import tree from sklearn.model_selection import train_test_split from sklearn.feature_extraction.text import CountVectorizer from sklearn.metrics import classification_report from sklearn.metrics import accuracy_score import graphviz
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。