Python实现基于用户投诉信息的知识图谱构建

约定不等于承诺〃 2024-04-03 08:45 66阅读 0赞

目录  
摘要 1  
Abstract 2  
前言 3  
第一章 概述 4  
1.1引言 4  
1.2 课题的主要任务和目标 4  
1.3本文的组织 4  
第二章 相关技术背景 6  
2.1 知识图谱 6  
2.2文本情感分析 6  
第三章 数据整理和算法设计 8  
3.1数据的清洗 8  
3.2中文分词 9  
3.3停用词处理 10  
3.4知识图谱提取设计 10  
3.5本章小结 11  
第四章 实验设计分析和评估 12  
4.1实验设计 12  
4.2实验结果分析 20  
4.3实验评估 25  
4.4本章小结 25  
第五章 总结和展望 27  
5.1课题总结 27  
5.2课题展望 27  
参考文献 29  
致谢 30

本文首先介绍课题的内容，任务，以及目标。接着，本文介绍课题的技术背景：第一是知识图谱的技术背景；第二是文本情感分析的技术背景。随后本文介绍搭建基于投诉文本的知识图谱的数据整理算法以及知识图谱提取算法。接下来，根据这些算法，并且结合诸如Beautiful Soup、jieba分词、matplotlib等等工具进行具体的实验，取得了预期的实验效果。  
文本情感分析又被称为意见挖掘\[5\]，是指对存在主观情感倾向的文本进行情感分析和提取的过程。文本情感分析技术一般被用来做网络营销、企业舆情监控、政府舆论监控等等用途。一般来讲，文本情感分析技术可以划分成几个子任务，首先是提取给定文本的主题。接着是确定陈述者主体，然后是提取该主体的陈述的主观性语句，过滤那些客观性语句。最后是对他的情感倾向进行判断分析。根据给定文本的粒度不同，可以将文本情感分析划分为词汇级，语句级，篇章级，以及海量数据级。本文转载自http://www.biyezuopin.vip/onews.asp?id=14606针对海量数据级，随着互联网的发展，网络的各个平台都存在“网络水军”，他们所陈述的意见往往都是不真实的，可能会对最终结果造成较大影响。因此需要首先根据噪声的特征进行数据清洗。  
常见的文本情感分析方法有：（1）基于机器学习的技术，比如支持向量机等等。（2）基于词典的方法，即对一个新出现的词，根据词典中相似词对其进行情感倾向推理。目前，中文的文本情感分析还存在一些挑战，具体在：（1），效果良好的英文文本情感分析技术无法在中文文本上获得相同效果。（2），不同语境下的情感分析技术效果不佳，等等。随着智能手机的火热以及诸如微博这类信息发布和分享平台的发展，短文本的情感分析将会越来越受到人们的重视。

import tkinter as tk
    from tkinter import *
    file=open("../text/实体关联排序.txt",'r',encoding='UTF-8')
    dic={
        }#存放数据的字典
    line=file.readline()
    while(line):
        text=line.strip('\n')
        dic[(text.split()[0],text.split()[1])]=text.split()[2]
        line=file.readline()
    print(len(dic))
    delete=['客户']
    def searchEntity(text):
        for i in dic:
            if text==str(i[0]) and str(i[1]) not in delete:
                print(str(i[1]))
                strvar.set(str(i[1]))
                return
            elif text==str(i[1]) and str(i[0]) not in delete:
                print(str(i[0]))
                strvar.set(str(i[0]))
                return;
        print("NONE")
        strvar.set("NONE")
    def button():
        t=search.get()
        searchEntity(t)
    def labelClear():
        t=search.get()
    
    gui=tk.Tk()
    gui.title('基于投诉文本的知识图谱')
    gui.geometry('500x300+700+300')
    search=tk.Entry(gui)
    go=tk.Button(gui,text='GO',command=button)
    clear=tk.Button(gui,text='CLEAR',command=labelClear)
    strvar=StringVar()
    strvar.set("")
    label=tk.Label(gui,textvariable=strvar)
    search.pack()
    go.pack()
    label.pack(padx=5, pady=80)
    gui.mainloop()
    file.close()
    
    
    #物业 ：没人  机动车：机动车道  交警：交管

![在这里插入图片描述][883ec8b6068047ddac87589bf62c6e04.png_pic_center]  
![在这里插入图片描述][9b93f2362140432faee64c6a581dc286.png_pic_center]  
![在这里插入图片描述][3c336266f57b4c3bb2991bc245f8e9cf.png_pic_center]  
![在这里插入图片描述][d653330b8fa14ee6b7572460025b78c8.png_pic_center]  
![在这里插入图片描述][2767095e8d394be6af91d388c0f99e19.png_pic_center]  
![在这里插入图片描述][72cab5df742b4e54b275cef06b1723b3.png_pic_center]  
![在这里插入图片描述][9353a1c407fd465b858e2e561e2f88ac.png_pic_center]  
![在这里插入图片描述][4f7b4b366b69489da6b77430b3b03ad0.png_pic_center]  
![在这里插入图片描述][b65c7c2f935d44f1b2808aa632b5b748.png_pic_center]  
![在这里插入图片描述][c413dd3721b242c8b4be8a9d9b681a72.png_pic_center]  
![在这里插入图片描述][e5a58fa355e54d568018cbb436013b23.png_pic_center]  
![在这里插入图片描述][dca6d5d6c6d34ee9b9999e191ab01efd.png_pic_center]  
![在这里插入图片描述][58312633bce24d348456713d9e4d63fb.png_pic_center]  
![在这里插入图片描述][f6b8821b356249b2be4915941d75cc76.png_pic_center]  
![在这里插入图片描述][83e620121c8e4ee389c3a4bcafdefebd.png_pic_center]  
![在这里插入图片描述][3186f2a899fb4f47934fd80907e2ad05.png_pic_center]  
![在这里插入图片描述][5f8ad82f7439470a944460feed636cf4.png_pic_center]  
![在这里插入图片描述][b18b0f500c5e4a97b5504d4474c3e13a.png_pic_center]  
![在这里插入图片描述][8b1f25e6ec0641689c9a6d893dc2b033.png_pic_center]  
![在这里插入图片描述][cf2953c6494f4c3ba984f95c084648b8.png_pic_center]  
![在这里插入图片描述][434dae0d5edb4cab921cdfce9fb10815.png_pic_center]  
![在这里插入图片描述][8242754e66554e1d99b2f39a15fca246.png_pic_center]  
![在这里插入图片描述][a84ba53f03974262809e93462bc953a0.png_pic_center]

[883ec8b6068047ddac87589bf62c6e04.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/8840c71eed544c72950734dbeaae0040.png
[9b93f2362140432faee64c6a581dc286.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/4f9dee2603bf486189bd560fe5c52b24.png
[3c336266f57b4c3bb2991bc245f8e9cf.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/4e9ad260d5ec45f8a466b38a9a28c83f.png
[d653330b8fa14ee6b7572460025b78c8.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/accf8a0a7841445f8a3aa7d98afaef04.png
[2767095e8d394be6af91d388c0f99e19.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/46a8e917f12c46d99d838674573b1b6c.png
[72cab5df742b4e54b275cef06b1723b3.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/a8635a2b9e59451cbbb2e628c90db1bc.png
[9353a1c407fd465b858e2e561e2f88ac.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/b40d0cff0ae44181ad3f76c0cce00735.png
[4f7b4b366b69489da6b77430b3b03ad0.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/3972bae7dc96435c975f9e65e9ec6760.png
[b65c7c2f935d44f1b2808aa632b5b748.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/4979d5f243984e7cbb683ff38e0f9f0c.png
[c413dd3721b242c8b4be8a9d9b681a72.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/381d8376eea64cc9a589edcacee28ed1.png
[e5a58fa355e54d568018cbb436013b23.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/0d6847c0ab2e4b308ef919324b9d0c4e.png
[dca6d5d6c6d34ee9b9999e191ab01efd.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/cac52ae60d624884b0c701e4281b4df2.png
[58312633bce24d348456713d9e4d63fb.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/bc6d37148a634c309e685d424b97d119.png
[f6b8821b356249b2be4915941d75cc76.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/bbd65eca74d145aebf76d4d60bc1fb45.png
[83e620121c8e4ee389c3a4bcafdefebd.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/2a14c5bb086d42ba90a01c3e47821f54.png
[3186f2a899fb4f47934fd80907e2ad05.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/7e5eae51ec69415faeeccc0121afd4f9.png
[5f8ad82f7439470a944460feed636cf4.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/65352ea1d13345de954af80f28ed15b9.png
[b18b0f500c5e4a97b5504d4474c3e13a.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/a2e6e909a08d4d13a7de23bc31e39f0b.png
[8b1f25e6ec0641689c9a6d893dc2b033.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/02d9ad8ca24247af9b66ffc46e8ca50c.png
[cf2953c6494f4c3ba984f95c084648b8.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/78692483808d4359a09eaa6949e23305.png
[434dae0d5edb4cab921cdfce9fb10815.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/52c00d4e0249428aa0a46fbe2bae53d2.png
[8242754e66554e1d99b2f39a15fca246.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/2e880d3751894d9ca0477ed40fa22823.png
[a84ba53f03974262809e93462bc953a0.png_pic_center]: https://image.dandelioncloud.cn/pgy_files/images/2024/04/03/50a4b2e1842c4a0590885953db170f38.png