Python网络舆情监控网络爬虫研究与实现
时间:2022-07-23 22:01 来源:毕业论文 作者:毕业论文 点击:次
摘要随着互联网的快速建设,以及网民数量逐年大幅增加,互联网早已成为了社会舆情传播的重要载体,目前网络舆情言论主要产生于BBS、微博、微信朋友圈和贴吧。鉴于网络快速性的传播,一旦有不好的言论在网络上扩散开,将会对个人,社会乃至国家造成危害。因此需要完善和加强我国网络舆情的建设工作。82579 本文对目前的社会网络舆情进行分析和研究,并收集敏感词,做出了一个针对新浪微博号的网络舆情监控系统。首先构建该网络舆情监控系统的整体框架,其次对该系统的三个主要组成部分进行分析,最后实现对微博号的舆情监控。 毕业论文关键词 网络舆情 网络爬虫 敏感字 毕业设计说明书外文摘要 Title Research and realization of the network consensus monitoring Abstract With the rapid construction of the Internet,as well as the increasing number of the Internet users annually, the Internet has already become an important carrier of public opinion transmission。 The current network opinion emerges mainly out of BBS, Micro-blog, WeChat's Circles and Tieba。 Owing to the rapid transmission of the network, once the bad speech is spread on the Internet, it will be harmful to the inpidual,the society and even the country。 So it's necessary to improve and perfect the construction of our network opinion。 By analyzing the current network opinion and collecting the sensitive terms, I have made a network opinion monitoring system directing at Sina Micro-blog in the essay。 Firstly,constructing the monitoring system of the network opinion; secondly, analyzing the three main components; finally, achieving the purpose of monitoring the accounts of Micro-Blog。 Keywords Network opinion Web crawler Sensitive term 目 录 1 引言 1 1。1 研究背景及意义 1 1。1。1 研究背景 1 1。1。1 研究意义 1 1。2。1 国外发展现状 1 1。2。1 国内发展现状 1 1。3 本文主要工作和结构 2 1。3。1 本文主要工作 2 1。3。1 本文主要结构 2 2 相关技术介绍 3 2。1 Python的爬虫框架:Scrapy 3 2。2 动态网页爬取技术 4 2。3 账号模拟登陆 4 2。4 Python自带的GUI 4 2。5 舆情分析技术 5 2。5。1 中文分词技术 5 2。5。2 英文分词技术 6 3 网络舆情监控系统的设计与实现 7 3。1 网络舆情监控系统的总体设计 7 3。1。1 需求分析 7 3。1。2 网络舆情监控系统的总体框架 (责任编辑:qin) |