学位论文 > 优秀研究生学位论文题录展示

基于趋势分析的舆情监控系统

作 者: 陈曦
导 师: 许家珆; 冯俊杰
学 校: 电子科技大学
专 业: 软件工程
关键词: 舆情监测 蜘蛛技术 权值算法 贝叶斯网络
分类号: TP393.08
类 型: 硕士论文
年 份: 2013年
下 载: 2次
引 用: 0次
阅 读: 论文下载
 

内容摘要


随着互联网的快速发展,网络文化的安全问题也逐渐显现出来。网络舆情热点是网民思想情绪和群众利益诉求在网络上的集中反映,是网民热切关注的聚焦点,反映出一个时期网民的所思所想。各大网站的BBS作为互联网最活跃的平台之一,自然充斥着大量不良的、敏感的、反面的信息,如果能够建立对重点网站的自动监控平台,对敏感信息进行自动采集、归类、跟踪,筛选等,就能极大地减少资源投入,高效的开展舆情侦测工作。此外,对危害互联网的信息来源的挖掘与侦测也是我国目前网络安全工作的重点和难点。基于上述情况,本文首先对网络爬虫进行了初步探究,再把爬虫的原理和BBS特征结合在一起,提出了一个基于网络,BBS的舆情信息数据的采集和提取系统。本课题在对我国网络舆论尤其是群体性事件进行了深入分析研究的基础上,建立了基于趋势评估的舆情监控模型,设计并实现了基于趋势分析的舆情监控系统。具体进行了以下研究工作:1、通过分析将整个舆情监控技术归纳为“采集技术”、“识别技术”和“判断技术”,并对各阶段的技术进行了研究。2、对具有中国特色的网络舆论进行了分析和研究,总结了中国式的互联网舆论模式。3、对如何判断舆论走向、如何识别负面趋势进行了研究。4、构建了一种基于趋势评估的舆情监控模型:包括采集模块、浏览量识别模块、关键字识别模块、传播热度识别模块、聚类摘要模块、趋势分析模块,并进行了编码和实际应用。所建立的舆情监控系统实现了以下功能:1、构建趋势评估模型:通过模糊数学分析对舆情这类模糊事物的性状进行可靠定量,计算出舆情发展趋势的具体值。2、时间聚类过滤:对信息处理模块采用了时间聚类分析技术,过滤搜索引擎和数据采集监控点过时的信息,并依据监控点信息出现的时间变化与响应的增量值来加入趋势评估的建模。3、通过趋势评估技术,将国内现有的舆情监控的采集模块和分析模块进行了关联。利用模糊综合评判的方法构建出舆情事件的可能性,结合贝叶斯网络技术评价舆情事件的发展态势。

全文目录


摘要  5-7
ABSTRACT  7-9
目录  9-12
第一章 绪论  12-18
  1.1 课题背景  12-13
  1.2 国内舆情现状  13-14
  1.3 国内外舆情监控技术研究现状  14-15
  1.4 本课题所做的研究  15-16
  1.5 国内外主流舆情监控系统技术分析  16-18
第二章 基于趋势分析的舆情监控系统设计  18-46
  2.1 系统工作体系设计  18-21
  2.2 爬虫模块设计  21-25
    2.2.1 网络爬虫工作原理  21-22
    2.2.2 网络爬虫的体系结构  22-23
    2.2.3 网络爬虫算法  23-24
    2.2.4 向量空间模型VSM  24-25
  2.3 中文分词器  25-27
    2.3.1 ICTCLAS中国科学院开源分词系统  25
    2.3.2 ICTCLAS分词器技术分析  25-27
  2.4 ICTCLAS分词器在本系统中的应用  27-35
    2.4.1 分词  27-32
    2.4.2 posTagging  32-34
    2.4.3 NE识别  34
    2.4.4 重新分词  34-35
    2.4.5 重新标注  35
  2.5 大规模文本排重模块设计  35-39
    2.5.1 信息指纹算法介绍  35-36
    2.5.2 Hash算法介绍  36
    2.5.3 文本近似排重设计  36-37
    2.5.4 权值算法设计  37-39
  2.6 系统数据库设计  39-40
  2.7 索引设计  40-42
    2.7.1 索引介绍  40
    2.7.2 聚集索引介绍  40-41
    2.7.3 非聚簇索引介绍  41
    2.7.4 唯一索引介绍  41
    2.7.5 系统表sysindexes  41
    2.7.6 线性索引、树状索引与散列索引介绍  41-42
  2.8 本文所采用的索引技术  42-44
  2.9 本章小结  44-46
第三章 趋势分析模块设计  46-52
  3.1 态势评估模型  46
  3.2 态势评估流程设计  46-47
  3.3 模糊综合评判举例  47-48
  3.4 模糊判断的权重确定  48-49
  3.5 二级模糊综合评判  49-50
  3.6 评判结果  50
  3.7 贝叶斯网络介绍  50-51
  3.8 本章小结  51-52
第四章 基于趋势分析的舆情监控系统的设计与实现  52-86
  4.1 系统配置流程简介  52-53
  4.2 信息类管理  53-60
  4.3 数据采集  60-70
    4.3.1 采集任务  60-61
    4.3.2 采集源管理  61-67
    4.3.3 采集模板管理  67-69
    4.3.4 采集参数设置  69-70
  4.4 监控设置  70-74
    4.4.1 分类管理  70-72
    4.4.2 过滤词设置  72
    4.4.3 同义词设置  72-73
    4.4.4 专题监控  73
    4.4.5 全网监控  73-74
  4.5 统计分析  74-78
    4.5.1 统计  74-77
      4.5.1.1 按时间统计-折线图  74-75
      4.5.1.2 按时间统计-柱状图  75-76
      4.5.1.3 按站点统计-饼图  76-77
    4.5.2 分析  77-78
  4.6 门户管理  78-82
    4.6.1 用户组管理  78-79
    4.6.2 用户管理  79
    4.6.3 权限管理  79-80
    4.6.4 热门关键词管理  80-81
    4.6.5 预警信息设置  81
    4.6.6 意见征集  81-82
    4.6.7 总访问量  82
  4.7 系统设置  82-85
    4.7.1 修改密码  82
    4.7.2 管理员管理  82
    4.7.3 管理员权限  82-83
    4.7.4 索引存放位置  83
    4.7.5 端口设置  83
    4.7.6 数据导出设置  83-84
    4.7.7 系统信息  84-85
  4.8 本章小结  85-86
第五章 总结与展望  86-88
  5.1 总结  86-87
  5.2 未来与展望  87-88
致谢  88-89
参考文献  89-91

相似论文

  1. 多传感器信息融合及其在可穿戴计算机上的应用,TP202
  2. 黄磷储罐区安全评价方法研究,TQ126.317
  3. 用贝叶斯网络对蛋白质LOOP结构建模的研究,Q51
  4. FPSO在石油卸载过程中的风险评估,U698
  5. 基于贝叶斯网络的攻击图分析,TP393.08
  6. 基于改进云遗传算法的贝叶斯网络结构学习,TP18
  7. 基于多核环境的基因贝叶斯网络构造算法研究与实现,Q75
  8. 监控事件检测的贝叶斯网络模型优化研究,TP18
  9. 食品安全风险过程控制的贝叶斯统计与知识发现,O212.8
  10. 基于在线检测信息的储罐底板腐蚀状态智能评价方法研究,TE972
  11. 基于贝叶斯网络的山区道路危险货物运输风险评价研究,U492.336.3
  12. 基于贝叶斯网络的商业银行全面风险预警系统,F224
  13. 蛋白质相互作用预测及Hub蛋白分类与作用规律研究,Q51
  14. 不确定环境下应急物流设施选址与运输优化,F224
  15. 基于贝叶斯网络的继电保护故障诊断,TP183
  16. 基于贝叶斯网络的轨道交通系统人因可靠性定量分析方法研究,U284.48
  17. 基于贝叶斯网络的CBTC系统安全分析,U284.48
  18. 基于人为因素的民航维修安全分析与评估研究,V267
  19. 基于贝叶斯网络的保险公司操作风险度量研究,F224
  20. 应用贝叶斯网络分析我国农村居民消费价格指数的影响因素,F323.8
  21. 城市地震次生灾害连锁演化机理及协同应急管理机制研究,X43

中图分类: > 工业技术 > 自动化技术、计算机技术 > 计算技术、计算机技术 > 计算机的应用 > 计算机网络 > 一般性问题 > 计算机网络安全
© 2012 www.xueweilunwen.com