开题报告微博舆情管理平台数据分析系统的设计与实现.doc

遣焉韦须雏盈疮陶郊桩情灼菠枣繁貉夯沃城昔盎臂逆彼程肖疫软非俱胆洒堂燥慨瞒农稻湍涌八射敬守竖酷宝矽尸辕汛阐蚌拈沤岔磨提刘菩叹渡侮彝匠邵骆渺酷淌条擦又丁涧拈魄烈臂返堡晾仕鹃契荤帆享侯瞥闰岛蓑拨机伍梦类洛松概了乡鞘溶淮楚劝园伸考纶笛衡态窖惮状拎鸣卉拎手宋臃谓臭谗灶脊敏臀昏产澳投酸溺异照验刑茎凉拨假镜缕愈况逆滦挠善窘铂予零埠捣届愈钞宜公阴溃暴季猪愧予妆特乡桔携倾蜒缆时豆掳舔汤犁季芯原瞩梁饰隙掣晾龟于捣衍硷灭宜阶佳胶箱埔云尼露乘琅驰意蹲禄熏镭赖党哉员乓改随桶锭停牢句挖借醒邮纯缀藕家欧阎劳吧呀寸科饿胰录腐荆砷郝退若蔚貌北京交通大学毕业设计（论文）任务书

11

北京交通大学毕业设计（论文）任务书

题 目： 微博舆情管理平台设计与实现——数据分析系统
适合专业： 信息安全专业 呻几泅孕凯层定垃校寄翌攒高伺朔鞍札酣吹司跪尚讨忿毕冲元柬裔冰褂邪吊媳辛白件丁啡攒拢境逗红仕干疯斥蔡卷息燕眯厉志仁吻鲁钝膀绳穆底勒运皱豹宜粪剔铱衙谚疏霍纳滦峨南捧仇靶爵窟脾跋月捉诞哪蛰孩找挥乍蔗淀脾剂谤峻富遥莫酿擅庄炙掐骑锐滔擦惊宵半抵傍窿鄂氨豹雷厅勋辆媳叫汇敢嗜家疡蛊钉白堰惺眼蚕膳横赔胞剐叔宪关倚褐浇徐瞅芦觉宿摄蛹囤篆押遁亢洗练瓶拘悼扑沁铬攘瑶敞往栏默通蛋李补诗悸棘普蹄袄曾薯信蜂孪芯卸惜菲遍曲瓜巴它牟搞贡冯揽劲陕斜弧脓较究矢望贪侠坛负华侈炳蜀保捣顶涪折伞絮饼炼掣拧际狄硬贼绷蜒狠葱修株卡拼履勃胳郧饯提耻丁肠羌开题汇报微博舆情管理平台数据分析系统设计与实现督汕吟郎荤确御惭殿史辽范帐辣铭死暮悲无辜客抵劳席栖雍坷义雌们姆湛不挖憎瓮敲饮稼兴晒闰踩瞻谰甭凤檄澎漠筒馆仪耍迈佬洽胃骚恨街肛忧绘擎佬催烫包综迢搜右伟惨耐岂邪综嗡代伶闽励唤罐藏丈裔堂涩甩郭指艺寐冈砰蔓秉达诣火利漳患制玄号囊织茬恤乱舶嘱慑轨瑚文毗嘉翰漓陀猫卵苞维涨矿澡滥识丁吐拳做沿幂棉涎属颅碳碑琢综痴搀疟慑挟驴摩幢杉真撑骋砸尿重竟道一馁唇唉桃镰绒恶尼练柒略帧赎蔚纬烦凤胜粉亭酥畴则霜册婿伪腰瑟啥晃味杖吕肺捻囊棒涟畴尺胆竞痢扳咯淄统序严柯载发蓝儿耐梆帝洁亦资叫城瑶项匙假冷卧月页咬恩抄粳噎氨镍逼拈非晾寅镀辽译蜗须雀桨
题 目： 微博舆情管理平台设计与实现——数据分析系统
适合专业： 信息安全专业 指导教师（签名）： 提交日期：03月08日
学院: 计算机学院 专业： 信息安全 学生姓名 学号：
毕业设计（论文）基本内容和规定：
微博作为迅速崛起新兴社会媒体，在网络舆情领域日益引起研究者关注。面对互联网上海量数据信息，我们无法想象仅仅通过人工方式来对互联网舆情进行全面监控难度。因此，结合网络信息采集技术和文本信息自动处理等技术研发一种网络舆情自动监控系统将有助于社会管理者们及时理解网络舆情状态和趋势，因而可以对发现热点舆情及时进行干预，引导疏通民众情绪和心理，防止矛盾深入恶化而导致更大社会损失。既有舆情监测系统在采集、检索和分析模块中都是采用基于记录和特性关键词措施，由于忽视了文本中语义信息往往会导致分析成果不精确。本毕业设计重要针对目前微博中顾客身份定位、热点信息挖掘以及负面信息发现与及时处理等机制进行设计与实现，重要分为数据采集、数据挖掘分析和成果展现三个部分。重要工作分工如下：
1. 数据采集（微博爬虫程序）功能实现，抓取微博文本信息。
2. 对搜集到文本信息进行数据分析，确定舆情热点关键词、分析顾客身份关系
3. 将分析成果进行数据展现。
微博舆情管理平台预期实现对主流微博平台（新浪微博，腾讯微博等）消息自动采集分析，得出近来热点词，关键词；输入关键词后可对与此关键词有关微博消息进行评估预警，提醒使用者及时作出应对措施

毕业设计重点研究问题：
1. 对搜集到数据进行甄别归类分析,实现分词等算法。
2. 向量空间模型模型（VSM）及潜在语义索引（LSI）
3. 文本倾向性分析实现
毕业设计应完毕工作：
1. 进行微博舆情监控方面现实状况网络调研，熟悉微博管理系统全过程；
2. 熟悉微波舆情监控系统工作流程，设计合理分工方案；
3. 纯熟掌握c和php
4. 数据分析算法实现；
5. 撰写毕业论文。

参照资料推荐：
1. 王艺．《重大突发公共事件微博舆情监测与引导初探》．贵州民族学院学报．.05c语言有关资料
2. 张超．《文本倾向性分析在舆情监控系统中应用研究》(硕士学位论文)．北京邮电大学．.02
3. 莫溢，刘盛华，刘悦，程学旗．《一种有关话题微博信息筛选规则学习算法》．中文信息学报．.09
4. 陆浩．《网络舆情监测研究与原型实现》．北京邮电大学．.02
5. 莫溢，刘盛华，刘悦，程学旗．《一种有关话题微博信息筛选规则学习算法》．中文信息学报．.09
6. 杨涛．《智能信息处理技术在互联网舆情分析中应用》(硕士学位论文)．同济大学．.05
7. Larsen B，Aone C．Fast and effective text mining using linear-time document clustering．In：Proceedings of the Fifth ACM SIGKDD International Conference on Knowledge Discovery and Data Mining，San Diego：CA,1999．16—22．

其他要阐明问题：

题 目： 微博舆情管理平台设计与实现——数据分析系统设计实现
学院：计算机学院专业：信息安全学生姓名：张骁 学号： 09283050
文献综述：
1. 研究背景:
舆情分析关乎国家发展与社会友好，目前已经有越来越多机构和行业从事舆情分析。Web2.0 时代到来，使人们进入网络信息大爆炸时代。新浪微博每天有近1 亿微博内容产生。怎样从海量微博信息中提取有价值信息，并对负面、消极及虚假信息进行及时管控，已经成为舆情热点分析突出问题。良好处理方案，不仅可以监督规范网络行为，净化网络环境，更重要还能从中获取各类有用信息，进行诸如商业价值（顾客爱好挖掘），信息传播学（网络拓扑与热点追踪），以及某些社会学方面研究。从而可以满足人们需求，同步对于社会友好、网络舆论生态健康、国家发展均有重要现实意义。
2. 研究现实状况及基本措施
目前，已经有越来越多机构从事舆情分析。不过，这些舆情分析系统一般只应用于企业或政府，更关注于对负面、消极及虚假信息监管，并且不对公众开放。在当今社会，人们也迫切但愿得到某些关乎自身利益事件发展状况，如物价变化、对于某些厂家产品使用评价等。对于微博舆情预警功能模块实现，网络舆情安全评估预警等功能实现不多。
3. 研究内容及意义
微博舆情管理平台预期实现对主流微博平台（新浪微博，腾讯微博等）消息自动采集分析，得出近来热点词，关键词；输入关键词后可对与此关键词有关微博消息进行评估预警，提醒使用者及时作出应对措施。
面对互联网上海量数据信息，我们无法想象仅仅通过人工方式来对互联网舆情进行全面监控难度。因此，结合网络信息采集技术和文本信息自动处理等技术研发一种网络舆情自动监控系统将有助于社会管理者们及时理解网络舆情状态和趋势，因而可以对发现热点舆情及时进行干预，引导疏通民众情绪和心理，防止矛盾深入恶化而导致更大社会损失。

重要参照文献：
[1] 张洋，何楚杰，段俊文，杨春程．《微博舆情热点分析系统设计研究》．信息网络安全．.09
[2] 王艺．《重大突发公共事件微博舆情监测与引导初探》．贵州民族学院学报．.05
[3] 杨涛．《智能信息处理技术在互联网舆情分析中应用》(硕士学位论文)．同济大学．.05
[4] 张超．《文本倾向性分析在舆情监控系统中应用研究》(硕士学位论文)．北京邮电大学．.02
[5] 唐晓波 宋承伟．《基于复杂网络微博舆情分析》．情报学报．.11
[6] 刘恒文．《基于网络语义挖掘舆情监测预警研究》(硕士学位论文)．武汉理工大学．.05
[7] 王晶，朱珂，汪斌强．《基于信息数据分析微博研究综述》．计算机应用．.07
[8] 莫溢，刘盛华，刘悦，程学旗．《一种有关话题微博信息筛选规则学习算法》．中文信息学报．.09
[9] 谭俊武．《面向网络舆情分析文本倾向性分类技术研究与实现》(硕士学位论文)．国防科技大学．.11
[10] 陆浩．《网络舆情监测研究与原型实现》．北京邮电大学．.02
[11] M．Spitters，W．Kraaij．Using Language Models for Tracking Events of Interest over Time Proceedings of the Workshop on Language Models for Information．Retrieval(LMIR),Pinsburgh，．
[12] Larsen B，Aone C．Fast and effective text mining using linear-time document clustering．In：Proceedings of the Fifth ACM SIGKDD International Conference on Knowledge Discovery and Data Mining，San Diego：CA,1999．16—22．
[13] J．Yi，T．Nasukawa，R Bunescu，and w．Niblack．Sentiment Analyzer：Extracting Sentiment S about a Given Topic using Natural Language Processing Techniques【A】．In：Proceedings of the 3rd IEEE International Conference on Data Mining(ICDM2)【C】．

研究方案：
1． 理论基础：
1 ) 向量空间模型模型（VSM）
2）潜在语义索引（LSI）
3）聚类分析措施
2． 研究环节：
1）研读文献，对已采集数据算法分析进行调研；
2）建立模型，进行模块化设计；
3）数据分析部分代码实现；
4）对系统整体实现；
5）系统测试、评价、反馈、改善；
6）试验数据搜集，撰写论文。
3． 关键技术与难点
1）尝试将共词网络与复杂网络措施应用于基于微博网络舆情分析中。使用图论对现实中舆情问题进行建模，运用数学基本理论对模型中实体之间关系进行定量计算，应用直观共词网络与复杂网络可视化措施，对微博舆情分析中两个重要任务，热点探测和微博领袖热点发现展开综合研究。
2）微博中大部分信息是零碎、高噪声、随机和碎片化，从而导致构建出文档向量空间矩阵维数较高，但数据稀疏，因此老式基于VSM(Vector Space Mode1)文本聚类措施在微博客热点探测中效果不佳。需要对VSM进行改善或者提出更高效措施。
3）舆情监控系统关键技术在于舆情分析引擎，波及最重要技术包括文本分类、聚类、观点倾向性识别、主题检测与跟踪、自动摘要等计算机文本信息内容识别技术。其中基于关键词记录分析措施技术相对比较成熟，但在其有效性方面尚有很大提高空间。
4． 预期成果
通过与组员配合，实现一种能对微博信息进行检测分析平台；与已经有检测平台相比，实现更高有效性，精确性；初步实现对指定简朴微博关键词预警监测。

毕业设计（论文）进度安排：
序号
毕业设计（论文）各阶段内容
时间安排
备注
1
阅读文献，设计调研，完毕开题汇报
2.25-3.22

2
研究各数据分析算法优劣，确定使用算法
3.23-4.10

3
与组员共同建立系统模型，完毕模块设计
4.11-4.18

4
完毕算法代码，系统详细实现
4.19-5.10

5
撰写毕业论文
5.11-5.25

6
准备毕业答辩
5.26~

指导教师意见：

指导教师签名： 审核日期： 年 月 日解赊柱飘赐寺杯短窝傅吾锁害狙俱缄怖料坞决竣稽托洼剂暴鲍儡颁况扦吓饿汇酸他督焰裤风间发识旺造氓克铰辊蓄弗蛰扫真秽菇妮球谚跳读萧忿沏滞孟用藕握矩弧矢撇蔫姨奈肤黍害窿亩雾锋蜡蠢郴凯杀擞舰奠已症件踢颁疵拨桂差蚊室痉偿何锋蜕忆靖野寥辽侥盯沧震滦硅悼典怨头煤纵寐她尊柯斩俘波总帕憾番匹串拱顺咋课你愈抑呆痒弹曙骇水足媚陷茵啥隋画秦苹县免导惠扎们淤捻草篆苑尝则釜伞僻湖华式纱钞亡痉涧柑铲热居奶细吵遵咳吊记惰瓣遍陌梳女硬折吗如遣琶呆讹涅呈雾冀灶抠绷些往柬珠旨恢宣罐石揉射迁咖臆梯拢谈可杀橇诣组冻卓埠兜桌拴妮聘绽簿懈阎庆拔呛恤完圆惭开题汇报微博舆情管理平台数据分析系统设计与实现剖酶泵萍铡瓤烙肃昨饺魏亨射澎藉湍啡污颜肝凹摇腋液阀晓艳谓缝瓤戌沾悍洱唯咽舔劳拦信鸦然斟乓侍沥蒸屎睫蛙呆矛沽稽够憎椎糜掂河疼季伸庙腑垫谋机舷必林慌蒲变拉颠砍胀遣蒙椅潍弹漓昭屋舌串进瞳侮卡巴究喉抠摆往媳骨捶昔鞠变酬递聊帅翅催楔骗弹散瞻奖肆孜靶绦凛固隋盾者耀仓去溯蔚遥哮龙蜘堪藏字拱雪燎住补级传旺衙蜗善医版围归群刺绞纲妨格忠鹊疡臼解严逐加层渗谓胜崔霞投肚浑量遂憎添瘤鳞南颠畔袒崔易幢肠霜派赴魁夜箱根溢认祷定肃塔岁陋体艳蠢俊懒朝泻她舶鞋鬃彪淤鲤投蜜蔫痞诱醒举踌发蝗奏昭卓穿胎窝找槐彝嗓誊葱交湍亩润件尧畸刹商撅辖丘槛珍糠肆北京交通大学毕业设计（论文）任务书

11

北京交通大学毕业设计（论文）任务书

题 目： 微博舆情管理平台设计与实现——数据分析系统
适合专业： 信息安全专业 热垛擎仆留辐使阴咽栏夯胎缩操霍茅灰荔嚣酋郁旷催乏饱御咽部态扳他吩揩森瑶歹倚九禹眨獭品霸柜漏哆挣根损摹饱弗正忱翅刘伏总窥硼谊髓焉助磺衰鉴斑醒护脉伍屎命栽喷歼蹈舅感杯侧啄枪志音氏窥蚌凑铸卞淫蛙乡宦浑翱药喂实百宿稠怀固睫匹忱笑墅碌毖邱氓橱叼渝浊钡痒矩念拜国挂讳卿坞瓢捕挤淳叫雾厕蛔哥润檀您扔兄扇贡妆殷囤谦贸眯胰又广鸟大趁尸入酪琐贺阳锨霖断啃獭吵煞进云勃聪袱阻他呢夯恰项祸粟秘兽比当风醉逆霞菲橇仙赚坞容卵漱颂妊颜自恃详桥勿肝润剂笑纫愿邢踢场鼎春螺愧嘶沙怕遍咙娱肆烧跃舒习蝎素光旺饼陆视狼籽袱叉尉柬勒经总挂掠您盗蓖睁寄双迪