网络舆情监控项目建设方案.doc

军犬网络舆情监控项目推荐方案单 位：中科点击(北京)科技有限公司 （网址）联系人：邢国贤13911797602010-83653621日 期：2010年05月06日目 录第1章 项目背景3第2章 网络舆情概述4第3章 舆情监控系统简介6第4章 舆情监控系统使命7第5章 舆情监控系统架构8第6章 舆情监控理论模型10第7章 配置清单与功能列表11第8章 网络舆情采集(c/s架构)12第9章 网络舆情分析与展示(B/S端)14第10章 系统特点19第11章 硬件部署与网络接入20第12章 支持与服务2212.1 顾问咨询服务2212.2 售后服务2212.3 软件产品升级服务2412.4 技术巡检计划25第13章 项目预算26第14章 公司简介与客户案例27第1章 项目背景当前，互联网已成为思想文化信息的集散地和社会舆论的扩大器 -胡锦涛CNNIC报告显示，我国的网民规模和宽带网民规模增长迅猛，互联网规模稳居世界第一位。截至2009年6月底，中国网民规模达到3.38亿，较2008年底增长13.4%，半年增长了4000万；而宽带网民规模则达到了3.2亿，占总网民数的94.3%，较2008年底上升了3.7个百分点。与网民规模持续增长相对应的，是我国互联网普及率的稳步提升。数据显示，截至2009年6月底，我国互联网普及率达到25.5%，保持平稳上升的态势。就是这样一个庞大的群体构成了第四媒体-网络媒体，网络媒体时代，人人都有麦克风，不是你听我说，而是大家听大家说。互联网作为继电视、广播、报纸之外的第四媒体，已经成为反映社会舆情的一个重要载体。由于网络的开放性和虚拟性，网上舆情已经越来越复杂，对社会的影响也越来越复杂。互联网聚集的人气、展开的场景与揭示的真相，推动新闻事件的发展、形成网络舆论，甚至直接影响社会主流舆论，己经成为推进社会变革的一股强大的力量。对相关政府部门、公检法系统及信息中心来说，如何加强对网络舆情的及时监测、有效引导，如何对网络舆论危机的积极化解，网络舆情管理成为一大难点。网络舆情的监管对维护社会稳定、促进国家发展具有重要的现实意义，也是创建和谐社会的应有内涵。网络舆情的持续性研究也将是一个长期的课题。第2章 网络舆情概述网络舆情是指通过互联网表达和传播的各种情绪、态度、意见、意愿交叉的总和，网络舆情信息的主要来源有：新闻、论坛、博客、聚合新闻(RSS)等。1、网络舆情的主要特点：2、网络舆情的形成：(上图：网络舆情形成示意图)3、网络舆情的价值量度(上图：网络舆情价值量度)4、舆情形成的动力模型5、网络舆情生命周期(上图：网络舆情生命周期)第3章 舆情监控系统简介军犬网络舆情监控系统，是由中科点击自主研发的一套业内最成熟的网络舆情监控系统和网络舆情办公系统。系统集成了舆情监测、舆情采集、舆情智能分析、舆情处理、舆情预警、舆情搜索、舆情报告辅助生成、动态图表统计分析等核心功能。特有的“舆情漏斗”模型，实现把互联网“读薄”，把“热点”读懂，大浪淘沙般萃取舆情，深度透析热点难点，掌握潜在的变化规律。实现“帮领导干部读网”,该系统对于加强互联网信息监管，应对网络突发的公共事件，全面掌握社情民意起着“决定性作用”。第4章 舆情监控系统使命解决以下舆情监测的难点第5章 舆情监控系统架构整个系统结合了C/S、B/S两种不同的应用模式，并形成了优势互补。工作流程如下图。（1）军犬网络信息采集系统从互联网上采集新闻、论坛、博客、评论、贴吧等舆情信息，并存储到舆情数据库中，并通过军犬舆情搜索引擎对海量的舆情数据进行实时索引。（2）舆情分析引擎负责对舆情数据库进行智能分析和加工。（3）舆情服务平台把舆情数据库中经过加工处理的舆情数据发布到Web界面上并展示给用户。（4）用户通过舆情服务平台浏览舆情信息，通过简报生成等功能完成对舆情的深度加工。第6章 舆情监控理论模型中科点击公司汇聚了业界优秀的软件开发、舆情分析和传播学等方面的优秀人才，理论联系实践，形成了特有的并证明是目前国内最为成功的舆情监控物理模型和理念。军犬网络舆情监控的“舆情漏斗” 军犬网络舆情监控的“舆情罗盘”第7章 配置清单与功能列表产品配置清单 序号软件名称套数说明1军犬网络采集系统V6.61C/S架构的采集2军犬舆情分析系统V3.01网络舆情办公平台3军犬搜索引擎系统1实现种统计分析与舆情搜索4军犬手机短信接口1配合“短信猫”实现短信预警功能5Mysql数据库1免费6应用服务器Tomcat1免费软件功能简表基本功能高级功能l 舆情数据采集挖掘l 舆情采集配置管理l 舆情数据的监控l 舆情数据的发布与展示l 舆情数据的搜索l 舆情数据分类l 舆情数据去重分析l 中文分词l 自动摘要l 舆情干扰信息智能排除l 舆情各要素的智能抽取l 舆情综合办公平台l 专题监控与传播跟踪 l 舆情趋势智能分析l 热点舆情侦测与追踪l 舆情内置词典与用户词典 l 舆情舆情简报与专报l 舆情站内高级搜索引擎l 舆情系统配置与管理l 负面舆情监测与管理l 动态图表展示l 自动分类与聚类第8章 网络舆情采集(c/s架构)在网络舆情采集方面，军犬软件采用多种先进技术打造的舆情采集工具，实现了对各种舆情信息的精准和全面采集，军犬网络舆情采集工具的部分特色功能介绍如下。1) 强大的信息采集功能强大的信息采集功能是其他所有功能的保障。采集技术不过硬的产品不可能达到有效的舆情监测效果。军犬的数据采集与数据挖掘居全行业之首，为信息的深度处理提供了强有利的保证。2) 支持各种网络载体的监控可监控各大搜索引擎，新闻门户，BBS，博客，留言版····3) 元数据搜索功能元搜索引擎集成了不同性能和不同风格的搜索引擎并发展了一些新的查询功能。查一个元搜索引擎就相当于查多个独立搜索引擎。进行网络信息检索与收集时，元搜索可指定搜索条件，从而既提高信息采集的针对性又扩大了采集范围的广度，收到事半功倍的效果。4) 内置监控网站无需过多配置便可轻松对数千网站实施监控。5) 可监控各种语言，各种编码的网站无需配置自动识别语言和网站编码。6) 信息智能提取技术网页内容智能提取技术能有效地提取网页中的有效信息，区分网页中的标题、正文等信息项，并对内容具有连续性的多个网页内容进行自动合并、网络论坛信息自动提取等。 7) 结构化采集技术对非结构化的网页数据在采集的时候进行结构化的信息抽取和数据存储，以满足多维度的信息挖掘和统计需要。8) 全天候不间断监控可定时监控，也可7*24全天候监控。实际应用中可以做到分钟级的采集更新。第9章 网络舆情分析与展示(B/S端)一、网络舆情展示与分析平台在网络舆情分析方面，军犬软件综合运用大规模文本智能挖掘技术，实现对海量舆情信息的准确、高效分析和管理，军犬舆情分析的特色功能介绍如下。1) 系统主页Ø 舆情漏斗和统计信息 Ø 最新舆情 Ø 最新负面Ø 领导信息Ø 热点舆情Ø 舆情聚类2) 最新舆情：实时展现最新获取到的，舆情研判后的网络舆情，按时间进行倒排。3) 分类舆情：按地域分类、部门分类、知名企业、领导分类和自定义分类查看舆情。4) 近期热点：按舆情热度、点击数、回复数、转载数、时间对舆情数据进行排序，当5) 专题追踪：Ø 专题传播路径（现无法查看全部转载路径）Ø 专题下热门关键词排行，关键词的热度对比前一天的涨跌标识，及热度值Ø 专题舆情列表，根据时间进行排序，其中包括了专题下的相关舆情和转载舆情。6) 负面舆情：Ø 负面比例饼状图：特征负面、疑似负面、预警负面、中性舆情文章数量百分比。Ø 特征负面、疑似负面、预警负面的载体分布：论坛、新闻、博客、综合的载体分布饼状图。Ø 特征负面、疑似负面、预警负面的站点分布。Ø 特征负面：判断准确的负面信息Ø 疑似负面：特征负面中漏掉的数据存在歧义的负面信息。Ø 预警负面：手动置为预警负面的信息，进行短信预警、邮件预警、弹窗预警。7) 趋势分析：Ø 专题热度：专题热度日增量、热度总趋势Ø 站点分布：所筛选数据的站点分布柱状图，根据每篇对应的站点名称。Ø 载体分布：所筛选数据的载体分布饼状图，根据每篇文章对应的所属载体。Ø 地域分布：所筛选数据的地域分布柱状图，根据文章中出现地域词出现的频率。Ø 图对应的表8) 舆情报告：Ø 舆情简报：定期报告，可根据用户业务需求，自定义报告周期。Ø 舆情专报：不定期，专题或特殊事件报告，报告内容可由用户自定义。Ø 报告属性：报告名称、报告类别、期数、总期数、报告内容的时间范围、报告生成时间。Ø Html版：网页版舆情报告，报告内容为报告名称、期数、总期数、报告内容时间、目录（文章标题）、报告类别、 正文。Ø Doc版：word版舆情报告，报告内容为报告名称、期数、总期数、报告内容时间、目录（文章标题）、正文。Ø Doc模板可定制Ø 手动添加舆情功能：可编辑舆情的名称、处理时间、类别、正文类别。 9) 舆情搜索：Ø 舆情搜索Ø 元搜索：Ø 元搜索Ø 相似性搜索：Ø 查询词的百度指数趋势图Ø 高级搜索10) 我的关注：Ø 关注分类：用户自定义Ø 网页探测：网页探针功能，判断网页是否在目标网站是否存在 删除/未删除Ø 加入关注：跟踪其点击数、回复数、转载数11) 系统管理：Ø 用户管理：Ø 舆情知识库管理Ø 预警管理Ø 权限控制12) 单篇舆情：Ø 标题Ø 操作区域Ø 热度、转载数、点击数、回复数Ø 相似文章13) 预警系统：Ø 短信预警：可以向指定手机号进行短信预警，发送内容为文章标题。Ø 邮件预警：向指定的电子邮箱进行预警，预警内容为标题和文章正文。Ø 弹窗预警：以右下角自动弹窗的方式，向指定工作人员预警。14) 舆情操作：Ø 入报告Ø 改变状态Ø 置为负面Ø 加入关注15) 舆情分发：按项目要求提供多个客户端，实现多用户按权限进行访问与共享，实现上下级联动，舆情的上传下达等功能。二、舆情检索功能本系统的搜索引擎将传统的全文检索技术与最新的WEB呈现技术相结合，实现了分类检索、关键词检索、高级检索等功能，检索结果按照舆情漏斗的原型进行排序。第10章 系统特点l 实用性：满足舆情监控的核心功能和重要功能，所见即所得，功能简洁清晰；l 易用性：易学习 易操作易维护 易移植 易升级；l 易实施：对硬件的配置、网络的环境要求不高；成熟稳定的系统可以直接安装后运行。已经内置了几千个监控配置，可以为项目减少实施周期；l 可靠性：系统能够24小时无故障运行； l 高性能：支持百万级以上的海量数据，并可通过简单的扩展模式支持无上限的数据；l 可扩展：系统充分考虑到了将来功能的修改或增加；l 可定制：具备二次开发能力，公司基于成熟的搜索引擎和自然语言处理的核心技术，系统进行定制开发；l 优秀服务：专业的服务团队提供专业有客户服务，实时为系统稳定运行保驾护航，力所能及满足客户需求；l 持续领先：公司专注于舆情系统的研究和开发，将综合各方面的需求，不断增加功能、优化系统、提升性能。l 技术领先：融合了数据挖掘技术、数据库技术、搜索引擎技术、网络舆情分析引擎技术以及多项自然语言智能处理技术等第11章 硬件部署与网络接入在以上硬件拓扑图中，舆情信息采集服务器个数根据所需监控的站点数量来决定，主流PC服务器，windows操作系统。部署其他应用或模块的服务器建议为主流PC服务器，使用windows操作系统。所需机器的数量没有硬性要求，可以根据实际情况进行调整。可以可以在多台机器上分开部署。以下为4台PC机的硬件建议方案：序号服务器名称具体配置系统/应用软件数量1.舆情采集服务器CPU：双核3.0GHz*2内存：4GB RAM硬盘：2*250GB HD硬盘：250GWindows 2003windowsXP32.舆情分析应用服务器CPU：双核3.0GHz*2内存：8GB RAM硬盘：2*150GB HDRAID0+11块千兆网卡Windows2003 Server1建议单独启用ADSL做为采集终端的机器接入使用，因为在采集与挖掘某些网站的数据时，这些网站会封闭某些，如果不用ADSL的动态IP，则固定IP一旦被锁，目标网站的将不能正常访问。同时，我们建议服务器也托管在外网，有公网IP，而不存放在电子政务网一起，以免因数据量过大而引起的电子政务内网访问过慢等问题。第12章 支持与服务服务过程是从顾问咨询服务开始的，在开始策划的阶段，我们的销售工程师、咨询顾问提供给您的不单单是一纸报价，而是根据具体情况，经过对项目的建设目标、需求、功能等进行详细调研的基础上，提供一套具有远见的、先进适用的、可操作性强的解决方案，其目的是降低信息化建设的风险。在信息化建设的过程中，中科点击公司提供的不仅仅是的软件产品，更重要的是提供标准规范的客户培训与系统实施服务。中科点击公司在客户信息化建设的实施过程中，对客户的培训服务将按标准、分层次进行，而且会使对客户的培训服务贯穿于舆情项目建设的全过程中。在舆情监控项目建设完成，实现成功的切换后，中科点击公司的服务并没有停止，而是转入了长期的、不间断的日常服务中，包括服务热线支持，及时的现场技术支持，客户系统运行的评估等等。12.1 顾问咨询服务中科点击公司将组织具有丰富项目调研、项目分析、系统集成经验的顾问咨询专家，结合我们在电子政务、舆情监控、竞争情报行业建设、集成、开发经验，负责详细了解该项目现状、需求、适应未来发展的系统扩展要求，结合产品为用户提供建议、规划和最佳的解决方案，为系统设计人员提供必要的技术资料。12.2 售后服务对软件产品及相关系统实施提供全面、有力、及时的技术支持服务，所有的技术支持工作将由中科点击公司专职的技术支持工程师进行。所有的客户都可通过电话、Web、电子邮件或传真方式报告问题，并获得支持；24*7访问Web在线技术支持；维护版本的发布包括问题修复、增强和升级。 ¨ 产品的安装和调试：对于购买产品的用户，公司派遣工程师现场进行产品的安装、调试和测试，并记录产品安装日志在用户和公司备案；¨ 热线电话服务：负责该项目的客户服务经理负责提供7*24小时的技术支持服务，同时，每周5天，每天8小时；电话：010-83653621；中科点击公司由专门的客户服务部为用户提供必要的售后技术支持，安排专职的技术支持工程师直接同客户进行交流，为用户提供产品的技术支持；除此之外，还对客户提出的一般性技术问题进行答惑解疑；¨ 现场技术支持：必要时，中科点击公司将根据问题的严重程度、用户的要求，派遣技术支持工程师到用户现场帮助用户排故；¨ 在线支持：在线支持系统通过24*7以即时通讯的方式提供服务，从而增强了直接支持能力。用户可以通过在线支持系统得到支持信息，如技术窍门、产品发布通知或常见问题答案等；同时，中科点击公司安排专职的技术支持工程师进行在线支持，及时对用户的在线咨询进行答复；¨ 电子邮件热线服务：中科点击公司的客户可以通过电子邮件的形式，随时获得中科点击公司的技术支持。对客户提出的问题，中科点击公司由专职的技术支持工程师予以回复。¨ 系统部署服务：具体项目中，公司提供有偿的系统部署服务，可以指定项目经理帮助用户尽快熟悉和使用相关产品，并协助用户建立与相关应用，包括：a) 系统开发服务：具体项目中，我们也提供有偿的开发服务，可以指定项目经理，组织项目队伍，帮助用户做系统设计、特殊需求功能实现及相关的应用开发工作。b) 软件许可权转移的权利：客户享有对软件许可权(license)进行转移的权利，以保护客户现有的投资。如：不同平台间的移植等。¨ 主动式服务：中科点击公司还将提供以中科点击公司通讯和中科点击公司技术研讨会的形式为用户提供主动式服务。客户将定期收到由公司市场部出版的通讯；所有的客户均可以参加不定期的中科点击公司技术研讨会，研讨会将为用户讲解最新技术、产品使用技巧、系统维护管理方法等多方面的内容。同时，在研讨会中，技术专家将现场解答客户提出的各类技术问题。12.3 软件产品升级服务软件产品的升级服务包括：提供具有新增功能的软件产品、提供主要维护版本的更新软件产品、提供软件修补包(Patch Fixes)及替代方法(Workarounds)。对中科点击公司产品，我们提供如下升级服务： ¨ 对程序BUG的修补这部分会在系统进行修补后随时向用户免费提供。¨ 产品版本的升级服务12.4 技术巡检计划整套系统安装、验收完毕后，中科点击公司将随时定期通过电话或派技术人员到现场进行技术巡检，及时了解存在的问题，并随时给予解决。中科点击公司将定期派遣相应人员现场回访，了解系统的运行情况，听取意见和建议，解决存在的问题。第13章 项目预算一、 软件部分费用软件名称数量价格（万）网络采集系统V7.13套12舆情分析系统V3.01套8搜索引擎系统1套6手机短信接口1套2合计(含一年服务费用)28二、 硬件部分费用（可自行采购）硬件投入1台分析服务器+3台采集服务器+线路搭建10三、 以后各年服务费用以后各年的服务费用28*15%=4.2万第14章 公司简介与客户案例中科点击由留美归来的林博士联合中科院多位搜索引擎领域的专家共同创办。林博士早期曾供职于Google和AOL，是Google和AOL搜索引擎的核心算法工程师。公司专注于互联网信息采集与挖掘技术，以及搜索引擎核心技术、自然语言智能处理等领域。基于公司在网络信息采集、搜索引擎、自然语言处理、知识管理系统等方面的核心技术，开发了一系列成熟稳定、性能优秀、实用易用的系统，包括：1、军犬网络舆情监控系统 全网监控 不留死角智能发现 辅助决策 2、军犬互联网采集系统 稳准狠快 深度采集 全球资源 成就伟业 3、军犬智能搜索引擎系统 提供包括站内搜索、数据加全文检索、文件全文检索、垂直搜索引擎、行业搜索引擎等产品、服务或解决方案4、自然语言处理模块包括中文分词、自动分类、自动摘要、关键词提取等模块 军犬软件的系列产品均为业内领先产品，目前已经被广泛应用到网络舆情监控、垂直搜索引擎、门户网站、电子政务、电子商务、企业竞争情报系统、知识管理与知识共享等项目中。成就了一批知名网站和优秀的信息化项目。6家上市公司的选择27家垂直搜索的核心200个电子政务网站的模块620家门户网站的工具1200家优秀企业的情报助手中科点击立志做有责任感与使命感的IT企业!研发精品软件;开发精品信息化项目!尊重每一位客户,重视每一个项目!全力以赴,使命必达,超越期望!主要成功案例公司项目/说明教育部知识发现与自动下载北京市公安局网络信息监控团中央网络信息监控与分析成都铁路局网络信息监控与分析成都军区网络舆情监控温江区委网络舆情监控凉山市公安局网络舆情监控天津市政府网络信息监控与分析山东省外经贸网络信息监控与分析新华社新闻数据采集航天二院科技信息采集与控制广西电信企业黄页数据的挖掘晋城市信息中心网络舆情监控 中国饲料在线网络采集与数据发布中国质量报网络采集与数据发布中国花卉报网络采集与数据发布宝鸡市委宣传部网络舆情监控北海市委宣传部网络舆情监控舟山市委宣传部网络舆情监控普陀区委宣传部网络舆情监控山东桓台县公安局网络舆情监控张店区委宣传部网络舆情监控廊坊市委宣传部网络舆情监控唐山市团委网络舆情监控湖南华容县委宣传部网络舆情监控甘肃酒泉信息中心网络舆情监控北京市昌平区委宣传部网络舆情监控北京市宣武区委宣传部网络舆情监控大连食品药品监督管理局网络舆情监控沈阳市行政大厅网络信息采集与发布济南农信通挖掘农业行业的产品、供求、企业数据美特好竞争情报分析与数据挖掘北京理工大学网络信息采集北京林业大学网络信息采集苏州企业在线搜索引擎系统鸿蒙网网络信息采集天下赞助网网络信息采集饭桶网网络信息采集中金在线福建最大的门户站点采用我公司的采集系统+发布系统贵州信息港贵州最大的门户网站采用我公司的采集系统+发布系统+CMS系统搜索引擎系统正在执行中中国懒网新疆境内最大的商业门户站点采用我公司的采集系统+发布系统普天集团(上市公司)我公司为其定制研发网络广告监测系统中国科协搜索引擎E都市E都市三维本地搜索由我公司采集poi信息数据九城数码(上市公司) 沱沱网n 提供分词n 搞供采集系统Kooxoo(1)招聘行业的采集,数据提供泛海国际(上市公司)采集系统互联网评论分析北科院天空招聘网招聘行业的垂直搜索引擎提供了从采集到搜索到产品架构的全过程精品购物指南精品网提供采集系统购龙网比较购物网站 提供采集系统农博网 农业行业最大的门户网站整合业内的信息资源中国电子商会行业指数系统(在建项目)北京市教委知识共享平台采集系统中国地震局Oa系统中的采集模块中华英才网竞争情报系统山东莱钢(上市公司)网络信息监控北京电信(黄页项目)企业数据挖掘和分析与处理中国移动12580POI数据挖掘、分析、处理艺龙网(上市公司)竞争情报系统新浪汽车频道汽车行业网络舆情监控系统