《安徽互联网监测系统建设方案v课件.ppt》由会员分享，可在线阅读，更多相关《安徽互联网监测系统建设方案v课件.ppt（21页珍藏版）》请在三一文库上搜索。
1、互联网监测系统建设方案,现状与需求,互联网信息传递现状,业 务 需 求,建设方案,功 能 规 划,业 务 目 标,投资预算,目录纲要,系 统 方 案,投 资 预 算,互联网信息发展现状,互联网发展已经进入快车道，当前，各种业务应用呈现出繁花似锦的景象，给人们的信息和知识的传递和分享了极大的便捷。,check-in,网页,微博,QQ和飞信等,facebook,应用形式 繁多,论坛和博客,政治,文化,经济,影响投资环境 阻碍经济发展,破坏社会信息环境 情色低俗文化传播,如今，互联网已经成为人们传递信息的最快速、最便捷、最有效的途径，同时，也滋生了不法个人和团体用来宣传和传递非法信息工具（如新疆7.
2、5事件就是通过论坛发起的），在经济、文化、政治方面产生了严重的影响。,扰乱社会治安 影响民族团结 破坏社会稳定 危害国家安全,互联网的快速发展滋生了负面信息传递泛滥,基于现状，互联网内容信息监管部门任重道远，需要采用尽可能有效的方式去监测并屏蔽、预警相关内容信息。以净化信息环境和投资环境，维护社会稳定，促进经济和社会发展。,业务需求,业务需求,提升互联网信息监管能力,营造良好的社会和经济环境,监测、预警不法互联网信息传递,现状与需求,互联网信息传递现状,业 务 需 求,建设方案,功 能 规 划,业 务 目 标,投资预算,目录纲要,系 统 方 案,投 资 预 算,业务目标,互联网信息监测系统,生
3、成舆情统计报告，并对舆情主题进行跟踪及趋势分析,通过实时检索互联网信息，及时发现不良、不法信息的传播并进行及时预警和引导,提高互联网监测的智能化程度，增强互联网信息的监管力度,业务目标,总体功能规划,互联网信息监测系统具有强大网页信息数据检索、抓取能力，依托其精细化的舆情及不法信息分析、跟踪功能，是提升互联网信息监管能力的有效手段,帮助各级领导战略决策提供依据。,1,3,5,4,2,检索不法信息和舆情传播,热点及敏感话题识别,敏感和舆情信息预警,对检索和扫面的相关信息生成统计报表,页面拍照和内容摘要,趋势分析,扫描和检索不法信息和舆情传播,实时扫描和采集互联网信息，进行处理分析，防止反动、色情
4、等信息及不良舆情的传播。同时支持原数据搜索引擎功能,信息扫面检索,网页,论坛,博客,空间等,反动言论,色情信息,非法聚会,其他信息等,特点：,采用实时主动采集和爬虫定向抓取相结合的模式，信息扫面双保险 自定义采集目标、更新时间及扫描间隔 支持多种网页格式静态网页(HTML/HTM/SHTML)和动态网页(ASP/PHP/JSP)等,实时采集和元搜索引擎功能,热点及敏感话题识别,根据信息出处权威度、发言时间密集程度等参数，利用合理的文本挖掘算法，结合权重分析，识别给定时间段内的热门话题和媒体关注焦点，同时识别敏感话题。,特点：,具有网页内容自动学习分析能力，过滤如广告及版权等非主体内容 从多维度
5、进行分析，利用文本挖掘算法等分析方法，有效区分信息标题、内容及不法和敏感主题,召集令;于X月X日在XX广场集聚抗议XXX,敏感话题和舆情信息预警,系统扫面到涉赌、涉黄等站点、对突发事件、涉及内容安全的敏感话题及非法言论传递等信息及时发现并告警，并提供相应处理预案。,特点：,及时预警，提供处理预案 支持短信、邮件、弹窗等预警方式。,对检索和扫描的相关信息生成统计表,系统提供信息检索功能：通过分析引擎处理后生成报告，用户可通过前台览，根据指定条件对非法站点、热点话题、倾向性进行查询，并浏览信息的具体内容，提升决策支撑能力。,特点：,通过图表直观展现 支持关键词模糊匹配，避免遗漏违规情况 查一个元搜
6、索引擎就相当于查多个独立搜索引擎,趋势分析,对于非法主题，系统提供在特定时间内的确实分析功能，有效掌握相关时间的发展情况及关注程度，以评估事件处理效果，提供更好的舆论引导。,特点：,支持从时间、区域、舆情变化趋势的预测和引导效果的评估 精确掌握并预测非法信息的关注的变化趋势,“XXXXX”舆情关注度变化分析,关注度,趋势线,关注人数,页面拍照和内容摘要,系统支持页面拍照功能，并对各类主题，各类倾向能够形成自动摘要，以更好的支撑调查取证和研判。,特点：,具有海量存储功能，支持页面拍照，相关页面存储起来。 自动摘要并存储文本,数据采集方式,互联网信息监测方案的数据采集采用在骨干网上旁路分流的模式，
7、利用分光器将骨干网流量分流复制到采集器，进行数据采集。此方式优点： 部署方便，对网络的干扰和影响小 具有良好的扩展性，可按需部署 升级扩容方便,骨干网上游路由器,骨干网下游路由器,Internet,GE链路,采集器,分光器,系统架构,原数据层,数据处理层,应用层,业务层,数据库数据,其他数据,数据切词,网络爬虫,光口采集,自动分类,自动聚类,文本挖掘,信息过滤,相似性检索,统计分析,数据整理,数据存储,匹配,全文检索子系统,文本挖掘子系统,统计分析子系统,告警子系统,信息上报子系统,权限管理子系统,信息检索,热点查询分析,热点追踪,目标跟踪,敏感度分析,信息来源分析,信息预警,信息上报,预案子
8、系统,处理预案分析,关键词库 url库,论坛,新闻,博客,微薄,网页数据,其他,互联网信息监测系统架构,网络拓扑图,Internet,分光器,关键词库 url库,磁盘整列,分析处理服务,Web统计服务器,爬虫,Internet,数据库服务器,匹配,本系统数据来源方面，采取主动采集数据和爬虫主动爬去的方式进行。主动采集是利用分光器在骨干网节点进行用户数据采集，爬虫服务器择把其直接接入互联网，按照规则进行数据爬去，从而有效的补充监测信息的完整性，防止“盲点”出现，同时也减少采集和解析压力，降低硬件投入。,骨干网节点,采集器,清洗、解析服务器,关键技术,强大的信息采集和数据处理能力,采用在骨干网用户
9、数据采集及爬虫抓取的大而全的采集模式 定时监控，分钟级采集 平均单机处理达到TB级别数据处理能力，被监控网站所发布的新内容，几分钟内就可被系统获取。,积累了海量的地址库和词库,我们通过平常的采集和沉淀，已经十万级词库库量和百万级地址库 同时具有很强的学习更新能力,自动关键词和自动摘要技术,基于内容的文本自动分类 基于规则的文本分类 基于相似性算法的自动聚类技术，自动对海量的无类别文档进行归类，把内容相近文档归为一类，并自动为其生成主题词，为确定类目名称提供方便。,自动关键词和自动摘要技术,将传统的全文检索技术与最新的WEB搜索技术相结合，大大提高检索引擎的性能指标。同时融合了多种相关技术，提供丰富的检索手段以及同义词等智能检索方式。,现状与需求,互联网信息传递现状,业 务 需 求,建设方案,功 能 规 划,业 务 目 标,投资预算,目录纲要,系 统 方 案,投 资 预 算,硬件投资预算,Thank You！,