1、1H3C Restricted 内部公开1Powered By DataEngine大数据建设思路分享2H3C Restricted 内部公开201系统演示大数据建设思路分享023H3C Restricted 内部公开3大数据4V特性决定了建设思路Volume(体量)Variety(多样)Value(价值)Velocity(高速)传统数据处理量的10倍到百倍;数据量级基本在TB到PB级以上;数据爆发式增长:每年30%;传统数据以数据库内操作交易数据;数据类型、来源多种多样:多维度交叉分析,是大数据技术的核心;数据价值密度低;数据背后蕴藏规律和价值;秒级是临界点,否则返回的结果可能过时;区别大数
2、据和传统OLAP的关键差别;沙里淘金为了一点金子需要保存全部沙子新型的工具,才可以做到4H3C Restricted 内部公开4数据价值挖掘数据资源整合处理技术升级第一阶段第二阶段第三阶段大数据建设厂商客户ISV大数据研究咨询机构平台提供厂商客户ISV5H3C Restricted 内部公开5大数据方案建设的四个子项数据治理数据平台数据应用搭建大数据基础平台,解决数据不可持续发展问题?创新应用,解决数据价值问题?数据共享数据共享,解决不通的问题?水利数据、人口数据、交通数据、GIS数据等统一标准、提高质量,解决不可用?6H3C Restricted 内部公开6数据价值挖掘四个层次4321第一层
3、次第一层次第二层次第二层次第三层次第三层次第四层次第四层次数据价值呈现关联分析关联分析关联分析关联分析数据碰撞印证,发现相关规律统计分析采用大数据平台工具快速替代传统的统计分析手段,快速业务呈现统计分析统计分析关联分析关联分析趋势预测趋势预测决策支撑决策支撑趋势预测在数据集中的基础上对历史数据挖掘,做出趋势的预测决策支撑在大数据分析、学习、模型训练的基础上提供决策支撑由于认识水平、人才缺乏等因素,大部分的大数据应用都处于第一、二阶段,这正常的过程,无需在大数据建设应用的初期寄以过高的希望。前景美好,道路曲折7H3C Restricted 内部公开7大数据建设怎么开展数据标准、数据清晰、数据质量
4、数据目录建设,为数据挖掘打好基础。,数据治理筑巢引凤,招商引智ISV围绕大数据资源开发各种应用大数据创业、创新平台,用“数据”孵化高技术企业双创平台01020304构建城市数据引擎,做数据集中。与传统城市建设相比,我们“不拆,但是要迁”,要把符合共享开放要求的委办局数据都集中(迁移)到城市数据引擎,聚集新经济核心资源。数据集中信用大数据建设大数据行政效能监督体系建设政府综合治税大数据系统建设提供大数据开发工具集大数据营商环境建设为开发商、企业进驻提供条件四通一平招商引资开放商进入,住宅、综合体等等建设产业园区,孵化企业产业园区传统城市建设无疑不是从征地、拆迁开始拆 迁建设管委会建设政府办事大
5、厅,工商、税务、审批一条龙服务学校、商场营商环境数据交易?等一等8H3C Restricted 内部公开8大数据项目建设思路数据治理数据平台数据应用和运营数据共享1思路一:1、先数据资源整合(共享+治理+平台)“搭台子”2、大数据的应用和创新思路二:1、以业务逻辑清晰的大数据应用作为“抓手”,做好数据资源整合(共享+治理+平台)29H3C Restricted 内部公开9“数据”资产是大数据创新和运营的根本平台创新和运营孵化器数据创新和运营的根本应用价值呈现徐宗本院士强调徐宗本院士强调“大数据从数据分析,到预处理,到管理方式,到适当的分析和挖掘,到结果解大数据从数据分析,到预处理,到管理方式,
6、到适当的分析和挖掘,到结果解释,到修正的过程释,到修正的过程数据是基础,平台是支撑,技术是核心,效益是根本数据是基础,平台是支撑,技术是核心,效益是根本”10H3C Restricted 内部公开10Powered By DataEngine数据获取处理数据采集共享数据存储加工数据湖泊数据展示工具数据源数据引擎环境质量、污染防治、生态保护实时数据非实时数据价值数据交易数据分析挖掘应用开发引擎数据框架数据管控、数据安全数据集中存储环境质量检测实时分析/预警传统产业赋能环保创新孵化污染防治综合分析/预测自然与环境保护应用监测点、政府、互联网新华三大数据公司ISV、大数据孵化产业数据应用系统三个环节
7、缺一不可11H3C Restricted 内部公开11大数据区别传统IT建设模式需求驱动数据驱动业务需求数据模型架构设计开发集成测试运行维护探索结果预测检验学业自动预警选择数据源加入所有与学生相关的数据源假设上课、图书馆、上课、图书馆、上网上网体育体育、消费消费?新方向沉迷网络辅导价值体系培养一个问题学生的学业能不能早知道?优化模型早餐早餐、图书馆、图书馆、上网上网识别模式学业预警模型学业预警模型12H3C Restricted 内部公开12数据引擎到底长什么样?税务数据集成引擎(数据共享交换和治理)应用开发引擎数据服务数据共享交换数据质量监控数据标准管理元数据管理应用构建工厂数据科学工厂科
8、研数据集开发知识库商务智能引擎安全和一体化运维视觉引擎人工智能引擎机器学习数据挖据数据运营引擎 数据计算引擎离/在线计算流计算分布式数据库数据资源运营业务应用开发平台资源运营大数据创新平台工商公安财政政务社保国土药监内外部数据源(非结构化、半结构化、结构化数据)13H3C Restricted 内部公开13数据集成引擎应用数据库消息文本文件XML影音图像CSV日志数据数据仓库文件系统资源目录应用分布式抽取分布式转换分布式加载数据质量管理数据生命周期管理 数据源数据集成引擎目标数据轻松整合海量异构数据、节约40%的时间14H3C Restricted 内部公开14数据集成引擎核心能力数据整合新旧
9、系统业务更替,迁移跨组织数据移动数据分析建设大数据标准工具+大数据数据治理方法论和标准+“数农”15H3C Restricted 内部公开15OLAP多维分析演示计算指标维度过滤数据联动复用钻取换维BI商务智能进行轻量级业统计分析展现多维度数据碰撞和轻量级创意Powered By DataEngine应用开发引擎用开发引擎企业工商公安财税政务H3CData ADE应用开发引擎智能决策运营智能用户画像应用构应用构建工厂建工厂应用部应用部署管理署管理业务数据 交易数据互联网数据文本数据数据科学工厂产品License咨询、开发培训、建模服务+在线资源免费同步销售方式一站式大数据应用开发平台“创 新”
10、应用开发效率提高30%以上降低大数据开发门槛快速实现基于大数据业务创新17H3C Restricted 内部公开17 数据视觉引擎30余种数据源200类图表类型PB级数据秒级响应零编码可视化分析多屏完美共享18H3C Restricted 内部公开18数据视觉引擎:价值呈现视觉美观+快速实时或多维统计碰撞统计/关联分析+大数据处理+数据展现作为“抓手”推进大数据杠杆19H3C Restricted 内部公开19值得信赖的朋友DataEngine 应用开发引擎数据集成引擎数据视觉引擎“戏台子”,“生态土壤”“百花齐放”20H3C Restricted 内部公开20新华三厚积薄发-大数据 4年研发
11、创新100+功能增强改进200+项大数据发明专利4大核心团队100+案例案例500+资深研发21H3C Restricted 内部公开21DataEngine 产品资质计算机软件著作权证书工信部基础功能测试报告工信部性能专项测试报告数据中心联盟理事单位信标委大数据标准工作组成员客户使用报告工信部信标委大数据系统测试报告泰尔实验室检验报告项目中标合同22H3C Restricted 内部公开22n200多篇相关专利n近30篇核心专利n工信部信息通信研究院测试:功能32项,100%通过,性能12项,6项第一,4项第二。n荣获工信部中国电子信息产业发展研究院颁发大数据企业50强称号。n江苏等省公安厅测试:28项,100%通过n公安部视频监控实验室大数据标准制定n公安部大数据安全标准制定DataEngine 成就卓著DataEngine 技术功底23H3C Restricted 内部公开23基于大数据的业务创新来自客户大、快、全、预测和辅助决策要想做的好,数据要多,要全(单业务-多业务-跨组织)、千万不能搞数据“烟囱”先搭台子把数据之流从开始就引入生产并行的分析系统、不适合精准性、事务性一期大数据项目结束是探索开始用数据说话Powered By DataEngineTHANKS新华三大数据感谢观看