1、 浙江省能源计量数据公共平台系统浙江省能源计量数据公共平台系统-技术方案建议技术方案建议1目目 录录1 1、单位介绍、单位介绍2、建设思路3、功能说明4、技术架构5、类似案例介绍6、优势目目 录录1、单位介绍2 2、建设思路、建设思路3、功能说明4、技术架构5、类似案例介绍6、优势省平台系统 直采管理年耗能5000吨标准煤以上的用能单位及机构的能耗数据接入市中心能源计量平台数据接入企业能源管理中心的进出用能数据能源计量平台(省市两级建设模式)市平台系统采集管理年耗能5000吨以下的用能单位及机构的能耗数据平台建设规模和运行模式一期建设目标一期目标 完成省中心主站建设 嘉兴市能源中心数据接入 2
2、个重点能耗企业能源管理中心接入全省1万吨以上耗能单位(总共667家)的能耗数据采集系统主要使用对象受众范围受众范围B BE EC CDDA A各级政府部门各级能源管理部门(发改、经信、统计等)用能企业供能单位能源市场公众节能服务单位能源生产数据4一次能源(煤炭、原油、天然气、核能、水能)、二次能源(电、热电联产、原油加工)、可再生能源(风能、太阳能、潮汐能、垃圾发电、生物质能、地热)4自产、调入、进口能源消费数据4工业企业(电力、煤炭、钢铁、有色金属、石油石化、化工、建材、造纸、纺织、印染、食品加工等)重点用能单位能源消费4公共机构能源消费4宾馆、商厦、写字楼、机场、车站等商业民用领域能源消费
3、4农业及农村能源消费4交通运输能源消费碳排放数据4根据能源消耗计算得出取水数据4含自来水、地表水、地下水数据排污数据4含化学需氧量排放数据、二氧化硫排放数据、氨氮排放数据、氮氧化物排放总量能源数据范围能源数据范围数据来源根据各种接口方式实现数据采集.检查机构对重点用能单位的能源计量器具配备和管理的检查报告国家和浙江省有关部门规定或提供的能耗限额、“领跑者”标准值、行业平均值碳排放计算和碳汇网站环保和水利网站进出用能计量器具、主要次级用能计量器具、主要用能设备计量器具直接采用各地市能源数据计量中心数据库重点用能单位内部能源采集系统统计部门公布的能量折算系数和各单位、各地区GDP值目目 录录1、介
4、绍2、建设思路3 3、功能说明、功能说明4、技术架构5、类似案例介绍6、优势基本能力诉求-建立能源计量数据公共平台,实现对我省各行业用能单位及公共机构的水、电、气、油、煤等能源的能耗数据的准确计量、集中采集和动态监测.-为政府实施节能管理提供权威准确的能源计量数据,向社会提供能源计量量值传递和溯源、能源审计、节能监测、节能评估、节能量审核、能耗限额对标、能平衡测试、能效检测、节能规划、碳排放计量等全面的节能技术服务“能源准确计算、采集和监测”诉求:数据公共平台“信息在线发布和共享、决策支撑”诉求:综合管理平台-11-能源实时监测能源数据发布能源分析能源采集和存储能源查询利用物联网技术实现耗能工
5、质的计量数据以及相关能耗排污数据准确采集工业用能单位、公共机构、建筑、交通运输、城乡建设和消费领域、商业及民用节能领域能源数据能源数据存储和数据备份对用能企业的历史数据进行浏览及查询数据报表查询和生成依托GIS进行实时能源查询依托大屏幕和GIS技术对各企业、地市能耗数据进行实时监控,并在大屏幕中动态实时显示对能源异常进行预警能源利用状况分析(万元产值能耗)节能效能评估和核算能源结构和匹配系统分析能源预测门户网站:通过网站形式对外发布用能总量、能耗指标分析等数据分权访问:政府部门、用能单位及公共分不同权限进行访问能源总量预警能源消费总量预测预警:各地区能源消费总量和重点用能单位异常能源预警:异常
6、能源使用及时反馈用户(极值偏离警示)能源优化:对实时数据进行智能分析对能源网络使用实现实时优化和管理,对企业和行业用能根据限额指标警示功能结构目目 录录1、介绍2、建设思路3、功能说明4 4、技术架构、技术架构5、类似案例介绍6、优势13技术架构14为解决在数据架构和应用上的各个问题,应建设ODS系统和DM系统,形成浙江省能源计量数据中心的数据统一平台ODS(Operational Data Store):运营数据仓储DM(Data Mart):数据集市系统系统名称名称系统定位系统定位系统特性系统特性数据模型数据模型数据在线期限数据在线期限使用单位使用单位数据应用方式数据应用方式ODSODS省
7、级的能源统一数据平台满足省级和地市级和能源数据有关的共性应用省级能源统一数据模型=13月(按需求分别以明细和汇总格式存储)省/地市级的决策、管理、分析人员和地市级的管理人员报表多维分析即席查询数据挖掘数据提供DMDM在省公司指导和管理之下的地市级的能源统一数据平台满足地市级和能源数据有关的个性应用以ODS数据模型为共性标准,再加上个性化的扩展=13月(按需求分别以明细和汇总格式存储)地市级的决策、管理、分析人员报表多维分析即席查询数据挖掘数据提供数据仓库建设模式数据仓库建设模式-省省ODS和市和市DM数据仓库典型软件结构数据仓库典型软件结构复杂报表即席查询数据的分析数据挖掘Web服务器/门户数
8、据仓库的管理数据源EDW数据仓库的形成数据的抽取/转换/加载ETL遗留数据现有业务系统OLTP/ERP外部数据知识工人最终用户数据信息知识智慧智能OLAP分析数据集市ODSEAIEIIADB数据共享个性化定制中国移动广中国移动广东公司东公司/IBM CONFIDENTIAL|10-Jul-25 16数据仓库技术数据仓库技术-ETL技术技术中国移动广中国移动广东公司东公司/IBM CONFIDENTIAL|10-Jul-25 17维度表维度表用户维表地域维表资源维表维表排水事实表排污事实表碳排放事实表事实表事实表用户类地域类资源类SP供应商类主题分析立方体主题分析立方体用户需求表资源需求表地域需
9、求表行业需求表用户需求报表用户需求报表OLAP分析分层结构分析分层结构数据仓库技术数据仓库技术-数据仓库建模数据仓库建模18数据仓库技术-元数据仓库End User tool数据仓库数据仓库源系统源系统数据集市数据集市单一数据视图单一数据视图单一元数据视图单一元数据视图元数据仓库元数据仓库数据模型数据模型专有和不同元数据19数据仓库技术-商业智能(基于Eclipse的BI Design Studio)SQL Generated From Data FlowData FlowControl FlowEnterprise SchemaData WarehouseProject中国移动广中国移动广东
10、公司东公司/IBM CONFIDENTIAL|10-Jul-25 20用户访问终端用户访问终端数据数据ETLETL用户访问终端用户访问终端中心中心ETLETL备用采集机备用采集机报表服务器报表服务器数据仓库数据仓库备份存储设备备份存储设备磁盘阵列磁盘阵列应用服务器应用服务器LANLANIBMIBMIBM数据仓库服务器数据仓库服务器IBM能源生产和消耗采集排水排污采集碳排放采集其他能源数据采集WEBWEB服务器服务器(负载均衡负载均衡)SAN FSIBMIBM数据仓库典型硬件结构数据仓库典型硬件结构中国移动广中国移动广东公司东公司/IBM CONFIDENTIAL|10-Jul-25 21服务器
11、响应负载分担负载均衡服务器用户提交查询查询结果返回应用服务器数据仓库应用服务器#1(Tomcat)应用服务器#2(Tomcat)数据仓库技术数据仓库技术-负载均衡负载均衡22.Single Database ViewParallel OptimizerUserQueryNode(CPU)Node(CPU)Node(CPU)Node(CPU)支持支持Share-Nothing软件体系结构软件体系结构各个物理节点彼此独立CPU、内存和磁盘均互相独立每个节点机既可以是单CPU计算机也可以是多CPU的SMP机或者或者在一个大的SMP服务器上创建多个逻辑数据库分区(逻辑节点)节点间通讯通过内存而不是通过
12、网络进行数据在各个节点之间分区数据在各个节点之间分区一切均并行一切均并行SelectInsertUpdateDeleteBackup/restoreLoadCreate indexReorg数据仓库技术-数据库分区技术一切均并行一切均并行数据仓库选型数据仓库选型SYBASE IQODS服务器服务器SYBASE IQSYBASE ODS Architecture数据采集服务器数据采集服务器Informatic PowerCenter作为数据源作为数据源数据仓库/集市基于ODS的应用.SYBASE ASEOperational SystemsHeterogeneous EnvironmentInf
13、ormixOracleMicrosoft SQL ServerApplicationIBM DB2ApplicationApplicationApplicationApplicationAvaki数据共享服务器数据共享服务器SYBASE AvakiEAI服务器服务器SYBASE Unwired OrchestratorReportingEnvironment.etc.数据转换数据转换中央数据仓库中央数据仓库信息展现信息展现业务用户业务用户源数据源数据数据获取数据获取数据管理数据管理数据使用数据使用项目管理 数据仓库实施指导方法论业务规划 信息评估 逻辑数据 模型设计 物理数据模型设计数据库管理
14、 元数据管理 应用开发 顾问咨询 知识转移 TMIS系统系统客运系统客运系统外部信息外部信息MIS 系统系统抽取转化过滤加载随即查询随即查询报表报表多维分析多维分析数据挖掘数据挖掘Portal集成集成RelationalTransformationOLAPData Mining数据集市Oracle 10g直接用户直接用户(客户端客户端)Olap用户用户Web用户用户应用应用服务器服务器决策者分析员研究员查询人员数据仓库选型数据仓库选型ORACLE 10G25q提供通过有线或无线网络进行图像和各种报警信号远程采集、传输、储存、处理、转发服务。客户使用千里眼业务,可以从手机或PC终端获取清晰、逼真
15、实时监控图像和各种报警信号,可以有效满足用户的监控、安防、远程查看需求。q目标用户为家庭及集团客户。摄像机编码设备电视墙业务管理视频解码设备PC端存储与分发有线/无线网络摄像机手机端视频技术-视频监控解决方案WEBWEB前端前端应用服务层应用服务层数据库和公共服务层数据库和公共服务层ESBESB和数据接入层和数据接入层Apache 2 Web Server Apache 2 Web Server 提供提供Web Web 服务器、静态页面缓存、负载均衡分发服务器、静态页面缓存、负载均衡分发Tomcat Tomcat 应用服务器应用服务器提供提供J2EEJ2EE运行框架,运行框架,实现基础应用环
16、境、实现基础应用环境、提供集群等功能提供集群等功能Lifray Lifray 开源门户,提开源门户,提供门户基础框架及供门户基础框架及大量开箱即用页面大量开箱即用页面部件功能部件功能IBM DB2 IBM DB2 提供数据库服务提供数据库服务OmniFindOmniFindIBM OmniFindIBM OmniFind提供企业级信息和内容搜索服务提供企业级信息和内容搜索服务Message BrokerIBM Websphere Message Broker IBM Websphere Message Broker 提供实现高级企业服务总线提供实现高级企业服务总线,连接各种网管支撑连接各种网管
17、支撑系统,提供面向服务的集成的系统,提供面向服务的集成的门户技术门户技术基于基于LIFERAY门户技术门户技术基于基于MOSS大屏幕技术大屏幕技术基于基于PIXELNETu 支持多屏幕分视图输出,将不同的视图通过自定义设置或者大屏幕管理软件,投射到不同屏幕终端u 不同视图通过逻辑虚拟桌面管理可以共用一个屏幕或者分开按照不同布局组合u不同屏幕内的呈现视图可以互相响应调用,用户可以随时将焦点进行划分u支持多主题划分,可以定义一个大多个小,或者多个小等等不同需求下的呈现主题GIS技术技术基于基于ARCGIS选型选型使用GIS 进行信息呈现4呈现重要对象和要素,对要保障的区域和建筑物进行缩放和各种形式
18、的查看;4将关注和检测指标和GIS 上的地理区域关联;4将重点区域结合GIS 地图进行展示4将指标以叠加的区域色块在地图上进行呈现4对自然灾害的影响在GIS 地图上展示出来4支持的GIS 展示手段2D 地图、3D 地图、卫星地图支持arcgis、高德gis、mapinfo、百度地图等通过GIS 进行调度和指挥4在GIS界面上进行应急调度操作和部署;4在GIS 地图上进行车辆,油机状态的调度利用GIS 进行决策和分析4自动在GIS 地图上进行巡航和跟踪,可以将需要的保障的地点集合或者对象组合成为GIS 移动的路径轨迹,进行持续性跟踪监控和关注;4结合GIS 地图和影响的保障对象,分析可能对移动业
19、务的影响并做出预估分析综合呈现技术综合呈现技术-RIA应用、应用、FLASH和和FLEX 首选的呈现技术支持CSS 和丰富的交互展示强大的图表和页面组件支持生动的动画支持各种动画特效的展示友好的UI响应各种主题风格的制定和动态加载(明快,活泼,沉稳,监控)-31-WAP WAP 应用案例应用案例-卓越门户移动版Web APPWeb APP 案例案例-集客管理移动版主流终端支持主流终端支持-Android-IOS-为移动应用性能优化定制的后台服务移动终端呈现技术移动终端呈现技术-HTML 5-CSS 3-Javascript成熟的移动终端开成熟的移动终端开发能力发能力-WAP应用-Web App
20、终端 App终端开发技术终端开发技术 基于基于Android和和IOS目目 录录1、介绍2、建设思路3、功能说明4、关键技术5 5、类似案例介绍、类似案例介绍6、优势u 支持面向个人;面向群组/班组/科室u 面向业务角色;面向领导和外部来访者u 进行各种个性化的虚拟子门户和个人工作区域的定制化应用视图区域,可定制各种综合网管应用界面监控频道视图区域,可以把各种GIS,告警,仪表视图组件在展现TD 专题视图的集成界面信息发布及共享文档和内容管理区可定制化的常用链接区某省门户系统某省门户系统某省大屏幕应用某省大屏幕应用-日常工作场景日常工作场景 以日常监控内容展示为主,展示设备性能、网络流量、告
21、警信息、视频流画面、机房环境监控、机房摄像监控、滚动信息等,例如:机房摄像监控机房环境监控视频流监控滚动信息网管和告警信息监控(滚动)某省大屏幕应用某省大屏幕应用-通信保障场景通信保障场景 以监控和保障内容展示为主,展示设备性能、告警信息、并发量、通信保障流程和联系人、视频流画面、机房环境监控、机房摄像监控等 例如:机房摄像监控保障联系人视频流监控并发量网管和告警信息监控(滚动)某省大屏幕应用某省大屏幕应用-领导参观场景领导参观场景 以监控和指标等系统情况展示为主,展示欢迎界面、网管监控界面、视频流画面、报表图表、机房环境监控、机房摄像监控、滚动信息等 例如:拓扑图网管界面视频流监控滚动信息欢
22、迎界面37某省基站视频监控场景某省基站视频监控场景每个基站配置一支摄像枪和每个基站配置一支摄像枪和一台单路网络视频服务器。一台单路网络视频服务器。视频、音频、告警信号经过视频、音频、告警信号经过网络视频服务器处理后通过网络视频服务器处理后通过核心网和网管网传递到省网核心网和网管网传递到省网管中心视频监控中心。管中心视频监控中心。网络视频服务器对视频数据网络视频服务器对视频数据进行本地存储,再传到视频进行本地存储,再传到视频监控中心监控中心网络要求每路视频带宽不小网络要求每路视频带宽不小于于2M,网络时延不超过,网络时延不超过0.5秒,秒,D1尺寸(尺寸(704*480),解码),解码25帧帧/
23、秒秒应用服务器应用服务器存储设备存储设备视频监控中心视频监控中心网管网网管网音频、视频、告警网网络视频服服务器器码流服务器码流服务器某省视频监控场景某省视频监控场景核心应用模块核心应用模块视频配置视频配置云台控制云台控制实时监看监听实时监看监听RS485控制控制视频报警管理视频报警管理核心处理模块核心处理模块 应用服务应用服务 码流服务码流服务-39-n n各种关联告警展示和统计各种关联告警展示和统计n n自定义的各种图层和指标展示自定义的各种图层和指标展示n n问题小区关联展示问题小区关联展示n n各种话务热点和覆盖展示图层各种话务热点和覆盖展示图层n n外围事件展示外围事件展示(天气、台风
24、暴雨天气、台风、暴雨)跨专业的告警统计问题,最差小区分析BSC话务热点设备覆盖范围外围信息展示丰富的资源图层信息某省网管GIS应用场景40q提供通过有线或无线网络进行图像和各种报警信号远程采集、传输、储存、处理、转发服务。客户使用千里眼业务,可以从手机或PC终端获取清晰、逼真、实时监控图像和各种报警信号,可以有效满足用户的监控、安防、远程查看需求。q目标用户为家庭及集团客户。摄像机编码设备电视墙业务管理视频解码设备PC端存储与分发有线/无线网络摄像机手机端某省视频监控系统场景某省GPRS电力抄表系统场景1、电表:1.0级单相静止式(电子式)电度表,具有光耦脉冲输出功能。2、带GPRS功能的采
25、集器(GPRS-TY1型):(1)24个I/O口,可带24户电度表(2)停电数据保护(3)带后备电源,停电后仍可抄表3、抄表内容:(1)电量(2)其他4、抄表形式:(1)自动抄表(2)定时上报(3)实时查询42某省数据仓库应用某省数据仓库应用-日志分析日志分析WAP话单GPRS G话单GPRS S话单DNS日志彩信ILOG彩信TLOGPORTAL日志RADIUS日志NAT日志梦网网关话单行业网关话单互联网关话单DSMP鉴权批价日志DSMP订购日志DSMP退订日志DSMP同步日志WLAN话单智能网话单系统建设了4年,总共接入了10类业务18种话单(日志),使用基于ORACLE RAC的数据仓库技
26、术某省数据仓库应用日志分析业务系统业务系统日话单条数日话单条数(2009/032009/03)日占用空间日占用空间(GB)(GB)(2009/02009/03 3)日话单条数日话单条数(2010/122010/12)日占用空间日占用空间(GB)(GB)(2010/12 2010/12)月增长率月增长率(%)(%)WAP800,000,000255.513,084,000,000984.996.98GPRS180,000,00037.96577,800,000121.856.00MMS127,000,00026.87331,400,00070.134.91ISMG135,000,00030.46
27、162,000,00036.550.92DSMP36,000,0006.8979,200,00015.194.01月占用空间10730.736861.3单采集机支持日均单采集机支持日均2亿条数据采集能力亿条数据采集能力单日入库总数据量达到单日入库总数据量达到3TB,月均数据,月均数据10TB,总数据近,总数据近100TB数据入库速度达到每秒数据入库速度达到每秒2万万/条条44某省数据仓库应用某省数据仓库应用-WLAN网管(管理网管(管理100万万AP)地市名称地市名称 现有设备数量现有设备数量 100W AP时,预计各地市时,预计各地市AP数量情况数量情况 100W AP时配置采集机数量时配置
28、采集机数量 莱芜莱芜 3465 10828 一台RX2660 威海威海 17570 54906 两台RX2660 德州德州 10272 32100 一台RX6600 淄博淄博 15022 46944 一台新增 菏泽菏泽 10689 33403 一台新增 东营东营 8117 25366 一台RX3600 济宁济宁 27738 86681 两台新增 日照日照 13621 42566 一台新增 烟台烟台 31372 98038 两台新增 泰安泰安 14573 45541 一台RX2660 滨州滨州 11809 36903 一台RX6600 济南济南 42375 132422 三台RX6600 聊城聊
29、城 10135 31672 一台RX3600 潍坊潍坊 29099 90934 两台新增 枣庄枣庄 9704 30325 一台SUN440 青岛青岛 47833 149478 三台RX6600 临沂临沂 25495 79672 两台RX2660 合计合计 328889 1027778 26-45-某省高并发访问场景某省高并发访问场景某省高并发访问场景某省高并发访问场景面向客服部门,系统用户数和并发访问面向客服部门,系统用户数和并发访问量急剧增长,系统架构如何应对?量急剧增长,系统架构如何应对?某省网投支撑系统某省网投支撑系统将用户请求分发到不同应用服务器,实现请求处理的负载均衡,最大限度发挥各台设备性能,缩短处理响应时间,提升用户感知高高 效效有效支撑2000个用户的并发操作,能够通过扩展应用服务器数量来线性提升并发能力可扩展可扩展-4646-某省网管高可用性场景某省网管高可用性场景某省网管高可用性场景某省网管高可用性场景 配置2台SUN M5000构成双节点 RAC实例,实现实例冗余和负载均衡 配置2台应用服务器实现双机热备 配置磁盘阵列实现共享的存储区域基于基于Oracle RACOracle RAC的高可用性的高可用性某省动WLAN网管系统目目 录录1介绍2、建设思路3、功能说明4、技术架构5、类似案例介绍6 6、优势、优势