生态环境数字化管理系统和指挥中心建设需求
1、项目背景
以建设前端环境感知为切入点,以“建立发现机制,处置机制,实现全域全要素构想,实现实时响应,最终形成闭环”为理念,采集各类环境动态数据,服务产业发展及社会管理。
建设环保指挥中心,以此为载体,将生态环境应用与生态环境管理深度结合,完善发现机制、处置机制,持续改善生态环境质量,提升人民众环境满意度。
2、建设目标
本期主要建设规模:
(1)建设区生态环境数字化管理系统,收集并分析各项前端数据。
(2)在区环保大楼建设环保指挥中心。
3、建设内容
区生态环境数字化管理系统的建设将在总体规划的基础上分步实施,本期包括以下内容:
3.1生态环境数字化管理系统建设
3.1.1数据管理中心
数据管理中心是对数据进行综合分析的重要前提。本项目将在统一的通用元数据管理标准基础上,按照“一数一源、一源多用”的原则建立一个面向全部应用的中心数据库,通过数据采集系统,完成对区现有的各类环境数据的自动收集、整理和整合,使来自于不同源头的数据在统一的数据中心集中存储,并发布接口服务实现相关数据的对外共享和对各个业务系统的支撑,确保数据的一致性。数据管理中心还整合支撑业务系统的应用组件和AI智能计算组件,用于支撑系统的各项功能。同时包含对用户进行统一权限管理等功能。
3.1.1.1数据服务
(一)日志服务
日志服务是生态环境数字化管理系统稳定运行的重要保障,日志服务采用独立的运行机制,主要包括日志采集、日志解析和日志分析三个服务。
(二)采集服务
数据资源中心需要整合的数据是多源异构的,数据采集服务基本的流程是数据采集、数据清洗、数据转换。数据采集是需要针对不同数据源采用不同适配的技术手段实现数据的获取;数据清洗是对数据项的重构、删去不需要信息、编码译码、检查完整性和相容性等步骤,使获取到的数据可用;数据转换是使数据成为和本中心的元数据标准和大数据系统相匹配的结构,以便存储到本中心体系中。
本项目中将实现和省协同管理平台的对接,采集省级相关数据;以及结合区本级系统需求对接第
三方业务和监测系统。
(三)元数据库
本智慧数据中台是通过元数据实现多源异构数据资源的标准化和统一管理,将所有的信息都进行抽象,以对象为核心进行标识。每个对象具有三类特征“信息、数据、空间”。
3.1.1.2数据运维
(一)日志管理系统
日志管理系统包括日志记录和日志查询。日志记录将详细记录系统运行过程中的所有操作记录、任务记录、运行记录、监控记录、短息记录、移动端记录、数据库操作记录;日志查询是直观的监控数据
图表(实时、历史、可回放),能显示带说明的错误信息。能根据要求显示所有的输入输出数据,能跟踪及显示逻辑控制流程。
数据管理系统有哪些日志管理为独立系统,具备良好的可视化界面,可与平台进行逻辑隔离,有权限的管理维护人员只须查看日志管理系统并参考维护手册即可正常开展系统的维护工作,保证系统的正常运行。
(二)采集接口管理系统
大数据资源中心需要整合的数据是多源异构的,数据采集服务基本的流程是数据采集、数据清洗、数据转换。数据采集有不同的技术手段网络爬虫、Web服务、源系统提供的API二次开发、中间库采集、离线文件导入等各种,但是每个数据采集项目都归集为一个数据采集接口在自动化运行。采集接口管理系统是一个相对独立的监管系统,通过接受每个接口提交的心跳信息、报告信息、告警信息来监控每个采集接口的状态;同时可以通过发送信息流的方式,对接口实施操作,如启动、停止、设定计划等。
采集接口管理系统具备良好的可视化界面,可与平台进行逻辑隔离,有权限的管理维护人员可以通过系统统一管理所有的采集任务,并接受异常告警信息,保证系统数据采集任务的正常运行,保证生态环境大数据资源中心数据的完整性和有效性。
(三)元数据管理系统
元数据管理系统是对通用元数据架构的可视化管理系统,用于建立和维护本项目的数据资源体系,具备极强的稳健性、可扩展性。
(1)对象类型管理
浏览和查询对象类型列表;新建、编辑和删除某个对象类型,支持批量删除;所有删除的记录可以从回收站中回。对象类型除了名称以外最重要的信息是空间类型,包括“点线面”三种;当创建对象类型后,会在空间数据库中新建一个该类型的矢量图层。
(2)参数管理
浏览和查询所有的参数列表;新建、编辑和删除某个参数,支持批量删除;所有删除的记录可以从回收站中回。参数包含参数类型、参数名称、数据类型和参数单位等信息。
参数类型包括“采集参数、状态参数和位置参数”。大部分参数都属于采集参数,即传感器监测到的参数,例如水温、PH值;状态参数是指自身所处的可变状态,例如开关状态、监测设备异常状态等;位置参数是指移动目标GPS所记录的位置经纬度坐标。
(3)设备类型管理
浏览和查询所有的设备类型列表;新建、编辑和删除某个设备类型,支持批量删除;所有删除的记录可以从回收站中回。设备类型可以记录品牌型号,但不是必须的。
(4)设备参数管理
设备类型的主要功能就是监测一组参数,因此建立设备类型后需要配置该设备类型所能监测的参数有哪些。本模块浏览和查询所有的设备类型的参数列表;新建、编辑和删除某个设备类型的关联参数,支持批量删除;所有删除的记录可以从回收站中回;查询时可以通过选择设备类型查看某一种设备类型关联的所有参数,也可以选择参数查看可以监测该参数的所有设备类型。
(5)设备管理
设备类型和设备参数管理模块配置完成后,创建了一种特定的设备类型可以监测一组参数;而设备管理是在某个特定的设备类型下创建和管理实际的监测设备。
本模块浏览和查询所有的设备列表;新建、编辑和删除设备,支持批量删除;所有删除的记录可以从回收站中回;查询时可以通过选择设备类型查看某一种设备类型下的所有设备,也可以设置设备名称查看指定设备。
设备品牌型号等信息非必选;设备最重要的特性是“是否实体”选择:一台实体设备同一时间只能安装在
一个对象上,如果要安装到另外的对象上需要先从原对象上卸载;一台非实体设备可以同时安装在任意数量的对象上。
(6)字段管理
浏览和查询表;同样可以添加、删除、编辑、回收表。
可以通过对象类型选择,来查看某一个对象类型所拥有的表。
表有两种类型“基本表和子表”:基本表是指每个字段在同一时间只会存在一个字段值状态,如“企业名称”,当发生字段值修改时永远都只有一个字段值是当前有效在线的,其它的则为历史记录保存;子表是可以存在任意多条记录的表,例如企业记录表。
点击“查看字典”按钮可以查看该表的所有字段信息;同样可以浏览、添加、编辑、删除、回收字段信息;字段可以有多种类型,包括string、double、file、png、url等;字段也可以设置是否关联字典。
(四)统一数据资源目录体系
通过元数据管理系统,可以实现可扩展、可升级、可配置、可维护、通用性强大的统一数据资源体系,以对象类型为元数据标准的组织单元。在目录管理模块可以维护不同的目录,如一张图或其它业务应用系统。可以任意设置和维护树状目录;并根据该目录为不同的用户配置访问权限。
(五)事务运营管理系统
通过元数据管理系统建立可扩展、可升级、可配置、可维护、通用性强大的统一数据资源体系;通过事务运营管理系统,对数据资源体系中的具体对象进行维护。
(1)对象管理
元数据化的数据以对象为组织和管理的核心,对象管理界面可以浏览和查询对象列表;可以通过对象类型来查看该类型下的所有对象,也可以通过对象名称来进行模糊搜索。
选择对象类型,如“空气自动站”则显示所有的自动站对象列表;主要显示的字段包括对象ID、对象名称。
可以添加、编辑、删除、批量删除、回收对象;
支持对象的批量导入和导出,导入时可以下载对象类型专属模板;
编辑时可以编辑对象的基本信息,对象的子表信息不能在对象管理界面中修改,只能通过具体的业务系统管理。
可以添加或修改对象的空间信息,包括点线面,不同类型的对象可以在地图上直接绘制修改点线面;同时也支持shp文件的导入。
(2)对象安装设备
元数据管理系统中配置了设备,管理员可以通过给对象安装设备、或卸载设备来控制对象和设备所采集的监测数据的对应关。安装即建立关联;卸载即接触关联,卸载并不会删除历史监测记录。
(3)数据管理
为数据管理员提供了数据管理窗口,可以通过对象类型、对象、设备、参数,以及时间范围查到大数据资源中心所整合的任意数据内容;并包含导出功能;导入和数据更新功能可以通过权限配置预留给指定的最高权限管理员,并保存修改日志。
(六)用户权限管理系统