一、项目背景
二、项目目标
提供一套后勤数据治理工具部署文件及配套文档,主要技术指标如下:
(1)具备数据抽取转换装载、元数据管理、数据标准管理和数据质量管理四项功能。
(2)采用B/S模式,浏览器端兼容Chrome、FireFox等主流浏览器,服务器端可运行在Linux、Windows系统上,应用服务器兼容Tomcat7.0以上,JDK版本为1.7以上,数据库为Oracle或MySQL。
(3)支持集模式。保证 7×24 小时不间断持续运行,且计划外宕机时间控制在全年的0.2%以内、计划外宕机次数控制在全年4次以内,系统有效工作时间要求≥99.8%。
(4)支持高并发。页面查询不高于2秒,复杂查询不高于5秒,一般页面数据更新处理时间不高于3秒,复杂数据更新不高于5秒。
(5)数据抽取速率高。数据库到数据库不低于1000条/秒,文件到数据库不低于1000条/秒。
(6)根据以上性能指标要求提出硬件及网络的性能及规模配套的方案。
三、技术服务要求
3.1 集成要求
投标产品需具有与国内自主成熟的数据交换共享平台和大数据基础平台软件有良好的集成兼容性。
3.2 成熟度要求
投标产品或者模块是国内投产的成熟品牌,并且经过多个版本迭代,提供至少两个版本的产品著作权证书。
近五年内,在多个行业有成功应用案例,且至少有一个为政府或军队应用案例。
3.3 技术要求
3.3.2元数据管理功能。
元数据采集
支持连接到源数据库系统,把元数据抽取到统一的元数据库;
提供多种采集适配器,支持从主流关系型数据库、Hadoop大数据平台(hdfs、hive、hbase)、Excel模板等源头采集;
支持采集任务配置,可实现一次性和定时采集,支持采集任务的执行、监控和日志。
hbase的特性有哪些
元数据模型管理
可通过界面进行元数据的增、删、改、查操作;
可通过界面创建、维护元数据模型,支持业务模型和技术模型的定义;
支持通过界面创建并维护元数据模型间关系,包括组合关系、依赖关系等;