数据中心建设

2015-11-09 17:27:00
原创
1068


数据中心方案有以下主要特点:


  • 从长远目标看着眼于BI应用的长期发展战略,从短期目标来说,在完成应用数据中心平台建设的同时完成部分查询、报表、统计展现功能,实现对架构的验证,为今后BI应用的建设提供实施方法和流程;

  • 站在企业级的角度来规划企业BI应用数据线,包括数据的标准化、部署、流转、使用和生命周期管理;

  • 建立企业级的基础设施的规划、部署和运维管理机制,采用并行的集群计算模式,支持横向扩展功能,有效保护企业硬件投资,应对企业数据量的大规模增长;

  • 强调标准、规范和流程,保证企业BI 应用的建设有序、持续地良性发展;

  • 架构的开放性:与任何第三方专业BI应用和工具能实现“无缝”连接,从而可以为客户提供持续的专业服务。



BI基础设施


BI基础设施将为企业的全部BI应用服务,而不仅仅是为了某个应用,这避免了企业以往那种每个项目都要采购软硬件的模式,保证了企业资源的共享和有效利用,保护了投资。我们提供的BI 基础设施包括:


  • 数据库服务器:用于数据中心在线数据存储、应用集市数据存储;

  • ETL 服务集群:实现企业级的ETL 服务,为所有BI应用提供ETL加工服务;

  • 报表服务集群:实现企业级的报表生成和OLAP服务,为所有BI应用提供报表生成服务;

  • 文件传输集群:实现企业级的文件接受,文件和报表的分发和推送;

  • 全局调度服务器:实现全局的ETL作业、流程控制作业、数据管理作业、批量报表生成作业,文件和报表传输作业的统一调度和监控。实现BI 基础设施的资源管理、动态负载均衡和并行控制;

基础软件和工具


基础软件是BI应用建设中最基本的工具和软件产品,包括:


  • 操作系统:支持AIXHP-UXRedhat LinuxSUSE Linux等主流操作系统;

  • 数据库服务器软件:支持主流的数据库产品,如OracleDB2

  • ETL工具:支持IBM DataStage EE版、 SE

  • 报表工具:支持主流的报表工具,如IBM CognosBOMSTR 等;

  • 文件传输工具:支持FTPC:D等传输工具

企业应用数据管理解决方案


企业应用数据管理解决方案对企业各类应用数据的采集、标准化加工、部署和存储、流转和数据服务、备份和清理、生命周期管理、历史档案的存储和使用提供完整解决方案,支持企业对应用数据使用的各类需求。


  • 数据中心管理平台(ODS+DW):实现对企业业务数据采集、检核、标准化加工、存储、备份和清理、对BI 应用提供数据服务。

  • 历史档案管理平台:对企业的各类数据(结构化数据和非结构化数据)提供长期的保存机制、并对最终用户提供数据检索服务和数据内容服务(联机查询、批量下载、横向截面和纵向截面的数据服务请求)。实现对档案数据的索引管理、生命周期管理、分级存储管理。


数据集市及基于集市的应用


数据集市是直接针对特定业务需求的,按照业务需求进行数据建模来组织的数据,从数据流程上来说,应用数据集市是ODS/DW的消费者,由ODS/DW为其提供数据服务。


集市应用是实现某一特定需求的应用系统,例如本方案中的报表系统就是一个集市应用。 本方案对自建应用和购买第三方产品两种应用建设方式都能提供良好的“无缝”支持。