企业数据中心建设方案

《企业数据中心建设方案》由会员分享，可在线阅读，更多相关《企业数据中心建设方案（17页珍藏版）》请在装配图网上搜索。

1、数据中心，让企业变的智能、智慧企业数据中心建设方案需求背景随着电子商务的蓬勃发展，公用云、行业云的快速推广，以及社交软件、移动支付的普 及，一方面是企业数据量成倍增加，另一方面是企业数据更加碎片化，造成企业经营决策越 来越复杂，因此企业的数据管理水平，将直接决定公司的管理水平，数据中心将成为企业经 营大脑，让企业变的智能、智慧。同时，多年来我们一直在践行大型企业的信息化建设，参于、知悉有的大型企业采用统 一规划推动建设的，也有单一业务部门推动建设的，但不管哪种模式，在战略调整、管理变 革、领导变动等因素的推动下，应用系统被不断的迭代，而软件厂商不断的扮演着“换”与 “被换”的角色。深入分析，业

2、务系统是业务管理的工具，随着管理思想、管控要求、业务 流程、业务规则的变化而变化属于正常迭代，而且不可避免，但业务系统的背后财务数据、 人事数据、业务数据等数据一直不变，而这些数据是公司非常有价值的资产，因此必须通过 数据中心的建设，将不同领域、不同单位、不同软件的数据进行集中统一管理，才能实现数 据综合分析、决策支持应用。如何采集、积累并利用数据资源？如何消除企业各业务之间的信息孤岛？如何主动适应 各种应用系统迭代与升级？这个三个问题是企业数据中心建设必须面对的问题。解决方案方案简介我们认为数据中心建设是建立企业级数据标准、数据模型为基础，按数据仓库、数据集 市数据存储设计理念管理数据，通过

3、主数据系统管理基础数据，数据模型装载业务数据，自 动数据采集系统打通业务系统与数据中心的信息通道，企业服务总线系统打通应用系统与应 用系统之间信息通道，在线填报系统补充缺少系统领域的数据，决策支持系统进行数据挖掘 与展示。即2套体系7个系统，2个体系为数据标准体系、数据模型体系，7 个系统为主数据管理系统、元数据管理系统、数据仓库、企业服务总线系统、自动采集系统、在线采集系统、决策支持系统。系统架构前台展示用户行业分析凤险预齊展示.决策支持应用外部数攥业努管理至统电子商努乗统理囲上閒城前却堆度表k - 二橈曲据实$表1*1主数摇管理系统企业服务总线元数擔核心价值建立数据标准，为业务系统在规划、

4、选型、建设、改造方面提供低偶合技术方案支持， 为信息化有序、高效、全面进行信息系统建设提供支撑，降低系统建设成本，提高系统使用 寿命，消除信息孤岛。建立数据中心，将企业不同领域、不同单位、不同软件的数据进行集中统一管理，建立 各种主题数据仓库，挖掘数据潜在价值，建立决策分析模型，应用数据指导企业的经营决策， 让企业变的智能、智慧。方案特色全面统一企业级元数据，实现数据全生命周期管理跨应用的主数据管理，保障数据一致性和有效性低耦合服务集成应用框架，降低数据集成综合成本“自动采集+在线填报”相结合，保证数据完整性和及时性PB 级大规模数据管理能力，支撑大数据存储与应用 开放式的算法库和模型库，最大

5、化发挥数据应用价值咨询服务方案数据标准化咨询通过推进企业信息化数据标准化建设，务实企业信息化在数据管理方面基础水平，为企 业有序、高效、全面进行信息系统建设提供支撑，以及为业务系统在规划、选型、建设、改 造方面提供低偶合技术方案支持，降低系统建设成本，提高系统使用寿命。数据标准化建设 在充分调研领导决策支持应用、业务管理应用的信息化需求，结合现有信息化系统、规划建 设信息系统的内容，以按“管控集中、业务协同、数据驱动”为重点，进行企业信息化的数 据标准化建设。主数据规划：1）主数据整体规划，主数据管理范围、主数据关系描述、主数据管理机 构、主数据管理策略、具体主数据溯主系统定义、具体主数据责任

6、部门定义、具体主数据接 口描述；2）具体主数据管理规范包括主数据描述、主数据应用范围、主数据编码方案、主 数据管理流程、主数据管理规范、主数据集成规范；3）具体主数据技术规范包括技术标准、集成服务规划：1）集成服务整体规划，集成服务范围、集成服务管理机构、集成服务技术标准、集成服务开发规范、集成服务开发流程、具体集成服务溯主系统定义。2）具体集成服务规范，集成服务功能简介、集成服务技术信息、集成服务数据描述、集成服务方法描述、集成服务实例样例。数据模型咨询考虑到业务系统随着管控要求、管控范围、业务流程的变化而变化，因此不同阶段、不 同企业的业务系统不尽相同，而业务系统背后的业务数据是相对固定，

7、因此通过对业务数据 进行分析、抽象形成业务的数据模型，然后通过数据模型对不同阶段、不同企业的业务数据 进行汇聚处理、治理管控、集中存储、应用分析、发布服务等，将业务数据从各个业务系统 分离出来进行以一种科学的方式单独管理，达到激活集团数据资产价值，实现数据资源的共 建共享、资源复用、互联互通、综合应用、决策分析的效果。发挥企业数据资产的业务价值、 商业价值和服务价值，最重要是对业务的数据模型规划的适用性、科学性。用户数据模型容别龄 姓手性年壬XX:133kkxx8803鬼35咅户状态；意庐1害户环人： IXX城市：合肥社会属性购买行为客户版务行业；软件H5cA； 3k胆位:工程师愛好：足球单恒

8、：纪冈科技家庭：匹意问产品：洋房誉业目的；投资 怠冋団柢:50乏业宓数:3K意向朝直：両北 预翔总价:90万穹户坯源渠道：客户介绍多业JW可：5HJKX扇新跟进日期； 2018,03.02遷轨迹口乍日上午: 宾期工诈日社：磁区周未晩上：高新区丿互联网行为fits去那丿血肓 安診 赫裔城消费特征消贵走位；M 消垦类里:沖动里 支忖方式；网上支忖登记曰期：2017.0S.D1业务的数据模型的规划主要包括：1）数据模型整体规划，数据模型管理范围、数据模 型关系描述、数据模型管理机构、数据模型管理策略、具体业务数据溯主系统定义、具体业 务数据责任部门定义、具体业务数据接口描述。2）具体业务数据模型定义

9、包括数据模型描 述、数据模型指标解释、数据模型内部计算公式定义、数据模型内部审核公式定义、数据模 型外部审核公式定义、数据模型与主数据关系定义、数据模型应用范围、业务数据管理规范、 业务数据集成规范。软件产品方案主数据管理系统简介在主数据规划的基础上，通过建设主数据系统，实现对主数据加载、映射、分发、申请、 审批、发布等管理，并实现系统间的基础数据同步，为系统集成应用、决策支持分析奠定基 础。主数据系统包括基础数据、主数据建模、主数据装载、主数据分发、主数据维护、主数 据日志五个功能。系统框架MDM 业务操作MDM数聒源设置控制吉管理確昭设置淸洗规则宦义合井规格定盘模糊匹配凰则定义列映肘秃系定

10、义主要功能基础数据主要包括主数据分类管理、远程系统注册、分发范围设置，以及针对主数据的 数据档案。提供根据主数据管理项目设置主数据分类，包括分类编码、分类名称，主数据分类是主 数据分发范围设置的基础。提供根据主数据系统的加载、分发范围进行远程系统注册功能，主要包括远程系统编码 远程系统名称、远程系统服务描述、远程系统URL及端口等。提供自定义数据档案功能，方便主数据建模使用，数据档案形式支持单表、树型等。 提供从业务、物理、展示等角度进行主数据建模功能，支持为主数据制定编码规则，支 持对主数据进行版本控制。主数据建模支持字符、数值、布尔、日期、 日期时间、对象、图片、文件、 大文本、 下拉等多

11、种实体属性类型。提供主数据的新增加载和更新加载两种加载方式，新增加载提供批量加载和单个装载两 种功能。更新装载只能更系统装载字段，不更新维护字段。主数据加载成功后，自动生产来源系统内部ID与主数据系统内部ID映射关系。提供针对加载成功的主数据进行维护功能，完善主数据档案内容，加载维护功能仅允许 对非加载字段进行维护，加载字段必须由来源系统中修改后，进行更新加载。提供手工新增、删除、修改主数据档案功能，以及对加载主数据的维护功能，支持对主 数据档案进行审批等功能。提供针对主数据系统上线初始阶段手工维护映射功能，手工维护映射支持批量导入映射， 以及根据名称、编码等自动匹配映射功能等提供在主数据系统

12、中进行的新增分发，系统自动进行主数据系统内部ID与分发目标系 统内部ID映射。主数据分布提供新增分发和更新分发两种模式，新增分发提供批量分发和单个发分两种 功能。新增发分对于有层级关系的主数据严格控制逐级分发，更新发布支持除主除外的所有 信息的更新。主数据系统提供日志管理功能，可以通过日志查询主数据的加载、分发、修改等相关的操作 人员、操作时间、操作结果等。元数据管理系统简介元数据（Metadata）,又称中介数据、中继数据，为描述数据的数据（data about data）， 主要是描述数据属性（property）的信息，用来支持如指示存储位置、历史数据、资源查找、 文件记录等功能。元数据算

13、是一种电子式目录，为了达到编制目录的目的，必须在描述并收 藏数据的内容或特色，进而达成协助数据检索的目的。从应用开发、业务系统、应用集成到 商业分析的全程元数据服务支持，以领域模型语言联通各个系统。系统框架元数据仓库全面应用元数据框架访问服务开发服务管理服务模型管理领域建模应用开发 模型驱动开发、 惰码自动生更 模板设计等元数据管理 元数据质量管 理-血缘分折* 影响分析、动 态建模、系统 适配器与自动 同步模型驱动 开发业务实体、业务操作、表、 芸系、语貞视图、立方瞅 窜度*量度、映射元数据应用ETL/ELT.主数据管理、业务管理系勢商务廿析应用主要功能一 / 数据仓库数蝎应用前置机系绕主数

14、据系统整合/适配整合/适配整合/适配支持业务元数据管理，主要包括进行业务描述、业务规则、业务术语、业务 指标口径等描述；支持技术元数据管理，主要包括接口规范、执行顺序、依赖关系、ETL转换、 数据建模和工具等描述；支持从表名、用途描述、数据来源、库表类型、版本、字段、语义、字段类 型等进行元数据定义；支持根据元数据定义生成物理表、生成V0,以及导入导出元数据等数据仓库系统简介数据仓库是将组织的业务系统之联机事务处理的日积月累的大量数据，通过数据仓库理论所特有的数据储存架构，进行系统的分析整理，以利联机分析处理、数据挖掘等各种分析方法应用，从而创建决策支持系统、综合展示系统，帮助决策者快速有效的

15、自大量数据中分析出有价值的信息，以利决策拟定及快速回应外在环境变动，帮助建构商业智能。系统框架事实表据集市，据集屯.数据仓库指数据仓库中数摒的细化或综合程廈的堆别，也就是数 擔的详原子实时義*聚集实时義、合井爭实泰 周期快 照表、旋转冥时表、预连接聚集表、实型事 宴奏 切片事实JL 郦事实祗_致性斑豔雌“雄ODSDW 口怕主要功能 事务事实表(Transaction Fact Table)记录的事务层面的事实，保存的是最原子的数据， 也称“原子事实表”.事务事实表中的数据在事务事件发生后产生，数据的粒度通常是每个 事务一条记录。一旦事务被提交，事实表数据被插入，数据就不再进度更改，其更新方式为

16、 增量更新。周期快照事实表(Periodic Snapshot Fact Table)以具有规律性的、可预见的时间间融来 记录事务，时间间隔如每天、每月、每年等等。典型的例子如销售日快照表、库存日快照表 等。累积快照事实表(Accumulationg snapshot fact table)代表的完全覆盖一个事务或产品 的生命周期的时间跨度，它通常具有多个日期字段，用来记录整个生命周期中的关键时间点。 原子事实表(Atom Fac t Table )是保存最细粒度数据的事实表，也是数据仓库中保存原子 信息的场所。聚信事实表(Aggregated Fact Table)是原子事实表上的汇总数据，

17、也称为汇总事实表。合并事实表(Consolidated Fact Table)是指将位于不同事实表中处于相同粒度的事实进行组合建模而成的一种事实表。旋转事实表(pivoted facttable)是将一条记录中的多个事实字段转化为多条记录，其中 每条记录保存一个事实字段的一种建模方法。预连接聚集表(pre-joined aggregagte table)是通过事实表和维度表的联合查询而生成 的一类汇总表。在预连接聚集表中，保存有维度表中的描述信息和事实表的事实值。 在非事实型事实表(fac tless fac tt able)，通常会保存十个左右的维度外键和多个度量事 实，度量事实时事实表的关

18、键所在。在非事实型事实表中没有这些度量事实，只有多个维度 外键。切片事实表(sliced fact table)中的字段结构和相应的基础表完全相同，差别在于存储 的记录的范围。切片事实表中保存记录的相应基础表中记录的子集，记录数通常与某个维度 记录数相同。蜈蚣事实表(Centipede fact table)是指那些一张事实表中有太多维度的事实表。连接在 事实表两边的维度过多，看起来就像蜈蚣一样，所有称为“蜈蚣事实表”企业服务总线系统简介在服务集成规划的基础上，通过部署架构开放、产品稳定、扩展性强的企业服务总线系 统，采用基于服务的数据交换方式，实现由企业服务总线系统统一管理各系统之间的数据交

19、 换服务，降低应用系统、各种组件及相关技术的耦合度，消除应用系统点对点集成瓶颈，提 高复用，增进系统开发和运行较率，快速适应未来业务及流程变化的需要。系统框架主要功能提供进行全生命周期管理的集成开发环境，实现对各个系统提供的各种数据交换服务进 行统一命名标准、统一地址发布、统一数据标准，以及对数据交换服务的合并、拆分和协议 转换等开发。提供可视化服务、实体、组件等建模环境,提供大量可复用服务，提供测试案例及测试 客户端生成功能。提供单机及分布式部署管理工具，提供可跟踪和调试流程、组件交互监控等快捷诊断工 具。提供高度模块化及可扩展的微内核架构，提供模块化部署环境，支持有状态组件热部署 和分布式

20、联动部署，实现高度可扩展。提供高度可重用的服务组件架构，提供支持 SCA 服务组件编程模型，提供复杂组件组装 及组件交互方式，提供松耦合、高度可重用的编程框架。提供构建面向服务的集成，提供服务仓库，支持多格式服务注册、服务发布、服务绑定、 服务查找、服务策略/SLA管理等，全面构建面向服务的集成。提供灵活的数据转换功能，提供内置基本的数据转换器，支持用户扩展数据类型转换器。 提供丰富的传输协议支持，包括不仅限于 WebService、TCP、MAILSMTP、HTTP、FILE、DBMonitor 等协议，用户可以在产品中直接添加协议的绑定。提供集群和负载均衡功能，提供业务组件可按需进行分布式

21、部署，支持服务器节点及用 户请求两个层面的Failover机制，内置基于消息中间件的可靠传输，提供大并发处理能力、 高可靠性及高可用性。提供可灵活编排的消息流及工作流，内置基于流程虚拟机的消息流和工作流引擎，提供 了常见流程模式的支持,提供流程持久化、人工任务、异步、事件、控制模式、定时机制、 状态管理等基础功能。提供运行态集成管理和监控中心，主要包括：服务管理、实体管理、组件管理、实例监控、 服务器节点监控和参数配置、消息监控、流程监控等。自动采集系统系统简介由于企业的运营监管、决策支持和数据分析需要数据支持，而企业的部分业务和部分单 位已经应用的应用系统，为了减少业务人员的工作量和提高数据

22、质量，通过在企业应用系统 前端部署前置机和前置机系统，采用由应用软件供应商主动写入数据和项目建设方采用专业 数据采集工具抽取数据相结合的方式，从企业应用系统取数到前置机系统，然后通过部署的 企业服务总线系统统一管理数据中心与企业应用系统的数据交换服务，实现前置机系统与数 据中心系统的数据交换。系统框架联接管理贸源管理CODS数据仓库数据兗换册务基础数据企业服务总线系统一尸._ETL工具转换管理柞业管理财务管理系统qAaI人事管理系统上数踞系统系统管理数据模型管理数据映射主要功能采集数据配置：根据用户环境配置数据源，根据采集要求配置定时任务、设置采集过虑 参数等。基础数据管理：地区档案、行业类型

23、、组织档案、客户档案、银行档案、人员档案等 采集数据表管理：支持进行数据表定义，根据数据表定义生成物理表、生成V0,数据 表定义含表名、表描述、库表类型、建表日期、建表用户，以及字段名、语义、字段类型 是否主键、长度、精度等。定义数据交换服务：根据与国资监管平台数据交换要求开发Web service服务，使用 XML标准来描述、发布、发现、协调和配置。在线采集系统系统简介由于集团的运营监管、决策支持和数据分析需要数据支持，而集团及体系部分业务没有应用系统支持，为了保证数据的完整性和全面性，集团提供业务的数据模型设计要求搭建在线填报平台，在线填报平台提供组织体系定义、表样定义、任务定义、权限分配

24、、汇总规则定义等功能。集团及体系业务人员通过互联网登录进行快报填报、审核、汇总、导入、导出和打印等工作，实现全级次、全范围的数据采集。汇总分析数踞追琮指标査询 、 指标分析系统框架分析数据汇总数据导入数据填报数据校鑿数据确认取消上报数据退冋主要功能不同年度、不同表样、不同组织体系业务数据模型在同一平台内统一采集管理，并实现 数据之间的共享。提供数据采集业务类型设置功能，同时设置多个采集任务，独立对资源、数据、权限进 行管理，以达到分开管理使用的目的。基于数据采集业务类型设置关键字，如：采集单位（如：单位、部门等）、采集期间（如： 会计年、会计月等）、采集计量单位（如：元、万元、亿元）等。基于数

25、据采集业务类型定义采集样式，如：封面定义、通用样式定义、行业样式定义等。提供类似EXCEL方式进行采集样式定义的功能，所见即所得，即样式定义界面与数据采 集界面基本相同，保证系统易用性。在采集样式定义界面定义计算公式，计算公式提供EXCEL基本公式，以及数据采集需要 的特殊公式，如：跨表取数公式、数据库取数公式等。在采集样式定义界面定义审核公式，提供合理性审核公式定义和逻辑性审核公式定义。基于数据采集业务类型定义数据采集任务，内容包括具体采集样式、采集开始时间、采 集结束时间等。根据数据采集范围及层级的要求，灵活自由的分配数据采集任务，以满足不断调整的国 资监管应用需要。提供基于用户角色的报表

26、权限分配功能，特定用户只能看到特定报表的数据。采集报送系统使用在线填报模式，提供直接复制粘贴EXCEL数据进报表、EXECL单表导 入、EXCEL套表导入等多种填报功能。提供附报文档的上传、下载、删除、查看等功能，对已经上报后的报表，附报文档不允 许再进行上传、删除等操作。基于计算公式对填报数据进行计算，提供单表计算、多表计算和批量计算等多种计算功 能。基于报表审核公式对填报数据进行审核，提供单表审核、多表审核、任务审核等多种方 式。对报表审核出现的错误给予提示，双击错误提示追溯具体的错误源。提供单表导出、套表导出等功能，对导出报表设置命名规则，即通过单位、报表名称、 报表编号、会计年、会计月

27、等组合方式生成名称。提供报表的单表打印、套表打印等功能，用户针对不同的采集任务定义不同的打印方案， 方便用户打印。提供报表上报、申请退回、取消上报、查询报送状态等功能，已经上报数据不允许上报 用户再修改。提供催报功能，对未上报企业进行催报，提供手机短信、系统消息、个人邮箱等多种催 报方式。提供定义采集数据汇总规则的功能，包括：直接下级、所有末级、自定义、不汇总等多 种规则。提供单表汇总、任务汇总、汇总下级、任务汇总下级等多种汇总方式，同时提供单 表倒挤差额表、任务倒挤差额表等功能。提供查询汇总数据来源的功能，以便对汇总结果进行检查、核对与修改。在报表查询窗口提供选择若干指标进行同级、直接下级、

28、所有下级、末级对比分析的功能。 同时提供自定义指标分析功能，即跨表指标选择、任意选择单位、任意定义查询期间，以及 对查询结果进行排序、过滤等功能。决策支持系统系统简介将存储在不同系统的数据集中起来，进行清洗、汇总，然后通过数据展示平台挖掘、展 现，从多层次、多维度对业务数据进行分析，生成各项形象直观的图表及预警信息，及时反 映总体情况和发展趋势，为领导决策提供准确、及时、全面的信息依据。系统框架应用企业报表指标工具営連驾驶舱电子电團算法库算沽引用数捺仓库模型映射数据交换平台业务数据主要功能（1）数据仓库是通过数据交换平台，从国资监管业务系统中抽取财务数据、项目数据、 人才数据等，进行清洗、汇总，形成决策分析数据仓库。（2）建立开放的分析模型库、算法库，并通过模型映射和算法引用进行数据分析。（3）通过企业报表、多维分析、指标工具、管理驾驶舱、电子电图、综合展板等分析 工具进行数据展示。