• 快捷搜索
  • 全站搜索

保险ODS系统架构及设计

2014-01-17 11:15:20作者:中国太平洋保险集团股份有限公司信息技术中心 杨进玉编辑:金融咨询网
随着数据量的增长以及对数据质量要求的提升,单纯的OLTP查询已经无法满足保险业务对数据的使用需求。为实现跨部门、跨业务系统数据的集中和共享,提供准确一致、统一且标准化的数据服务,并实现有效的数据质量监控与检查,ODS系统的建设显得愈加重要和迫切。

系统特点

        ODS为企业提供了多层次的信息处理环境,并建立起DB-ODS-EDW的三层体系结构。ODS作为一个中间层次,一方面,它包含企业全局一致的、细节的、当前或接近当前的数据,可以进行全局联机操作型处理;另一方面,它又是一种面向主题、集成的数据环境,且数据量小,适用于辅助企业完成日常决策的数据分析处理。ODS存放当前和接近当前的数据,如果需要的话,可以对ODS系统的数据进行更新、删除、新增等操作。所以,概括地讲ODS系统具有以下几个特点:面向主题的、集成的、易变的、明细的、反映当前数据。

        但随着IT技术的发展,最初ODS的介于DB和EDW间的“中间层次的系统”的特点越来越不被系统架构师所认可,ODS的定义也不再局限于“中间系统”这样的描述,更多的是“企业级数据枢纽”、“企业数据总线”、“企业基础数据平台”等这样的称号。ODS系统在整个IT系统中承担的职责和扮演的角色也越来越清晰和明确。ODS系统的属性和特点与DB和EDW有着密切的联系和明确的区别,表1有对照性地总结和整理了ODS系统与DB以及EDW的一些异同点。

保险ODS系统架构及设计-表1-上.jpg
保险ODS系统架构及设计-表1-下.jpg

系统逻辑架构

        由于ODS系统的数据是来自各个业务系统的,所以随着业务的发展,接入ODS系统的业务系统会有所增加,数据量也在持续增长,并且现有业务系统的数据采集需求也会不断变化。这种易变的特性需要ODS系统具备良好的逻辑架构和可扩展性。 ODS逻辑架构如图1所示。

保险ODS系统架构及设计-图1.jpg

        保险ODS系统逻辑架构主要由4层构成,分别是:源数据层(业务系统方)、ODS数据采集层、ODS数据整合层、ODS数据集市层。在数据采集层与数据整合层,以及数据整合层与数据集市层各有一个ETL的处理过程,为方便下文阐述,命名为第一级ETL和第二级ETL。

首页 上一页 1 2 3 4 下一页 尾页

扫码即可手机
阅读转发此文

本文评论

相关文章

频道最近更新

频道热门文章