zoukankan      html  css  js  c++  java
  • OLAP ODS项目的总结 平台选型,架构确定

      说一下,目前我们基础数据平台的机构。

         OLTP: OLTP 主要使用ORACLE 平台,集群环境使用的是RAC。在前端做数据采集的还有SQLSERVER,但是目前初步不会从其中取数据。

         中间件:主要使用的是 ORACLE FUSION ,也就是 WEBLOGIC, 在这个层次,主要考虑的是 平台的EM管理的需要。 比如ETL 平台的的管理是

             支持哪些, DSS平台的管理是支持哪些。

         BI:     BI 使用的平台是OBIEE ,主要原因是考虑到 移动BI的扩展,和我们部门 ORACLE 系的强大。

      OS:   基本上都是 UNIX 或者 LINUX平台。    

         从这些基本架构来看,基本心中有数了

        OLAP_ODS 平台基本上 ORACLE 是唯一之选,无论从运维上,和技术特点都是它了。

        ETL平台 这个是我们这次选择的重点, 重点考虑 ODI,INFORMATICA, DATASTAGE .

                 ODI 有很大的诱惑力,因为 ORACLE系的强大,大家测试的也很积极,但是在支持OS 上UNIX 支持不好。

         而且在做ETL MAPing 实在是复杂。效率低。但是 对ORACLE CDC,DATAMINER 的先天支持。实在令人纠结。但是为了快速完成项目还是没有做首选。作为一个备胎。

           DATASTAGE 很好的东西,IBM的产品从来没有让人失望。当时团队除了我之外,没有一个人愿意弄这个东西。这得作罢。

                 Informatica PowerCenter : 作为ORACLE 在ETL 上都OEM它,可想而知它是如何秒杀 ODI的,加上技术售前说的在 BIGDATA版本的功能,让人直流口水给了我们很大的想象空间,测试的过程又确实好用, 管理平台也是放在WEBLOGIC上的。 问题变得简单了。其实最大的诱惑就是Informatica PowerCenter的大数据版。 本来我们就有打算 将 BI的 DW迁移到HADOOP HOUMOUT 上去的。如果将来真的迁移上去的,在将目前的ETL 平台 升级到 大数据版,简直是爽呆了。

      总结到这里 最后就定了 Informatica PowerCenter + ORACLE 的方案了。

      

  • 相关阅读:
    通过调用C语言的库函数与在C代码中使用内联汇编两种方式来使用同一个系统调用来分析系统调用的工作机制
    解密腾讯课堂视频缓存文件
    Pycharm启动后加载anaconda一直updating indices造成Pycharm闪退甚至电脑崩溃
    Pycharm基本设置和插件安装
    Pycharm配置anaconda环境
    Anaconda管理Python环境
    Markdown介绍及工具推荐
    Android应用性能测试
    常用的adb命令
    QTP入门——玩玩小飞机
  • 原文地址:https://www.cnblogs.com/jerryxing/p/2806930.html
Copyright © 2011-2022 走看看