• OLAP ODS项目的总结 平台选型,架构确定


      说一下,目前我们基础数据平台的机构。

         OLTP: OLTP 主要使用ORACLE 平台,集群环境使用的是RAC。在前端做数据采集的还有SQLSERVER,但是目前初步不会从其中取数据。

         中间件:主要使用的是 ORACLE FUSION ,也就是 WEBLOGIC, 在这个层次,主要考虑的是 平台的EM管理的需要。 比如ETL 平台的的管理是

             支持哪些, DSS平台的管理是支持哪些。

         BI:     BI 使用的平台是OBIEE ,主要原因是考虑到 移动BI的扩展,和我们部门 ORACLE 系的强大。

      OS:   基本上都是 UNIX 或者 LINUX平台。    

         从这些基本架构来看,基本心中有数了

        OLAP_ODS 平台基本上 ORACLE 是唯一之选,无论从运维上,和技术特点都是它了。

        ETL平台 这个是我们这次选择的重点, 重点考虑 ODI,INFORMATICA, DATASTAGE .

                 ODI 有很大的诱惑力,因为 ORACLE系的强大,大家测试的也很积极,但是在支持OS 上UNIX 支持不好。

         而且在做ETL MAPing 实在是复杂。效率低。但是 对ORACLE CDC,DATAMINER 的先天支持。实在令人纠结。但是为了快速完成项目还是没有做首选。作为一个备胎。

           DATASTAGE 很好的东西,IBM的产品从来没有让人失望。当时团队除了我之外,没有一个人愿意弄这个东西。这得作罢。

                 Informatica PowerCenter : 作为ORACLE 在ETL 上都OEM它,可想而知它是如何秒杀 ODI的,加上技术售前说的在 BIGDATA版本的功能,让人直流口水给了我们很大的想象空间,测试的过程又确实好用, 管理平台也是放在WEBLOGIC上的。 问题变得简单了。其实最大的诱惑就是Informatica PowerCenter的大数据版。 本来我们就有打算 将 BI的 DW迁移到HADOOP HOUMOUT 上去的。如果将来真的迁移上去的,在将目前的ETL 平台 升级到 大数据版,简直是爽呆了。

      总结到这里 最后就定了 Informatica PowerCenter + ORACLE 的方案了。

      

  • 相关阅读:
    linux命令及相关配置
    EditPlus配置ftp连接linux
    06_事件机制
    HTTP协议简介
    Codeforces Round #691 (Div. 2) C. Row GCD (数学)
    Codeforces Round #690 (Div. 3) E2. Close Tuples (hard version) (数学,组合数)
    牛客编程巅峰赛S2第10场
    Codeforces Round #665 (Div. 2) D. Maximum Distributed Tree (dfs计数,树)
    牛客编程巅峰赛S2第7场
    Codeforces Global Round 12 D. Rating Compression (思维,双指针)
  • 原文地址:https://www.cnblogs.com/jerryxing/p/2806930.html
Copyright © 2020-2023  润新知