主页
 > 研究与报告 > TEC博客 > 华尔街:数据如何从分散到整合

华尔街:数据如何从分散到整合

作者: 李雪 www.ciw.com.cn
发布于: 八月 18 2008



华尔街:数据如何从分散到整合
李雪 www.ciw.com.cn

第 1 页共 1页

华尔街的各商家都在积极地寻求数据管理的解决方案。由于公司变迁,如并购等情况下多家数据的整合,还有与客户数据的整合,对数据管理提出了更高的要求。那么,数据将如何进行整合呢?

位于美国华尔街上的各商家似乎都在被各种金融数据的麻烦所困扰着,如信用卡业务、债务抵押债券(CDO)的定价、风险管理以及有关票据总额的审计等。然而商家们并没有因此而灰心,相反,他们正在积极地寻求数据管理的解决方案。一位资深分析师Beth Roberts指出:“我在埃森哲咨询公司就职25年来,从未看到像华尔街商家这样重视数据管理的。”

为了满足数据需求,华尔街商家们以往尝试过一个名叫黄金拷贝(Golden Copy)的产品,应用后所有关于每一个客户的文档都集中在一个单独的企业级数据仓库中,包括客户档案、交易记录、订单及其他所有相关的交易数据。但是,商家发现对于公司变迁,如并购等情况下的多家数据的汇总,黄金拷贝就很难发挥作用。

印有标识Web数据仓库

当前华尔街需要的数据管理方案更应是一个连接Web服务并印有各种应用标识的Web数据仓库。换句话说,这个Web数据仓库中的数据应该贴有可标识的标签,每一个数据有一个标签,这个标签要用统一的规范,以便说明这个数据是什么以及如何使用,而非仅仅是一些记录的拷贝。有专家称,上述类型的数据架构也应该是可以无限制升级和无限灵活的。

对于华尔街来说,任何大规模数据整合的关键都需要每个数据有惟一的标识(BEI)以及客户ID,一个带有惟一ID标识的、集中的、与日期同步的数据仓库,还能简化与客户个人信息及业务账户的关联,从而生成相应报告的程序。这一点尤其有助于数据信息的整合。

然而究竟谁该分配以及持有惟一的标识符呢?是像以前那样各商家持有自己的,还是由第三方统一做标识性服务?毕竟前期已经投入很多时间、物力和财力,Oppenheimer公司的数据管理系统已经拥有了自己的惟一标识,但对于性价比合适的第三方统一服务亦有期待。可是TIAA-CREF公司却似乎对标识符表现出迟疑的态度,他们认为,是否各商家各自持有惟一标识或由第三方分派公用标识,都取决于是否能得到华尔街每个商家的支持。

与此同时,公用的标识符也不是那么容易实现的,因为每个公司的业务内容有很大的不同。于是,身为资讯行业的资深专家们无不表现出担忧之情——商家究竟该如何看待他们的客户,又该如何整合客户的信息?

用元数据连接用户数据

正当业界对惟一标识符的细节问题进行争论的时候,State Street公司已经在整个公司进行数据的整合。State Street从1999年就开始了这项工作。当时,许多独立系统,如贸易数据、关联数据以及资料数据等都在各司其职,但是怎么才能将这些数据放在一起,从而得出相应的客户服务策略以及客户报告呢?显然,一旦数据整合成功,系统将更加富有功效,能输出有规则可循的执行指令,并有决策和最终报告的支持。于是,一个20名工程师、分析师以及高级分析师的团队开始通过连贯元数据的应用实现对数据源的连接,即通过元标签将上下文、内容以及信息结构都链接到数据域的后面。专家称,元数据将驱动未来数据管理的架构,同时元数据也是全部数据整合策略的中心点。通过元标签的应用,State Street保留了其自身的数据格式而没有强加其他供应商和数据提供商数据格式进行匹配。并且,对于不同格式的数据用一个传输层提供映射。State Street首先攻克了其资料数据,其次是派生的数据变量,最后即宣告其带有客户数据的数据仓库完成了整合。如今,该公司将数据与业务系统实现了连接,提供了数据的一站式提取。

总体来看,State Street副总裁John White指出,上述数据整合项目的头号挑战就是确保数据的准确性以及相应的技术——对于数据功能须有一定级别的准确理解力。

项目中一个重要的技术就是数据结构。相比一些厂商通过分配内存分区来实现应用程序调用数据而言,State Street利用一些相关组件建立了自己的数据结构,并且使用的是一些业界标准的接口,如ODBC和JDBCM。

华尔街的商家们也更加关注对数据的治理,即如何使数据有用。虽然市场上正在出现一些使数据可视化的工具,但是这并不代表商家们只是将带有标签的数据集中到一起就可以了,这些新型工具的初衷是解析数据。先进的数据分析应该是一个复杂事件的处理流程,该流程可以对大量快速流动的数据自动作出判断,如对一些实时交易的数据和可执行的业务智能化数据。State Street 全球顾问就表示,将积极转战BI(商业智能)模式。

链接:以客户数据为先

通过IBM主数据管理产品(IBM master data management product)及Web客户中心(Web Sphere Customer Center)等,TIAA-CREF(美国一家养老金公司)创建了一个单独的客户数据仓库。在IBM主数据管理中心,一些业务规则用来保持数据的激活状态并确保任何内部或外部的用户都能在准确的时间、准确的位置,从而唤醒准确的数据。

为了使多个应用能更灵活地使用同样的数据,TIAA-CREF借用SOA理念完成了对IBM主数据管理软件套件与现有应用的整合。在此整合中,TIAA-CREF首先启用了一个公用的数据模型及数据定义,接着,在集中的数据模型和所有应用之间就可以交付可再度使用的整合以及数据转换了。正是由于Web服务具有可再度使用的属性,TIAA-CREF只需要设计一个整合层即可,而不必反复很多次。

此外,每个企业都会有一些遗留的业务应用,而且替换这些IT遗产要付出很大的代价。上述整合的方式对于即使不是面向服务的应用也可以实现与新客户数据中心的连接。

TIAA-CREF下一个目标是保证客户数据的可升级,如在企业内扩大数据整合的附加功能等。

Reference Code: RN_DW_CIW_08_18_08_1_CN

 
comments powered by Disqus

近期搜索:
A B C D E F G H I J K L M N O P Q R S T U V W X Y Z Others