EMC成功案例分析.pptx

《EMC成功案例分析.pptx》由会员分享，可在线阅读，更多相关《EMC成功案例分析.pptx（41页珍藏版）》请在得力文库 - 分享文档赚钱的网站上搜索。

1、1 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division32 Copyright 2010 EMC Corporation.All rights reserved.Greenplum 成功案例成功案例EMC Greenplum Training For ATCEMC咨询服务部 Tracy.Li易安信电脑系统（中国）有限公司2010年11月2 Copyright 2010 EMC Corporation.All rights reserved.Data Computing DivisionGreenp

2、lum的应用场景举例客户管理，ODS，数据集市等数据挖掘，经营分析，网络分析，知识库管理，成本效益分析等BI/DW利用Greenplum最低的TB数据成本（高性价比）利用Greenplum高效的数据加载能力，迅速将长期积累的数据入库利用Greenplum的并行数据流技术，将企业遗留的文件数据加工入库利用Greenplum的并行数据流技术，进行统计、访问和加工分析可以高效、低成本的存储、访问当前及历史数据数据非常难以加工处理成数据库表数据来存放（非结构化数据）需要专用的处理程序处理（MapReduce）处理结果适合数据库保存，或者需要结合数据库数据进行分析需要结合数据库并行处理外部数据3 Cop

3、yright 2010 EMC Corporation.All rights reserved.Data Computing Division(Recochoku)Greenplum的客户4 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Divisionl 互联网行业l 电信行业l 银行业l 保险行业l 证券行业l 制造业 l 交通物流运输行业l 其他Agenda5 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Divisi

4、on淘宝 阿里巴巴 支付宝数据仓库业务使用使用通过分析用户的网络点击日志，进行产品关联分析，让客户可以快速的找到相近产品原有解决方案及原有解决方案及问题Oracle加载速度非常慢，真的令人无法接受技术人员天天抱怨做客户详细复杂的点击查询，要等上半天到一天，有时还出不来结果，浪费我们大量的时间业务经理已经忍无可忍了现在系统无法满足海量的历史数据的分析应用Greenplum是幕后的英雄是幕后的英雄海量加载由Greenplum完成汇集了Alibaba所有的历史数据真是一个超真是一个超级的海量的海量数据数据库软件！件！客客户技技术部部门评价价网站日志网站日志交易数据交易数据详细数据详细数据Greenp

5、lumGreenplum海量基础数据海量基础数据大数据量查询大数据量查询OracleOracle加工数据加工数据门户网站门户网站高并发查询高并发查询。用户信息用户信息6 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division日志挖掘服日志挖掘服务器器H+1，20台台信用信用/CTUData mart/计算平台算平台数据数据仓库主主库定定时任任务计算算60台台数据数据分分发数据源数据源OLTP 系系统财务系系统销售系售系统客服系客服系统会会员营销Data mart/计算平台算平台 抽取抽取数据收数据收集

6、分集分发中心中心数据数据仓库工具与管理平台工具与管理平台/调度度系系统)管理管理元数据元数据(Meta Data)管理管理CDC资金金/财务等等Data mart/模型模型计算平台算平台CDCCDCCDC账户系系统数据数据仓库备库查询60台台数据数据历史史库/挖掘挖掘40台台CDCCDC数据数据分分发数据数据分分发风控系统会员营销客户服务资金管理财务分析客户信用挖掘工具集商业智能信息门户KPI报表与业务报告业务指标仪表盘监控运营与营销数据分析综合数据查询挖掘分析报告用户访问行为跟踪竞争情报日志收集日志收集服服务器器20台台日志日志/行行为模型模型计算算准准实时，4台台 服服务 打点打点 服服务

7、线上即时作弊判断线上即时个性化营销企企业数据中心数据中心网站网站访问交易系交易系统图例已经上线greenplum集群，总共120台即将上线查询集群 总共60台淘宝 阿里巴巴 支付宝数据仓库7 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Divisionl 互联网行业l 电信行业l 银行业l 保险行业l 证券行业l 制造业 l 交通物流运输行业l 其他Agenda8 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Divisi

8、onl 互联网行业l 电信行业l 银行业l 保险行业l 证券行业l 制造业 l 交通物流运输行业l 其他Agenda9 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division北京银行基础数据平台北京银行是一家股份制商业银行。在北京、上海、天津、西安拥有136家营业网点。北京银行目前是中国第二大城市银行及北京地区第三大银行。功能和定位：实现信息资源的集成、整合和共享建立全行合理的数据架构、体系作为服务于各业务部门、各分行的的分析决策支持平台初始全量：300GB 每日加工数据文件：22GB 加载到数据库：

9、10GB近线存储（9个月数据）：估算2TB离线存储（5年数据）：估算8TB10 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division北京银行基础数据平台物理架构11 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division北京银行基础数据平台逻辑架构12 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division深发展银

10、行ODS平台深圳发展银行是中国第一家面向社会公众公开发行股票并上市的商业银行。国内银行业排名第八。功能和定位：实现信息资源的集成、整合和共享建立全行合理的数据架构、体系作为服务于各业务部门、各分行的的分析决策支持平台含有总行所有历史数据，支持广泛的纵横分析应用 现有数据量：18TB 每日增长：60GB+集成第三方软件：Datastage、Cognos和Siebel13 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division物理架构深发展银行ODS平台2+6模式组成计算平台14 Copyright 20

11、10 EMC Corporation.All rights reserved.Data Computing Division逻辑架构深发展银行ODS平台15 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division中信银行信用卡中心数据仓库 中信银行为中国大陆第七大银行，其总资产为12000逾亿港元，共有13485名员工及416间分行。截至2009年底，累计发卡数量突破930万张，年交易额近800亿元，经中国银监会批准成为国内同行业为数不多的几家分行级信用卡专营机构之一，业务范围包括办理本外币信用卡的发

12、卡业务。功能和定位：实现信息资源的集成、整合和共享信用卡中心数据仓库支持防欺诈，营销支持等多种挖掘专题应用 现有数据量：6TB 每日增长：40GB+集成第三方软件：ETL ToolBox、Cognos和SAS16 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division物理架构中信银行信用卡中心数据仓库2+4模式组成计算平台17 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division逻辑架构中信银行信用卡中心数

13、据仓库SAS数据集AS400DB2卡业务系统卡中心数据中心系统基础数据层（ODS）数据仓库层（DW)BI ServerCognosMicrosoft SQL ServerMicrosoft Analysis PHPMicrosoft.NetJAVA 应用用18 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Divisionl 互联网行业l 电信行业l 银行业l 保险行业l 证券行业l 制造业 l 交通物流运输行业l 其他Agenda19 Copyright 2010 EMC Corporation.All r

14、ights reserved.Data Computing Division华泰保险数据仓库华泰保险股份有限公司是中国第一家全国性股份制财产保险公司，公司注册资本金13.33亿人民币，在全国30个城市设有分支机构。功能和定位：建立全公司数据挖掘平台，实现数据创造价值的目标反映公司整体经营情况的“立体式数据中心”对于保监会、各地保监局等监管报表进行统一数据出口支持车险业务：承保分析、理赔分析、续保分析、保费分析、渠道分析、客户分析财务与绩效：财务管理分析、绩效管理分析、盈利能力分析、综合费用分析、平衡积分卡、风险管理：精算与产品、准备金仿真测量、偿付能力分析、巨灾分析20 Copyright 2

15、010 EMC Corporation.All rights reserved.Data Computing Division物理架构华泰保险数据仓库21 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division逻辑架构华泰保险数据仓库22 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Divisionl 互联网行业l 电信行业l 银行业l 保险行业l 证券行业l 制造业 l 交通物流运输行业l 其他Agenda23

16、Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division华泰证券数据仓库华泰证券股份有限公司，1991年5月在南京正式成立，是中国证监会首批批准的综合类券商，也是全国最早获得创新试点资格的券商之一。华泰证券及华泰联合证券在全国大中城市拥有180个营业网点，已基本形成集证券、基金、期货、直接投资和海外业务等为一体的、国际化的证券控股集团构架。功能和定位：建立全公司数据挖掘平台，实现数据创造价值的目标反映公司整体经营情况的“立体式数据中心”作为服务于各部门的分析决策支持平台初始全量：10 TB 年增量：2

17、TB24 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division物理架构华泰证券数据仓库25 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division逻辑架构华泰证券数据仓库26 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Divisionl 互联网行业l 电信行业l 银行业l 保险行业l 证券行业l 制造业 l 交通物流运

18、输行业l 其他Agenda27 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division双鹤药业数据仓库系统北京双鹤药业股份有限公司，中国大型综合型制药骨干企业，位列全国医药制造行业前十名。功能和定位：构建企业级数据仓库和商务智能平台覆盖生产、财务、分销、质量管理等领域集成预算数据与其他相关系统产品选型过程：数据仓库 Oracle 还是Greenplum?ETL Tool Oracle Data Integrator 还是Informatica?最终方案：最终方案：Informatica+Greenpl

19、um+OBIEE28 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division物理架构双鹤药业数据仓库系统29 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division逻辑架构双鹤药业数据仓库系统30 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Divisionl 互联网行业l 电信行业l 银行业l 保险行业l 证券行业l 制

20、造业 l 交通物流运输行业l 其他Agenda31 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division安吉天地汽车物流BI系统安吉天地汽车物流有限公司（ANJI-TNT）是国内汽车物流业首家经国家交通部、外经贸部正式批准、注册资本最大的汽车物流中外合资企业。公司注册资本3000万美元。公司主要从事与汽车零部件相关的物流和与汽车相关的国内货运代理服务、整车仓储、物流技术咨询、规划、管理、培训等服务以及国际货运代理。功能和定位：科学管理和合理开发内部和外部信息资源通过数据分析和挖掘，显著降低物流运输成

21、本利用面向主题数据模型，构建统一数据分析平台32 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division物理架构安吉天地汽车物流BI系统33 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division逻辑架构安吉天地汽车物流BI系统34 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division系统展示安吉天地汽车物流BI系

22、统计划量分析：日报表：运输计划量RDC分析、运输计划量供应商分析、运输计划量日统计分析月报表：运输计划量运输方式分析、运输计划量分发性质分析年报表：运输计划量运输方式分析、运输计划量分发性质分析图标分析：当前日期与上月同期图表、当前日期与去年同期图表35 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division系统展示安吉天地汽车物流BI系统实际量分析：实际操作量分发性质分析、实际操作量供应商分析实际操作量运输方式分析、实际操作量统计分析KPI分析：OTC订单综合分析、OTC例外订单综合分析OT订单综合

23、分析、OT例外订单综合分析36 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division系统展示安吉天地汽车物流BI系统运输成本分析：车型角度分析：RDC铁路运输成本分析、RDC水路运输成本分析运距角度分析：RDC公路运输成本综合分析、RDC公路运输成本分析运输重量角度分析：RDC公路运输成本综合分析、RDC公路运输成本分析其他角度分析：承运商运输成本分析、供应商运输成本分析、RDC运输成本分析、运输线路成本分析、承运商运输计划完成情况分析、供应商运输计划完成情况分析决策分析：仪表盘-计划完成情况分析3

24、7 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Divisionl 互联网行业l 电信行业l 银行业l 保险行业l 证券行业l 制造业 l 交通物流运输行业l 其他Agenda38 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division北京第二外国语学院辅助决策系统北京第二外国语学院于1964年创立，是一所以外国语言文学为主体学科的知名特色大学，现有本科专业22个，专任教师近500人，在校学生10000余人。功能和

25、定位：形成集中管理的统一数据平台建立以业务为主题的综合分析系统，开发常用的统计报表以数据中心平台为基础，不断完善校情展示和决策分析系统招生分析：历年招生人数分布分析、历年招生人数多角度对比分析、北京地区历年招生人数分布分析、北京地区各中学贡献度分析、小语种网上报名和录取统计分析就业分析：就业分布统计分析、就业趋势分析、各专业就业趋势分析、就业单位总人数统计分析、优秀毕业生、贫困生、灾区毕业生、招生就业全程跟踪统计分析、在校及就业情况统计分析高基报表：招生、在校学生来源情况表、学生变动情况、学生退学主要原因多维（OLAP）分析：学生综合信息OLAP分析、在校学生信息OLAP分析39 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division物理架构北京第二外国语学院辅助决策系统40 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division系统展示北京第二外国语学院辅助决策系统41 Copyright 2010 EMC Corporation.All rights reserved.Data Computing Division