Data Warehouse Business Intelligence

Views:
 
Category: Education
     
 

Presentation Description

No description available.

Comments

By: jezulu (37 month(s) ago)

How do i download this presentation?

By: childek (43 month(s) ago)

How to download this ppt?

By: subedar (48 month(s) ago)

I alrteady registered to this site, but unable to download few sites including thius ppt. please i need this ppt. Waiting for ur response I like this presentation very very much. plz send me this presentation sir...plsssssss sir

By: subedar (48 month(s) ago)

I alrteady registered to this site, but unable to download few sites including thius ppt. please i need this ppt. Waiting for ur response

Presentation Transcript

Slide1: 

数据仓库/商业智能 Sun电子计算机中国公司 服务热线:8008103786 Data Warehouse/Business Intelligence 郝仿树 Richard.hao@sun.com Tel:68035588ext28925

Slide2: 

数据仓库/商业智能市场统计 Sun公司数据仓库/商业智能参考模型 Sun公司可伸缩的DW/BI参考模型 Sun公司在DW/BI参考模型的优势 Sun公司DW/BI参考模型成功案例 数据仓库/商业智能简介 Data Warehouse/Business Intelligence

数据仓库/商业智能: 

数据仓库/商业智能 -------数据仓库/商业智能市场统计 Data Warehouse/Business Intelligence (DW/BI)

Slide4: 

全球IT服务市场预测2000-2005 到 2002年, 50 % 的 IT服务提供商将会把BI服务整合到他们的市场策略中. 到 2003年,有没有BI的功能将会是评价企业IT解决方案的重要依据之一. 到 2003年, 企业会认为投资BI是增强企业竞争力的必不可少的投资. 到 2004年, 50% 的全球 前2000 家公司将会实施企业级BI系统 到 2005年, 中大型企业中的70%会使用BI系统 据预测,BI的服务市场将会从2000年的$90亿增长到2005年的$185亿 据预测全球企业每年将产生 1-2 exabytes的数据 (1 exabyte = 1 billion gigabytes), 通过BI工具来做多维分析的需求将急剧增长 全球数据仓库服务器市场预测, 2000-2005年 2000 2005 2000-2005 ($M) ($M) CAGR % Data Warehouse/Data Mart 5954 8373 7.1 Data Analysis/Data Mining 2685 3806 7.2 -------巨大的BI市场 数据仓库/商业智能市场统计 Note: CAGR is Compounded Annual Rate of Growth Source: Gartner Dataquest

Slide5: 

-------数据仓库(Data Warehouse)/商业智能(Business Intellegence)发展趋势 数据仓库/商业智能市场统计

Slide6: 

数据仓库/商业智能 -------Sun公司DW/BI参考模型 Data Warehouse/Business Intelligence (DW/BI)

Slide7: 

及时行动 = 保证客户最大的投资收益 Sun公司DW/BI参考模型 -------数据仓库/商业智能信息架构 实现从业务运行到运行管理、战略管理的转变,有效支持决策: 数据仓库、数据挖掘、运营分析 操作层 经营管理层 决策层 企业业绩管理分析 战略分析,战略管理 计费 网管 营帐 客服 MIS系统 外部数据 系统平台solaris,sparc,Sun One KPI指标 应用系统 企业内部网络、自我服务、预警机制

Slide8: 

DW/BI in an Enterprise 知识工人 用户 DW/BI (DSS) -------数据仓库/商业智能在企业信息系统中的应用 Sun公司DW/BI参考模型

Slide9: 

Meta Data Data Analysis Business Modeling Data Mining Query & Reporting Portal Data Warehouse Management High End, Mid Range Work Group Sun Ray Thin Client =================== S T O R A G E ================== 数据源 OLAP Data Warehouse Generation DW, Modeling Data Staging Extract, Transform, Load 知识工人 -------数据仓库/商业智能概念模型 Sun公司DW/BI参考模型

Slide10: 

工作量大 系统性能降低 不便于升级和维护 延长开发周期 大量的培训和支持费用 产品选型 管理复杂 -------建设DW/BI系统面临的挑战 DATA ETL工具 WEB服务 工具管理 OLAP客件 报表工具 安全控制 OLAP服务器 调度工具 前端工具 设计工具 服务器平台 存储平台 存储管理 性能管理 备份恢复 容灾方案 DATA 即席查询 变化管理 Sun公司DW/BI参考模型

Slide11: 

完整的一体化解决方案! -------一体化的系统解决方案:Sun 公司参考模型 服务器 存储 工具 专业服务 … Sun 同方案供应商合作提供高质量的经过验证的参考模型 设计目标是帮助客户能够尽快响应最终用户的需求,降低实施风险和实施成本 Revenue Sun公司DW/BI参考模型

Slide12: 

▲ 快速实施 ▲ 减少风险 ▲ 经过测试和调优的解决方案 ▲ 提高系统的可用性 ▲ 投资保护 ▲ 较好的灵活性 -------为什么要提供参考模型? Sun公司DW/BI参考模型

Slide13: 

Sun 公司端到端的DW/BI参考模型 Sun公司DW/BI参考模型

Slide14: 

-------数据仓库参考模型(Sybase IQ-M) Sun公司DW/BI参考模型

Slide15: 

-------数据仓库参考模型(Sybase IQ-M) iForce system in Menlo Park Sun公司DW/BI参考模型

Slide16: 

包括9个节点156 颗CPU 输入源数据48.2 TB 数据仓库实际使用22TB : Disk/input_data ratio=0.46 IBM/NCR (以及其他的 DBMS)将需要 300 TB (disk/data=10) Loading<=>query impact : less than 6.9% 整个系统的故障恢复时间为37秒钟. 已有的关于参考模型的文档: “Deployment Guide for Sybase-Sun DW Reference Architecture” “Sizing Guide for Sybase-Sun DW Reference Architecture ” 独立的审计文档(Francois Rab公司): “ Worlds largest verified DW “ Audit document: “300TB-Equivalent DW” -------数据仓库参考模型(Sybase IQ-M) Sun公司DW/BI参考模型

Slide17: 

-------数据仓库参考模型 iForce system in Menlo Park 参考模型: 1800亿行的电信CDR数据 每行270字节宽 49 行 48.2 TB 源数据 压缩成 14 TB 的 IQ 数据 (=16TB的RAID 5存储) CDR 数据的压缩: 270 bytes =>79 bytes 加载速度: 50-200亿行数据/每天 156 CPUs 多节点线性扩展度+97% E-mail logs 加载 加载 100亿 emails (each 750 bytes, 7.7TB) 到 2.4 TB 用1天的时间加载 300亿 email logs (=12 TB)到 3.5TB Sun公司DW/BI参考模型

Slide18: 

数据仓库/商业智能 -------Sun公司可伸缩的DW/BI参考模型 (DW/BI)

Slide19: 

数据仓库 Sun 4800 -Sun Fire 6800,12k,15k 数据集市 Sun Fire 4800-Sun Fire 6800或V880,SF480 开发平台 Sun Fire 480,V880 测试平台 Sun Fire 480,V880 -------典型服务器配置 Sun公司可伸缩的DW/BI参考模型

Slide20: 

-------典型存储配置 数据仓库 SE9970,SE9980 500 GB to 20 TB 数据集市 SE3960,SE6960 300 GB to 5 TB 开发平台 T3ES,A5200 300 GB 测试平台 T3WG 200 GB E T L E T L Legacy ERP External 数据源 数据仓库 发布 WEB 暂存区 SAN Sun公司可伸缩的DW/BI参考模型

Slide21: 

数据集市及应用服务器 Data Mining 数据仓库门户服务器l 数据管理 数据源 ETL Knowledge Worker Java client 其他 OLAP Sun One Portal server Sun One App server -------数据仓库体系结构逻辑结构配置示例 客户端 Sun公司可伸缩的DW/BI参考模型 备份服务器 带库 磁盘阵列

Slide22: 

Meta Data Data Marts Data Analysis Data Mining Query & Reporting Portal Data Warehouse Management DW/BI in an Enterprise High End, Mid Range Work Group Sun Ray Thin Client =================== S T O R A G E ================== Data Source OLAP Extract, Transform, Load Knowledge Worker User Java client JDBC JDBC JDBC JMI JOLAP Sun One App server Sun One Portal server ------- DW/BI系统门户逻辑模型 Sun公司可伸缩的DW/BI参考模型

Slide23: 

数据仓库/商业智能 -------Sun公司DW/BI参考模型的优势 Data Warehouse/Business Intelligence (DW/BI)

Slide24: 

最大程度减少计划内和计划外的停机时间 服务器 硬件完全冗余 动态域故障隔离 端到端ECC保护 故障预测分析 自动系统恢复 部件自检测 服务 应用评估 数据中心评估 SunReady 高可用服务 Sun远程服务 专业培训 操作系统 Sun Cluster 3.0 热补丁 冗余网络支持 动态重新配置 强化的I/O驱动软件 强化的内核 独有特征 -------DW/BI参考模型-服务器(Sun Fire Server) 独特的RAS特性 Sun公司DW/BI参考模型的优势

Slide25: 

Web Server Web Server Web Server Web Server Web Server ------- DW/BI参考模型-服务器(动态系统域解决负载不平衡的问题) Sun公司DW/BI参考模型的优势

Slide26: 

F6800 F6800 白天的配置 夜间配置 ------- DW/BI参考模型-服务器(数据仓库服务器整合和动态重配置示例) Sun公司DW/BI参考模型的优势

Slide27: 

------- DW/BI参考模型-服务器(TPC-H测试结果3000GB) Sun公司DW/BI参考模型的优势             IBM没有公布相应的测试结果.

Slide28: 

------- DW/BI参考模型-服务器(DSS/DW 线性扩展能力 :SF6800 ) Sun公司DW/BI参考模型的优势

Slide29: 

8 years of Solaris Scalability & Balanced System Design Allows Near-Linear Speedup Data warehouse: CPU-bound Query Scanning 819 GByte Table 71x Speedup on 72-way Sun公司DW/BI参考模型的优势 ------- DW/BI参考模型-服务器(DSS/DW 线性扩展能力 :SF15K Oracle9i)

Slide30: 

全都采用 SPARCÔ芯片及 SolarisÔ系统 Sun公司DW/BI参考模型的优势 ------- DW/BI参考模型-服务器比较 Source: “Scalable Computer Architectures for Data Warehousing” By Mark Sweiger President and Principal Clickstream Consulting January 2002

Slide31: 

IQ Multiplex并发支持的‘无限性’ IQ (Multiplex) functions Sun Server IQ VLM Unix/NT 没有数据的重新分布 没有模式改变的维护工作 系统同步所需的I/O最小 (为其他并行系统的1/10) … ------- DW/BI参考模型-数据仓库引擎(Sybase IQ-M) Sun公司DW/BI参考模型的优势

Slide32: 

11.1x 12.9x 11.2x 19.05x 1.8x 0 10 20 IBM DB2 UDB 7.1 NUMA-Q Teradata MS SQL Server Informix Sybase IQM Data explosion” Ratio IQM Savings (per TB of raw input data”) :$1M /TB (NT) $2M /TB (Unix) Storage Cost : $100K / TB (NT) $200K / TB (Unix) -------DW/BI参考模型-数据仓库引擎(Sybase IQ-M) 有效的数据利用率 Sun公司DW/BI参考模型的优势

Slide33: 

-------数据仓库参考模型竞争优势(Sybase IQ-M优势) Sun公司DW/BI参考模型的优势

Slide34: 

低拥有成本 提供数据压缩而不是数据爆炸 集成的集群软件和存储管理软件 极具竞争力的价格,节约成本 可扩展性 线性的性能扩展能力,支持超大规模的数据仓库查询用户 能支持100-1,000用户 支持GB级到TB级的数据 速度 高效的 Ad-hoc 查询能力 高效的数据装载 良好的硬件优化能力 系统灵活性 任何时间-任何查询 Ad-Hoc –任何模式( Schema) 任何数量的节点 简单的维护 标准的SQL,易于学习 -------DW/BI参考模型-数据仓库引擎(Sybase IQ-M) Sun公司DW/BI参考模型的优势

Slide35: 

大容量 高性能 高连接能力 高可靠性和灵活性 为企业级SANs 和存储整合而设计 低总体拥有成本Low TCO High-End Enterprise -------DW/BI参考模型-数据仓库存储( StorEdge 9900 系列) SE9960 满配置7个机柜 最大32GB 数据cache 32 个主机接口. 512 块硬盘,18GB,72GB,181GB 91TB 最大裸容量 Sun公司DW/BI参考模型的优势

Slide36: 

------- DW/BI参考模型-数据操作系统( Solaris 8---最佳的UNIX 平台) Sun公司DW/BI参考模型的优势 保证应用继续运行 热补丁安装 动态重新配置 运行中操作系统升级 已有八年64个 CPU缩放能力的经验 Solaris 8

Slide37: 

-------数据仓库参考模型(Sybase IQ-M) Sun公司DW/BI参考模型的优势

Slide38: 

-------第三方评价 Sun公司DW/BI参考模型的优势

Slide39: 

☆ 在 iForceSM Ready Center(s)进行方案验证 目前在Menlo Park, 很快在 Paris, Zurich, Tokyo 等地 ☆ 参考方案实施手册 ☆ 服务器选型设计白皮书 ☆ 数据仓库服务器选型设计 ☆ Sun公司同其他方案提供商的专业服务 ☆ 培训 ☆ 白皮书, FAQs以及 DW/BI常用词描述 -------目前的资源 Sun公司DW/BI参考模型的优势

Slide40: 

-------目前的资源(实施手册) Sun公司DW/BI参考模型的优势

Slide41: 

-------目前的资源(容量规划手册) Sun公司DW/BI参考模型的优势

Slide42: 

完整的解决方案,能够使企业集中在核心业务的处理上 拥有世界第一的数据仓库应用(TPC-H)测试记录(3000GB)。 极强的线性扩展能力和扩充能力 参考模型可以根据数据量的增长而扩展 连续 18 个季度 Unix 服务器发货量第一(IDC 2001) 优秀的UNIX 操作系统Solaris Sun StorEdge T3 阵列是高容量,高可扩展易管理的存储阵列 全球 Unix 存储设备销量第一(以存储容量计)(IDC) 投资保护:单一的SPARC芯片, Solaris操作系统和 SMP 体系结构 -------Sun的价值 Sun公司DW/BI参考模型的优势

Slide43: 

数据仓库/商业智能 -------Sun公司DW/BI参考模型成功案例 Data Warehouse/Business Intelligence (DW/BI)

Slide44: 

输入数据 30+ TB 使用了16 TB 的存储 其他的 DBMS需要 +100 TB 存储节省 79% (同 RedBrick相比) 安装和配置时间 几天 (vs.几个月在传统的数据仓库中) 安装时间节省80% 已经在Sun公司 iForce Ready Center – Menlo Park得到验证 -------数据仓库参考模型成功案例 Sun公司数据仓库/商业智能参考模型典型成功案例 (Nielsen Media Research)

Slide45: 

电信行业需要保持1-5年的联机CDR数据 目前,这种需求大多数情况下用磁带来解决 电信行业投入大量的人力物力,财力来保持仅仅3-6个月的数据 (100-200亿)的CDR数据 Sun公司的参考模型证明了能够可以联机保持超过1000亿行的CDR数据 等于大型电信公司1-5年的CDR数据 (3-6千万的用户) 使用同样的成本 -------数据仓库参考模型成功案例 Sun公司数据仓库/商业智能参考模型典型成功案例 Telco TCO Example

Slide46: 

AT&T Bell Atlantic Bell South British Telecom Cellular One Clear Communications MCI Southwestern Bell Mobile Worldcom (LDDS) -------Sun公司DW/BI解决方案电信行业案例 Sun公司数据仓库/商业智能参考模型典型成功案例

Slide47: 

广东省移动通信局 广西区移动通信局 辽宁省移动通信局 湖南省移动通信局 重庆市移动通信局 浙江省移动通信局 西藏移动 青海移动 甘肃移动 福建省移动通信局 江西省移动通信局 四川省移动通信局 成都市移动通信局 贵州省移动通信局 上海移动 安徽移动 海南移动 甘肃移动 …… -------Sun公司电信行业案例 Sun公司数据仓库/商业智能参考模型典型成功案例

Slide48: 

"...Sun and Informatica have all the bases covered." "We have a scalable, high performance platform our customers can depend on" "Sun's Reference Architecture ... is a very useful initiative from a customer perspective." the big advantage…is that it provides the advance knowledge that this solution will work” -------数据仓库参考模型成功案例 Sun公司数据仓库/商业智能参考模型典型成功案例

Slide49: 

Abby National Bank America Savings Bank Banc One Bank of America PIMS Bank of Boston Barclays Bank Charles Schwaab Chase Manhattan Bank Chemical Bank Citibank Crestar Bank Edward D. Jones Fannie Mae Fleet Bank Fidelity Investments First Card First Union Mastercard International MBNA (US and UK) Merrill Lynch M&I Data Services National City Corp. Nations Bank Providian Bancorp Provident Financial Group Seafirst Bbancard Services Union Bank of Switzerland Visa Wells Bargo Bank Western Bank Sun公司数据仓库/商业智能参考模型典型成功案例 -------Sun公司DW/BI解决方案金融行业案例

Slide50: 

Insurance: Blue Cross Blue Shield Nat. Comp. Council for Insurance Geico ITT Hartford Insurance Utilities: China Power & Light Delmarva Ntergy Corporation Retail: Best Buy Dayton Hudson Eddie Bauer Le Printemps Lyreco MarketSMART Ross Stores Service Merchandise Sheetz Safeway Spiegel Walgreens Williams Sonoma Thrifty/Payless Drug (Rite Aid) Pharmaceutical/Health: Boehringer Mannheim Forest Labs Glaxo-Welcomme HCIA Johnson & Johnson Medapis Pfizer Pharmaceuticals Publishing: Time Warner Primestar Transportation: Alamo Car Rental American Airlines British Airways Continental Airlines Delta Airlines Royal Caribbean Manufacturing: Advanced Micro Devices Bay Networks Harris Semiconductor Industry Net Fisher Scientific General Electric Other A.C. Nielsen Government: Canadian Dept. of Fisheries Environment Canada (ICE) National Science Foundation NOAA Sandia National Labs South African Police U.S. Census Bureau Sun公司数据仓库/商业智能参考模型典型成功案例 -------Sun公司DW/BI解决方案其他行业成功案例

Slide51: 

超过 400家 Sun-Sybase IQ-M 用户 Nielsen Media Research, MCI Worldcom, AT&T Wireless, Airtel Vodafone, Ingenix/United Healthcare Corp, Wellpoint (BCBS), People's Bank, Citibank, Lehman Bros., American Express Travel, IRS, State of North Carolina, FedEx, AOL/TIme Warner 还有多家大型企业原来是竞争对手的客户,目前打算移植到Sun-Sybase平台上 Sun/Solaris是Sybase IQ-M的开发平台 -------市场的认可 Sun公司数据仓库/商业智能参考模型典型成功案例

Slide52: 

------- Sun公司成功案例 E10K作为总行数据仓库的主机平台 招商银行数据仓库系统包括对公系统、人事系统、储蓄系统等。 1. 对公系统具有多维分析、预测功能; 2. 人事系统主要提供统计功能; 3. 储蓄系统是投入最多、功能最完善的系统,涵盖了储蓄部门所有交易场所(柜台、电话银行、网上银行、ATM、POS)的全部业务(存单、存折、一卡通、信用卡)。 Sun公司数据仓库/商业智能参考模型典型成功案例

Slide53: 

SUN 高性价比 市场主流产品 可扩展的硬件平台 优秀的操作环境 JAVA技术 体系结构的灵活性 投资保护 #1的数据库合作伙伴 优秀的数据仓库平台管理软件 应用软件提供商 优秀的数据仓库工具软件 集成商 快速实施能力 行业经验 行业解决方案 数据仓库专家 -------三方通力合作赢得我们客户的信赖 Sun公司在DW/BI市场上的价值

Slide54: 

-------完整的一体化的系统解决方案! 硬件平台 管理平台 参考模型 良好的ISV,SI关系以及咨询服务 Sun公司在DW/BI市场上的价值

Slide55: 

通过任何设备、在任何时间和地点,对企业的关键业务问题提供实时决策支持信息 Real-time e-Business Intelligence Platform 谢谢!