Oracle 云端数据集成解决方案
DIPC
Oracle 云平台事业部
企业数字化创新对数据集成的需求
数据集成解决方案
数据多样性
多样数据支持
(数据库，大数据平台）
（异构数据库，大数据平台支持）
数据实时性
数据秒级同步
（实时大屏，实时分析）
（实时数据采集）
数据高可用
（异地双活，7*24在线）
应
对
措
施
数据容灾
（云上容灾，多云支持）
数据可信赖
数据治理
（数据质量管理，客户视图360）
（数据清洗转换、质量管理，）
数据随时可用
混合云数据集成
（公有云，私有云）
（多种云数据集成）
Oracle数据集成四大天王
ORACLE
GOLDENGATE
•
•
•
•
•
•
•
•
应用场景
业务连续性
操作型报表
大数据平台实时供数
数据实时上云
核心能力
非侵入式增量数据实时
实时增量同步
捕获
数据一致性保障
异构数据源和大数据支
OGG
持
微服务架构支持私有云
和公有云
ORACLE
DATA INTEGRATOR
•
•
•
•
•
•
•
•
•
应用场景
企业数据仓库和数据
集市
大数据湖
批量数据迁移
核心能力
高性能ELT架构
批量数据清洗
基于声明式设计实现
“一次设计，多次部署”
生命周期管理
ODI
异构数据源和大数据支
持
支持Lambda和Kappa
架构
扩展的知识模块
ORACLE
ENTERPRISE
METADATA
MANAGEMENT
ORACLE
ENTERPRISE
DATA QUALITY
•
•
•
•
•
•
•
•
应用场景
数据质量管理
数据治理
主数据管理
监管合规
核心能力
数据概况分析和数据探
数据质量管理
索
数据匹配和去重
地址标准化
EDQ
数据丰富
•
•
•
•
应用场景
元数据管理
数据治理
增加业务人员与IT人
员的协同
监管合规
核心能力
元数据管理
• 影响分析
• 业务和技术数据血缘分
析
OEMM
• 模型版本管理
• 业务术语
• 异构数据源和大数据支
持
Oracle Data Integration Platform Cloud
本地部署、公有云和混合云数据集成平台
数据实时复制
GoldenGate
• 一个平台
- 集数据实时复制、数据清洗转换、数据
治理于一身
Oracle Data
• 零代码
Integration
- 点击与拖拽完成配置
• 完善
Platform Cloud
- 异构，混合云数据集成支持
• 简单视图
- 完善的监控与管理界面
数据转换
ODI
数据治理
EDQ
4
DIPC @ OCC ￚￚ企业级的数据管理指挥中心
Customer Site
HTTP
Data Integration
Platform Host
Studio
App
Any Data Center
Party PaaS)
Other
DBs
• 零代码
Apps/
SaaS
Any Data
HTTP
(Customer On-Premise or
Platform
Services
- 点击与拖拽完成配置
(metadata only)
3rd
- 集数据实时复制、数据清洗转换、数据
治理于一身
OCC
(metadata only)
SaaS / PaaS / DaaS
• 一个平台
Data Integration
Platform Agent
Big Data
Messaging
• 完善
- 异构，混合云数据集成支持
- 完善的监控与管理界面
DIPC 功能介绍
DIPC 标准版
主要使用场景
 数据仓库和数据集市中的
数据集成
 数据迁移
核心功能
 批量数据移动
 ETL数据转换
 简单的数据概要分析
 ODI 企业版
+数据概要分析
DIPC 企业版
主要使用场景
 大数据集成
 数据实时同步
 零停机数据迁移
 双活数据库
 实时数据仓库
核心功能
 大数据&流数据ETL
 实时数据复制
 包含DIPC标准版所有功能
 GoldenGate all
 ODI for bigdata
DIPC 数据治理版
主要使用场景
 数据健康检查
 数据清洗
 数据血缘分析 （后期版本）
核心功能
 数据概要分析和检查
 匹配和合并
 数据血缘分析
 包含DIPC企业版所有功能
 Enterprise Data Quality
 Metadata Mgmt （后期版本提供）
Copyright © 2017, Oracle and/or its affiliates. All rights reserved.
6
Oracle GoldenGate 支持多种数据源
On Premise
Database as a Service
GGCS
Database
Cloud Service
Deliver
Route
Pump
Trail
Capture
GoldenGate
Exadata
Cloud Service
Hadoop as a Service
GGCS
Big Data
Cloud Service
3rd Party Cloud
GoldenGate Cloud Service
 提供订阅式或者按时间收费
的公有云服务
主要用途
 通过 GGCS 实时交付数据到
Oracle 数据库云服务
 通过 GGCS 实时交付数据到
Exadata 云服务
 通过 GGCS 实时交付数据到
Oracle Big Data 云服务
（Hadoop and NoSQL）
3rd Party Cloud
 以 BYOL 方式运行在第三方
云上，交付数据到任何
GoldenGate 支持的目标库
以灵活的拓扑结构满足多种应用需要
分析型
合并
实时ODS/BI
单向
查询分流
OLTP
查询 / 报表
双向
主用/备用或
主动-主动，实现高可用性
ODS
OLTP
操作型
广播
数据分发
集成/整合
实时数据仓库
OLTP
ODS
对等
负载平衡/多主分布式
EDW
级联式
分布式业务
OLTP
OLTP
OLTP
OLTP
OLTP
OLTP
OLTP
OLTP
Copyright © 2018 Oracle and/or its affiliates. All rights reserved. |
Stage
OLTP
Oracle GoldenGate 12c for Big Data
实时大数据集成
Copyright © 2018 Oracle and/or its affiliates. All rights reserved. |
DIPC WEB UI 三步完成数据迁移和同步
3.监控数据同步
1.创建源和目标数据库的连接
2.创建数据同步任务
数据集成管理 -- 图形化数据转换设计
通过拖拉实现映射转换
数据集成管理 - 图形化数据转换设计
大数据和传统平台在同一界面中设计
数据质量管理 - 数据清洗
实现各种企业自定义规
则的自动检查和筛选
DIPC新一代数据集成服务平台蓝图
决策人员
管理人员
数据科学家
管理分析类应用
客户管理
财务管理
风险管理
运营管理
……管理
业务人员
沙盘演练应用
实时分析应用
数据
应用层
数据
服务层
Oracle 数据库
数
据
管
控
层
用户访问层
DIPC 新一代数据集成服务平台
数据传输
半结构化、非结构化数据
大数据集成
数据复制
核心系统
数据清洗
转换
总账系统
数据质量
管理
国结系统
元数据
管理
网银系统
数据保护
……系统
数据
交换层
数据
产生层
数据集成云 -- 数据快递
1
订单 #1: 私有云数据集成（OP到OP）
2
订单 #2: 混合云数据集成（ OP到Cloud ）
3
订单 #3: 多云数据集成（Oracle Cloud与其他云）
• 数据开放，例如：12306、政务查询
• 数据回流，例如：环球易购
• 数据交换，例如：海能达
Optional: Cloud Machine @ Customer Site
Customer Site
Oracle Cloud
Studio
App
HTTP
(metadata only)
Any Data Center
(Customer On-Premise or 3rd Party PaaS)
Other
DBs
Apps/
SaaS
Platform
Services
Any Data
HTTP
(metadata only)
SaaS / PaaS / DaaS
Data Integration
Platform Host
Data Integration
Platform Agent
Big Data
Messaging
15
DIPC OP to OP 方案
业务驱动
场景
解决方案
• 充分利用云服务快速部署、弹性和敏捷的特性，实现按需的
数据实时复制和清洗转换，降低运维成本，改善数据处理效
率
• 数据复制在本地数据中心进行，以满足安全合规的要求
• 统一的数据集成监控管理界面
OP Integration Software
ODI
GoldenGate
1
• 通过在云端部署DIPC服务，在本地数据中心部署DIPC 代理
的方式 实现一站式的数据实时同步，数据清洗、转换等业
务需求
DIPC OP 2 OP 方案核心优势Top6

用户数据不出On-premise环境，不存在安全合规问题；

源端与目标端数据传输在On-premise环境内完成，保证了高性能；

按照连接的数据库套数计费，不数CPU；

图形化的部署和使用界面，简单易用，学习&使用成本低；

系统管理与运维统一在Oracle Cloud云端完成，无需额外投入；

基于云的订阅和计价模式（包含使用、管理和运维），低TCO；
云上容灾
场景
业务驱动
解决方案
• 有效降低容灾中心建设成本
• 容灾中心实现服务高可用性、数据高可靠性、充分保障SLA
的要求
• 容灾中心建设周期短，具备良好用户体验的用户界面降低数
据迁移以及后续工作的工作量
软件：OS、虚拟化软
件、数据库软件（以
及维护费用）
计算成本
硬件：服务器、机架、
PDU（以及维护费用）
存储成本
硬件：存储、光纤交
换机（以及维护费用）
存储管理成本
网络成本
硬件：LAN交换机、
负载均衡、带宽
网络管理成本
云服务成
本
• 云服务快速部署，弹性伸缩，简单易用，一键上云等功能极大地提升
了生产效率
• 和传统容灾中心成本相比，基于云服务的容灾中心成本大大降低
• 容灾中心云服务模式可以有效降低建设周期
• 借助于云平台高可用性、高可靠性等能力，可以充分保障容灾中心数
据的可靠性，降低风险
• 当主数据中心发生故障时，通过将业务流量切换到容灾中心实现快速
恢复服务
• 对于部分数据源，DIPC支持远程捕获数据和远程投递数据，可以降低
在本地环境部署OGG的成本
客
户
端
间接成本
弹性架构
双向双活
相同技能
运维成本
空间、电力、制冷
访问即时切换到云备端
正向实时数据同步复制
云服务成本
人力成本
2
反向实时数据同步复制
On-premise
Database
Cloud Service
DIPC
Exadata
Cloud Service
公有云
实时、双活、比对/修复
基于云服务建设容灾中心的业务价值
提升业务效率
•
云服务快速部署，弹性伸缩，
简单易用，一键上云等功能
极大地提升了生产效率
降低总体成本
•
•
和传统容灾中心成本相比，
基于云服务的容灾能够大幅
降低容灾中心的建设和使用
成本
容灾中心云服务模式可以有
效降低建设周期
减少运营风险
•
•
借助于云平台高可用性、高
可靠性等能力，可以充分保
障容灾中心数据的可靠性，
降低风险
当主数据中心发生故障时，
通过将业务流量切换到容灾
中心实现快速恢复服务
DIPC for Cloud @ Customer
业务驱动
场景
解决方案
• 随着各业务流程的丰富和复杂化，必然会造成大量数据的重复提取，
重复建设，并衍生各类数据质量问题；
• 平台多样化，工具多样化，商业组件，开源产品，手工编码；内部接
口、外部接口等，结果就是数据杂乱无章。
OGG
ODI
EDQ
OEMM
DIP
C
3
• 在客户机房部署OCM云一体机，所有数据集成软件内置，降低实施难
度，缩短项目交付周期,实现企业级的数据调度指挥中心。
• 独立于生产系统，可以采用远程抽取和远程投递方式对生产数据库无
侵入，影响低
• 预置多项数据处理功能：支持数据的实时、批量获取；批量数据加载
和转换；流式数据处理；数据质量管理；元数据管理；数据保护等多
项功能
云上数据仓库
场景
BI & Data
Visualization
沉淀云上数据资产，实现数据分析
4
云上数据仓库
UNSTRUCTURED

DBCS
Exadata CS
Big Data CS
DIPC
通过DIPC实时采集数据上云，并
进行清洗转换数据，为实时BI、数
据分析沉淀优质数据资产
关键优势


DIPC用于数据实时采集，实现低
延迟，实时，增量数据采集
DIPC用于数据清洗和转换，实现
批量、高性能海量数据处理
STRUCTURED
业务价值


通过数据实时采集，数据清洗转换，
沉淀优质数据资产，使在云端进行
实时分析成为可能
实现读写分离，将查询工作负载引
流到云端报表应用，降低对生产环
境性能影响
Data Integration Platform Cloud是一个全面开放的平台
OLTP系统
Oracle Data Integration Platform Cloud
OLAP系统
运行在Oracle公有云
运行在本地数据中心
(部署远程代理在本地数据中心
或OCM)
运行在第三方公有云
(部署远程代理在任何公有云平台)
第三方
数据集
Copyright © 2017, Oracle and/or its affiliates. All rights reserved.
22
DIPC提供全面的数据集成解决方案
数据全生命周
期管理
数据仓库
自动化
云上容灾
跨云区域数据
中心容灾
数据高可用
实时数据分析
客户画像
迁移数据到
Oracle公有云
提供实时数据
服务
实时数据整合
业务系统非停
机数据迁移
数据上云
企业级数据治
理能力
实时运营报告
迁移数据到第
三方公有云
双活数据中心
数据资产地图
和血缘分析
数据治理
数仓上云
实时ETL
Cloud Play for China DC
CLOUD@
CUSTOMER
Cloud @ Customer
Any Workload
OMSC
备份与容灾
数据集成
SaaS
移动化
PaaS
IaaS
China Data Center
智能分析
Data Integration Platform Cloud
Q&A
Denis Gray – Sr. Director Product
Management
数据集成的挑战
缺乏熟练的IT人员
实时数据访问
7x24小时高可用
云端支持
企业缺乏既懂业务又懂数据的专家，
客户需要实时查看业务经营数据
客户要求业务系统一直可用
客户现在有私有云、公有云多
种环境要共享 数据
制约了企业更好的利用数据提升价值
任何种类的数据
任意位置的数据
Apps/SaaS
半结构化数据
应用/SaaS
数据库
大数据平台
Copyright © 2018, Oracle and/or its affiliates. All rights reserved. |
26
Data Integration Sales Play
应用场景
Oracle数据集成平台云提供了一个全面的基于云的解决方案满足客
户所有的数据整合和数据集成需求。
Data Integration Platform Host
DIPC Console
实时复制
数据转换
DIPC
Cloud
Agent
•
访问和整合数百个数据源（传统关系型数据库、大数据等）
•
消除停机时间
•
实现云端交付
•
实时复制选定的数据源
•
简化IT并为业务提供自助服务
•
实现数据治理，改善数据质量
数据治理
客户收益
Database CS
Oracle Public Cloud/Cloud @ Customer
DIPC
Remote Agent
使用Oracle数据集成平台云，客户可通过简单的WEB点击，实现数
据的转换，整合，实时复制和治理；而且帮助客户在云和本地数据
之间进行批处理和实时数据移动，并保持数据一致性，容错性和弹
性。
客户案例
•
香港海关
•
美国LBM控股
数据集成 - Why Oracle?
全面的数据集成平台
零代码
支持超过100种数据源
数据实时复制
云端
DIPC
数据批量转换
数据治理
全面的数据集成解决方案
On-Premises
图形化的操作界面
混合云环境支持
28
客户案例 - 美国LBM控股
销售过程
客户背景
美国LBM控股是家领先的建筑材料分销商，在美国29个州拥有230个分
支机构
机遇/挑战
机遇：客户希望得到一个全面清晰可见的公司视图，使他们能够按照每个
客户和每个产品的基础为业务带来更多的效率和可见性，并且还使他们能
够在未来进行预测分析。
现状：客户使用SQL脚本在他们的4个ERP之间移动一些数据，并将一些数
据合并到其中一个数据库中并报告出来。 并没有数据质量的管理。
挑战：客户数据分布于多个分公司的销售、生产、成本、财务、等系统。
数据库种类多样，通过构建数据仓库为他们构建一个包含主数据的存储库。
用例：云数据仓库（使用DQ） - 利用DBCS-EE和IaaS进行Microstrategy
报告
解决方案
-
Oracle Data Integration Platform Cloud (DIPC) – Governance Edition
-
Oracle Database Cloud Service - EE
- 团队从包含销售，产品，成本核算，制造
和财务数据的实施角度为客户提出了多阶
段路线图。 讲述企业公司如何建立云上数
据仓库。
- 向客户展示了ODI和数据质量产品的演示。
讲述使用单一平台进行数据移动和仓储的
价值，以及将来自不同供应商的各种产品
拼接在一起以构建数据仓库的价值。
竞争对手
- Redshift，Informatica和Microstrategy
在讨论的最初阶段。 在3-4次会议之后，
我们能够让客户缩小他们对Oracle和
Microstrategy的选择范围
合作伙伴
-
Southport for the implementation
Copyright © 2018, Oracle and/or its affiliates. All rights reserved. |
29
Cloud Service - 0307
Category
PaaS
Compute
Object Storage
Block Storage
IaaS
Archive Storage
IP Network
Load Balancer
Container Cloud Service
Container Container (K8S)
Pipeline(Werker)
Database Cloud Service
RAC
Database Backup Cloud Service
MySQL Cloud Service
Data
Manageme Big Data Cloud Service
nt
Event Hub Cloud Service
NoSQL Database
Data Hub (Apache Cassandra )
Autonomous Data Warehouse
Java Cloud Service – SE、EE、Suite
Mobile Cloud Service
App Dev
DevCS
Application Container
Visual Builder
C@C
Available
Available
Available
Available
Available
ECC
Available
Available
Available
Available
China DC
Q1 FY19
Q1 FY19
Q1 FY19
Q1 FY19
Q1 FY19
Q1 FY19
Q1 FY19
Q1 FY19
Unknow
Q1 FY19
Q1 FY19
Q1 FY19
Q1 FY19
Q1 FY19
Available
FY18 Q3
Roadmap
Q1 FY19
Q1 FY19
Q1 FY19
Q1 FY19
Q1 FY19
Category
Business
Analytics
Data
Integration
PaaS
C@C
Analytics Cloud –Standard、Enterprise Available
China DC
Q1 FY19
DIPC
Available
Q1 FY19
Data Integrator Cloud Service
Available
Q1 FY19
Goldendate Cloud Service
Available
Q1 FY19
Internet of Things Cloud
Available
Q1 FY19
SOA Suite Cloud Service
Available
Q1 FY19
Managed File Transfer Cloud Service
Available
Integration Cloud Service
FY18 Q3
Q1 FY19
API Platform Cloud Service
FY18 Q3
Q1 FY19
Available
Q1 FY19
Roadmap
Q1 FY19
Available
Q1 FY19
Process Cloud
APP
Integration
WebCenter Portal Cloud Service
Content and
Experience Autonomous Content and Experience
Cloud
Identity Cloud Service
Security Monitoring and Compliance
Security&
Cloud
OMC
Oracle Management Cloud
Q1 FY19
Q1 FY19
3
Cloud Play for China DC
Oracle Cloud：
Global Data
Center
1. Cloud@Customer（公有云私有化）
2. Any Workload（企业应用上云）
3. OMSC （智能运维）
China Data
Center
4. Backup & DR（备份和容灾上云）
5. Data Integration（数据集成）
Oracle Cloud
@ Customer
Oracle Cloud
6. Mobility （企业移动化）
7. Analytics（智能分析、数据大师）
Copyright © 2018 Oracle and/or its affiliates. All rights reserved. |