suning technical workshops - oracle · 精准营销案例—渣打银行实时交叉销售...

23
Copyright © 2015, Oracle and/or its affiliates. All rights reserved. | 看甲骨文集成系统如何玩转大数据 甲骨文系统事业部

Upload: others

Post on 23-Aug-2020

20 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

看甲骨文集成系统如何玩转大数据

甲骨文系统事业部

Page 2: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

流动性分析

投资银行业务企业银行业务

欺诈检测

支付/银行卡

客户锁定

零售银行业务

托收

零售银行业务电子商务黑客攻击/网络钓鱼

零售银行业务

市场风险

交易情绪

投资银行业务

抵押贷款欺诈

零售银行业务员工欺诈

零售银行业务

交易策略

投资银行业务投资组合分析

理财企业银行业务

消费者情绪

零售银行业务

交易者监管

投资银行业务

信用可靠性

零售银行业务

小型企业

产品创新

支付/银行卡

保险业务

信誉风险

品牌管理

企业银行业务

零售银行业务

银行业大数据的业务机会

信息探索与发现类

个性化营销与服务类

产品设计与创新类

Page 3: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

大数据应用最佳实践之精准营销– 交互式营销推荐

Oracle Confidential – Internal/Restricted/Highly Restricted 3

客户富视图 事件知识库

智能营销平台

事件触发及过滤 大数据 传统数

据平台数据工厂 数据探索

数据平台

个性化推荐营销 客户服务 事件流个性化

实时推荐

1 1

2

3 3

公网 社交媒体 网银行网站 电商直销银行

银行渠道

捕获客户实时信息

收集客户访问轨迹

基于上下文结合产品及客户信息,

实时推荐

推送推送

Page 4: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

大数据应用最佳实践之精准营销– 基于事件个性化推荐

Oracle Confidential – Internal/Restricted/Highly Restricted 4

客户富视图 事件知识库

智能营销平台

事件触发及过滤 大数据 传统数

据平台数据工厂 数据探索

数据平台

个性化推荐营销 客户服务 事件流个性化

实时推荐

1

2

3

公网 社交媒体 网银行网站 电商直销银行

银行渠道

捕获客户实时事件

根据规则引擎,触发产品实时推荐

推送

2事件过滤

Page 5: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

大数据应用最佳实践之精准营销– 市场分析舆情监测

Oracle Confidential – Internal/Restricted/Highly Restricted 5

客户富视图 事件知识库

智能营销平台

事件触发及过滤 大数据 传统数

据平台数据工厂 数据探索

数据平台

个性化推荐营销 客户服务 事件流个性化

实时推荐

1

2

3 3

公网 社交媒体 网银行网站 电商直销银行

银行渠道

结合市场热点创建营销活动;根据舆情分析提供针对性干预或服务

推送推送

聆听市场声音,监测市场动态

聆听市场声音,监测市场动态

1

Bigdata Discovery混合搜索/分析数据库+ Hadoop

Studio交互式探索和分析创建和共享应用

Integrator数据集成和情感分析结构化和非结构化

Page 6: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

大数据时代的银行企业级数据架构设计建议精准营销平台之数据分布与流转关系

数据采集

基础设施(服务器、存储、网络)

数据源

数据服务

对外数据供应

业务数据供应

IT数据供应

精准营销 销售及运营支持

客户分析

行为分析

营销分析

决策分析 客户体验分析

客户体验

线上数据(交互数据)

传统数据(交易数据)

传统数据存储与管理(EDW)

客户营销门户

搜索/位置

社交网站

客户

账户

交易

产品

内容数据

语音

OA等

流数据处理实时事件处理 智能营销平台

……

……

盈利分析

风险管理

运营管理

客户分析 传统分析应用

……

实时事件侦听

客户Web行为数据采集

ETL

多结构数据存储与管理

客户行为大数据平台 客户行为分析系统

数据集市

通用语义区

数据分析与数据挖掘

整合数据区操作数据区

数据交换文件交换 数据库共享 Web services 消息交换

线上线下整合数据

个性化推荐与营销

个性化推荐

上下文信息

通过交易系统累积的信息,体现客户的基本信息和历叱交易行为

客户交易之外的信息,体现客户的行为和兴趣

融合了交易和交互信息的客户画像,是个性化推荐和电子银行客户分析的基础

批量数据流

实时数据流

Page 7: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

数据采集

基础设施(服务器、存储、网络)

数据源

数据服务

对外数据供应

业务数据供应

IT数据供应

精准营销 销售及运营支持

客户分析

行为分析

营销分析

决策分析 客户体验分析

客户体验

线上数据(交互数据)

内容数据

传统数据(交易数据)

传统数据存储与管理(EDW)

客户营销门户

搜索/位置

社交网站

客户

账户

交易

产品

语音

OA等

流数据处理

实时事件处理 电子银行营销推荐系统

……

……

盈利分析

风险管理

运营管理

客户分析 传统分析应用……

实时事件侦听

客户Web行为数据采集

ETL

多结构数据存储与管理

大数据平台 客户体验分析平台

数据集市

通用语义区

数据分析与数据挖

整合数据区操作数据区

数据交换

文件交换 数据库共享 Web services 消息交换

线上线下整合数据

个性化推荐与营销

个性化推荐

上下文信息

大数据一体化方案,免除用户对各结构数据的访问管理问题

BDA+Big Data SQL

无缝结合行内外各种复杂数据,进行数据探索和挖掘

可同时满足实时精准营销平台对OLTP及OLAP的需求ExadataODI/

OGG

大数据时代的银行企业级数据架构设计建议精准营销平台之能力及定位

Page 8: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

精准营销案例—渣打银行实时交叉销售

Gerry刚在Expedia.com刷SCB卡购买旅游票

• SCB智能系统(SCBIS)捕获Gerry交易

• SCBIS发现Gerry有和妻子去美国Texas旅游的打算,并可能需要外汇和旅游保险

• SCBIS进而通过新闻挖掘发现Texas正流行疫情,并发现Gerry无健康保险

• SCBIS马上发送短信和Email给Gerry

几天前,Gerry在Linkedin上说…“要和我妻子去Texas度个长假啦,Yay!”

对于要去美国旅游的SCB客户,必须了解TX正在流行疫情,如果要去,最好购买旅游和健康保险。请点击这里阅读最近的新闻,并点击这里购买旅游和健康保险。如果同时购买您和配偶的保险,可获得10%折扣(优惠码:AANXJS9)。

“使用SCB外汇服务可获得SG兑美元的最佳汇率,一小时内输入”AAS7645“即享10%折扣。

West Nile病毒疫情爆发,Texas已致16人死亡Molly Hennessy-FiskeAugust 14, 2012, 2:51 p.m.休斯敦—Dallas郡官斱宣称…

Page 9: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

ATM机

POS设备

智能手机应用

事件捕获和合作关系

客户识别临时缓存

实时事件捕获

路由

集成适配

规则

映射

实时、准实时、批量

数据传输层

实时决策

实时干预–点击聊天、点击通话

自适应学习

基于缓存的产品和优惠推荐

智能干预平台

WEBSERVICES MQ

NEX

T

BES

T

AC

TIO

N

BDRI执行

准实时/批量接受戒拒绝数据

准实时/批量更新模型

BDRI工厂

SCB库

客户资料、历叱交易、生活相关数据、分群、利润和风险信息、输入信息等

KEY VALUE PAIRS

地图信息,社交网络,设备日志,智能应用接口等

Staging

结构化、半结构化、非结构化

MapReduce + NLP

输出 – 意向、分群、增强的客户理解

ETL/实时

统计模型-倾向、分群等等

自然语言处理

意向和语义依据 非可视化的高级模型

数据可视化层

数据处理层

数据存储层

分类

精准营销案例—渣打银行基于大数据的EBM平台

Page 10: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

根据当前客户信息、网点信息和客户偏好实时决策,提供最合适的基金产品/银行卡业务

实时发送推荐短信

基于批处理了解推荐被接受/拒绝和并随后调整和优化推荐模型

返回纸质推荐信息

排队机

业务办理

1

2

排队信息实时传输

Oracle大数据整体解决方案

4

通知网点值班经理

3

5

某国有大型银行实时精准营销案例:业务流程

Page 11: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

开始

客户持卡在排队机上刷卡

并行加工预处理客户在银行所有的历叱数据

实施捕获客户信息

总行T+1的方式下发增量资金交易流水数据

Hadoop集群

精细化加工客户数据,形成客户宽表

Oracle RAC/Exadata

按拟定的业务规则对客户分类和打标签

Oracle Data Mining

实时匹配客户数据,推荐理财产品

Real Time Decision

理财产品推送给客户(凭据/短信)戒者值班经理

Oracle大数据整体解决方案

ESB

Big Data Connector

1. 反馈业务推荐办理情况;2. RTD自学习,自动优化算法

客户明细数据存储在NoSQL数据库,提供历叱数据查询

排队机

网上银行

手机银行

SequoiaDB

某国有大型银行实时精准营销案例:逻辑架构

Page 12: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2015, Oracle and/or its affiliates. All rights reserved. |

某国有大型银行实时精准营销案例:物理架构数据源

HDFS Sequoia

2台 X86 Server

(实时事件处理)

实时

Exadata

Cloudera Distributed Hadoop

Big Data Connector

Advanced Analytics批量

Web

Mobile

存/取款

信用卡

理财

Oracle ESBReal Time Decisions

Oracle Database 11g

Big Data Appliance

Sequoia DB

2台 X86 Server

(实时决策) 产品推荐营销事件

客户资料

营销活动

行为标签

排队机

营销反馈…

结果回馈

Page 13: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |

Oracle大数据一体机:Big Data Appliance

ODI* BDC*

Enterp

rise Man

ager*

Ora

cle A

ud

it Vau

lt an

d D

ata

base

Firew

all fo

r H

ad

oo

pA

ud

iting

*

Oracle Linux / JDK

Sun Server / InfinibandC

lou

dera

Man

ager

Ora

cle e

nte

rprise

R d

istribu

tion

• 18 Sun PC服务器,每台2C*18核 E5 2699 V3,总648核,每台128GB内存,总2304GB内存,每台12块 8TB SAS盘,总1.7PB存储容量

•内置40Gb InfiniBand交换机和用于管理的万兆交换机

• 软硬一体化集成设计,规避开源自建高风险

• 全栈调优、最佳实践、性能卓越• 完整的非结构化数据存储/计算/管理

/分析/挖掘/整合的平台• 快速上线部署,缩短项目周期• 全线商业支持,包括开源软件• 与数据库生态系统极佳融合• 企业级的安全管控• 斱便的水平扩展,适应长远发展• 绿色环保,高密度存储,占地面积小

Oracle Big data SQL

Page 14: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |

NoSQL DB

举例:根据客户和流水记录等信息,了解客户电商行为模式,位置和客户关注点及对品牌的体验和情感。在客户电话咨询时进行产品推荐或客户关怀。

Hadoop

HDFS2

YARN

Batch(MapReduce)

Other(Search)

(In-Mem)

Big data SQLPlug In

社交网络数据

电商访问日志客户行为记录

Oracle Big Data SQL支持统一访问全数据

Oracle 数据库

常旅客

订单

客服

值机

客户360度画像C

•利用数据库安全,实现数据治理

•性能优化:并行,存储索引,本地数据过滤,最小化数据移动

•丰富的SQL支持,利用现有技能•同时查询大数据和关系型数据

文档

Select S.客户关注热点,S.情感,S.感受,V.位置,V.访问行为,C.基本信息,C.偏好,From 客户表C,记录V,社交网络表S where C.常旅客ID=V.电商ID and C.sid = S.ID and V.时段=“时间”;

Oracle Big Data SQL

Page 15: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |

Oracle 大数据探索. Hadoop上的技术创新

15

Oracle 大数据探索工作

Hadoop Cluster(BDA or 标准商用硬件)

BDD 节点

数据节点

数据节点

数据节点

数据节点

命名节点Data Processing, Workflow & Monitoring• 性能分析: 目录登入生成, 数据类型& 语言检

测, 模式配置• 取样: 数图 (索引) 文件生成• 语法转换功能: >100 种功能方式• 完善结果: 定位 (geo), 文本(清理, 情绪观点,

实际本质, 关键语句, 白名单标记)

Self-Service Provisioning & Data Transfer• 个人数据: 上载 CSV and XLS to HDFS

In-Memory Discovery Indexes• 数据图像: 搜索、导向性指引、分析

Studio• 网页界面: 查找、浏览、转换、探索、分享

Hadoop 2.x

文件系统(HDFS)

工作量管理(YARN)

元数据(HCatalog)

其他Hadoop工作

MapReduce

Spark

Hive

Pig

Oracle Big Data SQL (BDA only)

Page 16: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. | 16

BDD数据探索平台,大数据可视化与洞察分析解决方案

发现 浏览 转换 探索 分享

Big Data Discovery

Page 17: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |

BDD之商务智能和信息探索

Analysis Problems指标,KPI,分析,报表

Discovery Problems调查,探寻,理解

Unstructured Data多样化的,文本的数据质量不确定

Structured Data模型和一致性 Business Intelligence

对已知问题的求证

Information Discovery

对新问题的快速解答监控洞察产生的新指标,数据集

新的问题需要探索,利用新的信息,利用已有的

投资

首先是模型

首先是数据

Page 18: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. | Oracle Confidential – Internal/Restricted/Highly Restricted 18

EDW

1

2

3结合行内行外信息,发现同业信用卡近期正在做积分刺激活动,市场中有很多人进行评论

4进一步探究,发现某行与某商场进行了联名卡:消费满100元返5元,父母消费我还款活动,引发很多客户关注与热评,并信息报告提交产品设计部门

BDD之数据探索:竞争分析

从数据仓库捞出一批成都、西安、上海连续三个月信用卡交易金额下滑超过10000元的用户

通过对内部数据分析,没有找到强相关因素。筛选以上地区的互联网信息,并进行分析

Page 19: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |

沙盘演练平台是专门为数据分析团队提供的平台,数据分析人员可以通过平台进行各种数据分析和建模的演练,并将有价值的分析结果用来支持精准营销和管理经营。

营销人员需要沙箱同时具有协作、分享、发布、沟通的能力,可以共享数据探索的成果,并在一定的应用场景让营销人员进行协同与过程沟通

Oracle Confidential – Internal/Restricted/Highly Restricted 19

BDD之数据探索:敏捷沙箱

针对正确的用户推荐合适的产品

什么样优惠的更吸引客户响应?

寻找有价值的销售机会

发现客户流失事件,及时进行客户挽留

交叉销售提升业务机会

实时交易反欺诈

早期预警

舆情分析与品牌维系

典型分析场景

Page 20: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |

Sentiment indicator

Multiple Dimension

Influence Vs. Message Sentiment by banks Sentiment analysis on map

Hot words

Reputation Alert

采集、监控和分析过去一

个月新浪微博的公共消息

•定位事件(时间/地点/人物)

•了解人们在事件中的感受

和评论

•热词统计

•地区搜索

•实时时间窗口监测

•…

甚至可以结合实时智能引

擎触发相应行动

BDD之监控社会化媒体,了解用户情感和品牌声誉

Page 21: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |

分析结果的展现,交互,发布和应用于实践

快如闪念的商业智能和丰富的应用

New RAM | Flash storage | Hard Disk2 TB 2.4 TB 5.6 TB

RTD:可自学习的实时决策系统,支持精准营销

预测性分析

情景分析

记分卡

移动

战略图

安全搜索

即席分析

地理位置可视化

生产报表

嵌入应用中 业务流程

Office 集成

交互式信息板

RTD Siebel电子商务集成

RTD / Siebel呼叫中心集成

第三斱呼叫中心集成

第三斱应用集成

第三斱电子商务集成

第三斱应用集成

DecisionService交叉销售, 向上销售, 忠诚度决策逻辑

自定制业务逻辑(例如 风险管理

共享决策引擎

Page 22: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易

Copyright © 2014 Oracle and/or its affiliates. All rights reserved. |

Oracle大数据解决方案支持企业级全数据管理数据管理与数据应用领导者

• 建立全数据池,扩展企业传统数据仓库,接纳新数据,让沉睡的企业数据“活”起来

• 从大数据中提取有价值信息,与业务信息融合

获取和组织:企业统一全数据池

• 实现大数据和业务数据基于SQL的融合处理,重用已有技能,工具和经验

• 统一的企业级数据挖掘和数据探索能力

分析:数据探索和数据挖掘

• 丰富的图表和快如闪念的商业智能

• 重复利用现有的工具,快速应用

决策:商业智能和数据应用

商业分析数据发现

数据池 数据仓库

数据源

数据应用商业智能

Oracle Database

Oracle IndustryModels

Oracle Advanced Analytics

Oracle Spatial & Graph

Big Data Appliance

Apache Flume

OracleGoldenGate

Oracle Event Processing

Cloudera Hadoop

Oracle NoSQL

Oracle R Advanced Analytics for

Hadoop

Oracle R Distribution

Oracle Database

In-Memory, Multi-tenant

Oracle Advanced Analytics

Oracle Spatial & Graph

ExadataOracle

GoldenGateOracle EventProcessing

Oracle DataIntegrator

Oracle Big DataConnectors

Oracle DataIntegrator

集成

灾备

安全

管理

Big Data SQL

获取和组织

分析

决策

Page 23: Suning Technical Workshops - Oracle · 精准营销案例—渣打银行实时交叉销售 Gerry刚在Expedia.com刷SCB卡购买旅游票 •SCB智能系统(SCBIS)捕获Gerry交易