转发--中台实战(3):数据中心中台化案例

在前几篇文章中《中台实战0、1、2》我们已经详细描述了中台战略的建设目标与演化方式,抽象来看我们可以将其总结为这三个关键词:复用提效一次开发


1

中台化前的产品现状

在项目早期我们公司提供的服务就是在线酒店预订,这种业务模式的整个流程也不复杂,主要分为这几个环节:

BD进行拓店 -> 邀请酒店入驻平台 -> 平台上架 -> 用户下单 -> 分佣

重点来看第一个环节,BD拓店实际就是将线下的酒店住宿服务当做商品“进货”至公司的后台中,从而为后面整个服务奠定基础,这里也是整个业务的核心与数据唯一进口。

在这个环节中公司由BD与商务团队维护并积累的大量底层“商品”数据,而初期这些底层数据在数据库中,就是简单的以“Key=Value”形式进行存储。

图:存储字段截取

当经过一段时间的积累后,这种数据存储方式由于维度简单导致的结果,就是整个数据库的数据量在很短时间内出现猛增。

但是虽然看着每天都有“商品”数据入库,慢慢的我们却发现这些数据很多都是没有办法进行二次使用的,只能供特定的业务方进行独立使用。

具体来说,在公司内部我们通常会有多个业务团队,每个业务团队往往都会根据自己的业务需求在数据库中建立一张属于自己的数据库表(这里为了行文方便我们视作一个表),这些表的业务数据字段与定义方式都是按照业务方定制化进行的。

例如在当时我们的酒店预订就分为两个业务团队:

非标住宿预定,也就是民宿;

标准酒店预定;

所以此时在后台我们有了两套业务数据体系,这些数据都是这两个业务方进行自主定义的。


2

挑战:业务线

这样的数据看似很寻常,目前很多企业也是这样对内部团队管理的。但是对于这种我称之为依托于前端统一团队的业务来说(两个业务方由统一的一群BD去进行扫街),我们实际上去做的就是将已经标准化了的数据(酒店录入数据)再次人为进行了割裂,变成了两个独立的业务数据库,如下图所示。

图:人为数据分流

我们要知道很多企业平时日常所做的工作大多数都是在进行数据的迁移与整合,如:将用户行为数据与用户唯一标识数据结合,从而唯一确定分析这个用户的喜好。

那么也就意味着我们每破坏一次数据之间的关联性就意味着,为后期增加了一次需要进行反向操作,也就是将数据进行合并的工作负担。特别是我们将酒店天然性以业务墙进行了阻拦,更是破坏了数据的强关联性(同类数据)。

同时这样的数据也使得对于既属于民宿又属于标准酒店业务库中的数据成为总库的冗余数据,曾带来的一个很严重隐患就是当民宿业务线的运营同学发现酒店名称发生改变并变更后,我们另一端的运营同学很难去即时发现并处理,此时在标准酒店业务端出现了多次用户下单后,该酒店因为店名与实际店名不统一,而旅客无法入住的情况,并多次投诉平台。

当然这只是若干次业务数据管理中的一个小小的缩影,正是因为这样的意外挑战出现,让我们对于现有的数据管理方式产生了要去进行变革的意图。


3

挑战2:创新业务

我们知道绝大多数互联网的产品本质就是以不同的展示形式、递进次序陈列出不同的数据,满足用户的信息需求。如新闻网站与今日头条都是在展示新闻数据,而陈列的次序一个是按编辑维度,一个是按读者的阅读习惯维度。

那么也就是说只要有了数据源,我们在这基础上就可以衍生出不同的产品。我们原公司业务也不例外,在我们收集了一段时间市场的酒店信息后我们就想着可以用这些数据来组织些新的产品,以此来满足不同细分市场人群。

如将酒店的基本信息数据(照片,介绍等)与第三方游记攻略类数据共享,提供数据输出服务。和想分析现有的数据的数据预测服务:根据不同地区的新增房源数据进行旅游真实热门景区排行。

这个时候面对之前分散的非标住宿预定与标准住宿预定两个独立业务,我们更想要看的两个业务线汇总后的全维度数据,而在现有条件下这个变得必须要逾越两个业务线的阻隔。


4

业务中台解决方案

面对这样的几个挑战,我们的选择就是利用中台去进行解决,此时中台1.0是这样构建的:

步骤1:中央集权

将酒店数据剥离各业务线团队,把酒店数据存储至独立的数据中心(也就是中台1.0)进行维护,打破各团队隔离,此时将原有的环节改为:

BD进行拓店 -> 邀请酒店入驻平台 -> 数据中心 -> 平台上架 -> 用户下单 -> 分佣

而在新增数据中心进行统一维护后,面对各自团队的数据需求我们可以在数据中心划分为虚拟数据源用以进行支撑。

图:改版后的虚拟数据源

酒店数据与各个业务线生成的订单等数据都汇总到数据中心中,数据中心是整个企业的基础服务提供全局的数据。

步骤2:特异性管理

接下来让我们来分析下整个业务运作流程,在原有两个产品线的业务模式与创新产品的业务模式中,当我们以数据流转的整个视角来看,本质上这些业务就是下图所示的数据流(此处的客户终端也称之为前台)。

图:未中台化前的前后台系统

不难发现,在这里作为数据源的提供方为业务方做了两个步骤的工作:

数据取用:根据业务方所要的数据范围提供数据(如:本次业务需要读取会员ID,会员姓名这两个字段);

数据业务格式化:根据业务方所要的数据格式进行特定数据格式/顺序生成返回(如:业务方A返回数据格式:会员ID=“12311”+会员姓名=“张三”;业务方B返回数据格式:会员姓名->“张三”and会员ID->“12311”)。

对比这两个步骤的工作我们就能发现第二个步骤实际上是原来整个后台支撑系统额外的工作的罪魁祸首,像上文提到的每次数据接口只能为一个业务方提供服务,这个接口由于数据返回格式是特定的所以具有很强的特异性,导致后台同学需要不断进行新的提供数据的接口的开发。

对于不懂技术的同学,我们可以理解为后台同学在提供同样的信息而先后顺序不一样时,需要设计不同的传输通道。

大家可以看到这无疑就是巨大的浪费。大家可以回想下在自己的日常工作中这样的情况是不是也相当常见,例如:产品迭代中每次版本更新导致的需要重新设计接口(新旧产品就同一数据的不同封装形式的取用);老版本数据接口与新版本的同一数据接口不同,需要分别维护。

所以当时我们是这样解决的,这两个步骤中第一个服务共性很高,很容易抽取成公共服务,我们就数据中心提供了一个标准的取数据接口,各个业务方只需要传输需要什么字段名称,我们的统一数据返回接口就把数据返回至业务方。

这样在所有的版本中我们始终对同一批相同功能的接口进行维护(为了负载均衡),各个接口没有任何特异性都是标准的取数据接口,只根据请求内容进行内容返回,这样大大减少了开发量。

对第二步骤由于特异性特别高,我们将这种与业务强相关的东西下放到业务端,由业务方进行数据处理,加工成他们需要的组织形式再返回给客户方。

此时后台人员只需要开发面向数据源的数据输入接口,也就是将BD采集的数据进行清洗成为中台的原材料。

而数据中心也就是中台,将各个业务数据汇集到这里并提供统一的取数方法,前台业务人员根据需要去申请数据。

最后将原来数据后台统一处理这一动作划分为:数据获取(中台)与数据业务端组合(前台)两部分。

而整个系统的架构也就变成了如下图的样子:

图:1.0中台系统架构

5

最后

在最后给大家一个个人理解中台战略,特别是业务中台的搭建是一个高度定制化的战略,如果我们想要发挥中台化战略的最大价值,就需要依据不同公司、不同业务、不同阶段的特征去定义与动态调整中台演进方向。

就像本文的酒店数据中心案例一样,只有最适合当前业务的中台框架,才是真正的解决方案。


原文:中台实战(3):数据中心中台化案例

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 211,265评论 6 490
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 90,078评论 2 385
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 156,852评论 0 347
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,408评论 1 283
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,445评论 5 384
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,772评论 1 290
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,921评论 3 406
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,688评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,130评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,467评论 2 325
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,617评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,276评论 4 329
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,882评论 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,740评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,967评论 1 265
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,315评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,486评论 2 348