深入业务,打造行业背景下的BI系统

在搭建BI(商业智能)系统时,通常有两种选择,一是选用市面上的BI产品,另一种则是自建BI系统。直接购买BI产品相比自建BI系统的优点是,能快速使用、更加成熟、节约成本。但伴随业务的发展壮大,场景的复杂化,最终都需要自建BI系统。自建BI系统主要有两大优势,首先是数据安全,更重要的更能贴近业务场景。通用的BI产品,通常很难追踪深入行业背景下的业务问题。更多是展示一堆报表,而不能直观的得出结论,还需要分析人员结合报表分析才能得出结论。

那如何搭建行业背景下的BI系统那?主要分为两大步骤。首先通过需求分析深入业务,明确系统解决的问题。然后,结合业务,整理源数据,制定指标和算法,设计展现形式,最后完成数据分析的设计。下文结合实例,详细讲解如何搭建行业背景下的BI系统。

需求分析

BI系统在设计时,很多时候都没有明确的需求的。如果有明确的需求问题就要简单很多了。这里以我负责的医美Sass软件举例,在设计之初我们调研和走访客户时,客户都表明需要数据分析系统的需求。但是具体需求客户也不明确,只是希望看到某些数据的统计。所以,我们需要深入行业中,找到客户所面临的问题,挖掘客户的痛点。

首先应该明确在行业背景下,BI系统需要满足那些需求。结合业务,BI系统需求主要有下面几类,监控问题、发现问题、找到问题原因、预测与决策支持。我以医美Sass系统举例,我们挖掘到的以下4点需求。

  • 销售的工作是否积极。
  • 能发现销售额未达预期问题。
  • 能找到销售额未达预期的根本原因。
  • 能预测销售额。

这四点需求只是整个需求池的一部分,我以这四点需求来阐述整个BI系统设计过程。需求分析主要分为三步,场景分析、用户分析和业务分析。本文的需求分析只列出结论,具体需求分析过程可以参考我的另一篇文章善用三个方法,拒绝靠「想」做需求分析

场景分析

根据调研和用户访谈(调研和访谈不是本文重点,不展开讨论),针对上面四点列举出场景故事:客户某天发现发现本周的销售额未达到预期,然后通过查看销售人员和经销商等营销数据,以帮助客户确定原因,并解决问题。

用户分析

需求中角色主要有客户、销售人员和经销商。客户是该BI系统的使用者,销售人员和经销商主要是系统中数据产生者。在分析相关角色,做出ER图(非重点,不贴图了)。

业务分析

客户公司的销售和经销商在进行行业活动时,会使用Sass软件,Sass软件会将相关的销售数据记录下来,推送到BI系统中。

客户使用BI系统时,BI系统会将数据进行处理,将脏数据处理成干净的数据,然后对数据进行分析,最后得出结果,通过可视化系统直观的展现出数据分析结果。同时,结合业务场景给出预警提醒。

在业务分析时,需要分析需求和业务之间的关系,选取代表需求结论的指标值。恰当的数据指标能帮助用户更好地解读数据,得出结论。这主要依靠于产品经理对于业务深入了解和行业的熟悉程度。

需求指标值.png

以下为业务分析后所得功能清单。

BI系统功能清单.png

数据分析系统设计

通常产品经理在完成业务分析,得出功能清单后,就可以开始着手原型的设计。但在BI系统设计中,完成业务分析后,更重要是完成数据分析系统的设计。数据分析系统是整个BI系统的灵魂。在设计数据分析系统时,我们需要与技术人员紧密合作,特别是在数据源选取和相关的算法。这就对BI产品经理提出了更好地要求,要熟悉统计学和数据分析的常用算法,同时对数据要有一定敏感性。数据分析系统主要含有四个部分,数据采集、数据处理、数据分析、可视化系统,其对应着功能清单的系统列。

数据采集

数据采集主要是搜集数据分析所需要的原始数据。B端产品数据来源,主要分为系统内数据和外部数据。外部数据根据具体的场景和业务,可以是外部推送数据过来,也可能是系统通过调接口或使用爬虫去主动采集。当然,外部数据也可以直接通过Excel等载体直接导入。系统内数据,一般是通过埋点来获取数据。某些场景下,也需要去读取并分析现有的日志数据。

数据采集,最重要的选取合适的源数据。这就需要产品经理对行业有很深的理解,对业务有透彻的分析。所选取的字段一定是和业务存在很大的相关性,或者是重要的影响因素。一旦选取数据产生差池,整个BI系统的根基就坏了。下面为针对本文需求案例选取的数据字段。来源就略过了。

数据字段选取.png

数据采集到后,会存入到数据仓库或数据集市。

数据处理

数据处理主要做数据清洗和数据格式转化。数据清洗主要包括检查数据一致性,处理无效值和缺失值。数据清洗需要根据源数据的产生场景处理,可以剔除异常数据、纠正异常数据和补齐缺失数据。本文的例子,采用的就是剔除异常数据。如果需要纠正和补齐数据,需要使用算法来进行补齐。相关算法有好几种类型,我们需要了解其优缺点,再结合我们的源数据特征来选取合适的算法。我常用插值法和K最近距离邻法来进行数据异常纠正和补齐。

数据格式转化,主要是保证数据的一致性。通常是将相同分析算法的数据,转化为相同的存储格式,将数值型数据转换成相同的计量单位。

数据分析

数据分析是BI系统的核心,通过统计和数据分析算法,监控和查找问题。数据分析的流程是,根据业务分析选取的指标值作为输出结果,再利用处理后的数据,选取合适的算法,进行分析。选取算法时,需要技术人员通力合作,明确业务特点,选取最适宜的算法。BI系统的数据源可能会发生变动,所以在算法选取时,需要考虑一定的扩展性。

根据本文的需求分析,系统在进行数据分析时,主要做两个工作,预测和数据对比。数据预测,可以选择简易平均法、移动算法、指数平滑法、线性回归法、Logistic回归等。因为我们的数据是一组数据与时间的集合,所以比较适合选择多元线性回归。还有一些更高级的算法,暂时不讨论。数据对比,可以直接通过可视化系统对比即可。比如,针对销售是否异常,可以将实际销售额与预期销售额通过折线图,进行图标对比。

需求中有判断员工是否积极的需求。这类较为抽象的需求,就需要针对「积极性」设计评估模型。针对该需求,采集到数据主要销售数据、咨询数据、日常工作数据。三个数据中,销售数据的权重最高,日常工作数据最低。然后结合数据字段拟定出模型公式。

积极性模型.png

最后将以上算法和模型整理成便于阅读的文档,就完成了数据分析系统的设计。

可视化系统

可视化系统,主要是通过图表,将相对复杂的数据和分析结论,直观的展示给客户。BI系统的可视化系统设计流程:确认数据和指标值->对数据和指标值按场景分类->根据数据选取展现形式->更具展现形式设计页面布局->完成页面设计。

以本文需求为例,可以将数据可视化划分为销售人员积极性监测、销售额预测对比、销售分析(发现销售额异常原因)。其中积极性检查可以使用列表或排行榜展示,用色块对销售人积极性标识。也可以折线图描述销售人员积极性变化。销售额预测可以直接使用折线图。销售分析,由于数据类型不同,可以选取多种展示形式。比如,竞争对手店铺分布数量和分布,可以用地图散点图表示。选取展现形式的原则就是简洁、已读、要点明确。

完成形式选取后,就可以开始布局和原型的设计。完成原型设计后,可以正式进入系统的开发工作。

最后

完成可视化系统设计后,并不代表我们产品经理的工作结束了。一个优秀的BI系统,还需要使用真实数据调优,不断迭代系统。通过导入真实数据,运行系统,来进行系统的优化。特别是算法和模型的一些参数,都需要结合实际数据来找到最优值。甚至在某些时候,模型或算法的缺点,只有在真实数据和实际业务场景下才会暴露出来。

一个优秀的BI系统,需要帮用户发现问题,并找到问题根源,甚至于直接解决问题。比如本文案例,可以列举一个帮助用户找到问题的场景。某天,用户收到报警,销售额比预测值低了很多,然后查看销售人员工作情况为正常。同时,又收到经销商销售报警,某个区域经销商销售额锐减。同时发现竞争对手在该区域经销商数量陡增。这个场景中,就帮助客户发现问题,并找到了问题的根源:某区域竞争对手经销商快速扩张。在我之前做的产品中,还有一个BI系统结合广告投递的案例。该案例中,BI系统分析出已消费的人群标签,然后接入三方广告平台平台,进行精细化、自动化广告投放。该案例不仅仅是分析数据,还深入到了解决问题的层次。

一个完整的行业背景下的BI系统,应该具有哪些功能?如下脑图。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,204评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,091评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,548评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,657评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,689评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,554评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,302评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,216评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,661评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,851评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,977评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,697评论 5 347
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,306评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,898评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,019评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,138评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,927评论 2 355

推荐阅读更多精彩内容

  • BI一词早在20年前就被提出,加特纳集团将商业智能定义为描述一系列的概念和方法,通过应用基于事实的支持系统来辅助商...
    faa9660dbf08阅读 949评论 0 7
  • 第十四章 信息系统基础知识 信息系统是一个由人、计算机等组成的能进行信息的手机、传递、存储、加工、维护和使用的系统...
    步积阅读 2,356评论 0 12
  • 既然没有过硬的文学功底 就写流水账记录杂七杂八的小生活 简单明了的讲述2018年每一天 我希望每天拍一张照片(无论...
    月月Chow阅读 215评论 2 1
  • 文/吴雷 今天遇到一件小事,其实同类的问题以前经常遇上,我只是没有反思自己......下午时,正好遇到对门出去,我...
    吴雷china阅读 307评论 0 1
  • 今天是在福州的第三日。 继续住市郊的阿弥陀佛大酒店。 只因喜欢赵朴初先生题写的"永怀祖德"。 早晨推开酒店的窗户,...
    清河号阅读 848评论 0 0