学习了差不多一个星期,终于把flume-kafka-spark streaming贯通了,直接上流程图: 一、环境部署 hadoop集群2.7.1zookeerper集群ka...
IP属地:北京
学习了差不多一个星期,终于把flume-kafka-spark streaming贯通了,直接上流程图: 一、环境部署 hadoop集群2.7.1zookeerper集群ka...
简介 在上一次的数据平台实践①中,对基于Flume,Kafka和Spark Streaming的数据平台组合做了介绍,这一次对业界流行的ELK组合进行学习与实践。关于ELK,...
打造100亿SDK覆盖量的大数据系统,个推从离线到实时演进的三阶段 | 36大数据http://www.36dsj.com/archives/58518 //个推大数据系统演...
spark 2.X开始,三者的关系发生了变化,可以参考《且谈Apache Spark的API三剑客:RDD、DataFrame和Dataset》 ,在2.X中DataFram...
2016年,于我而言是不平凡的一年,是我心理重建的重要一年。这篇文字酝酿了许久,当做是一个仪式,和过去的自己告别,从此开始新的生活。 还是先从以前的自己说起吧,从学生时代起我...
环境: 准备工作:1.到阿里云虚拟主机网站申请虚拟服务器https://www.aliyun.com/ 2.查看该服务器防火墙是否关闭: 3、下载hadoop2.6.3 ,官...
优秀的计算机编程类博客 和 文章 介绍 优秀的计算机编程类博客是一些关于计算机方面的优秀博客。 欢迎大家将经常看的优秀博客或博客文章共享出来,您可以: 使用 Issues 以...
今天来作死地八一八一个后期神器snapseed的使用方法。 纯干货。 多图。 感觉会被图片上传给弄死…… 答应我,看在我写得这么辛苦的份上,以后再发朋友圈的时候,努力装装逼不...