IP属地:重庆
弹性分布式属性图 GraphX的核心抽象是弹性分布式属性图,它是一个有向多重图,带有连接到每个顶点和边的用户定义的对象。 有向多重图中多个并行的边共享相同的源和目的顶点。属性...
分布式批同步BSP Pregel、GraphLab、GraphX都是基于BSP(Bulk Synchronous Parallel)模式,即整体同步并行。一次计算过程由一系列...
DStreamGraph WebBlog2《深入Streaming中的数据抽象DStream》中的Transformation DStream部分提到过:parent.get...
Spark Streaming简介 Spark Streaming是Spark 核心API的一个扩展,可以实现高吞吐量的、具备容错机制的 实时流数据的处理。支持从多种数据源获...
DStream 对DStream实施map,filter等操作操作,会转换成另外一个DStream,也就是说DStream也有依赖关系DStream是一组连续的RDD序列,实...