240 发简信
IP属地:重庆
  • 120
    GraphX构建图的源码详解

    弹性分布式属性图 GraphX的核心抽象是弹性分布式属性图,它是一个有向多重图,带有连接到每个顶点和边的用户定义的对象。 有向多重图中多个并行的边共享相同的源和目的顶点。属性...

  • 120
    GraphX与GraphLab、Pregel的对比

    分布式批同步BSP Pregel、GraphLab、GraphX都是基于BSP(Bulk Synchronous Parallel)模式,即整体同步并行。一次计算过程由一系列...

  • 120
    DStream静态定义和动态调度

    DStreamGraph WebBlog2《深入Streaming中的数据抽象DStream》中的Transformation DStream部分提到过:parent.get...

  • 120
    Spark Streaming原理介绍

    Spark Streaming简介 Spark Streaming是Spark 核心API的一个扩展,可以实现高吞吐量的、具备容错机制的 实时流数据的处理。支持从多种数据源获...

  • 120
    深入Streaming中的数据抽象DStream

    DStream 对DStream实施map,filter等操作操作,会转换成另外一个DStream,也就是说DStream也有依赖关系DStream是一组连续的RDD序列,实...