240 发简信
IP属地:广东
  • pyspark与py4j线程模型简析

    事由 上周工作中遇到一个bug,现象是一个spark streaming的job会不定期地hang住,不退出也不继续运行。这个job经是用pyspark写的,以kafka为数...

  • 干货满满的 pyspark 笔记

    反向代理的配置 在服务器中做如下配置: 然后在服务器中的终端中输入 或者: app.pl 是用 dancer 写的一个 demo 程序, 其中的内容如下: 然后在浏览其中输入...

  • nice work

    pyspark与py4j线程模型简析

    事由 上周工作中遇到一个bug,现象是一个spark streaming的job会不定期地hang住,不退出也不继续运行。这个job经是用pyspark写的,以kafka为数...

  • 【Scala】头等函数与函数即对象

    头等函数 Scala的函数是头等函数(first-class function)。你不仅可以定义和调用函数,还可以把它们写成匿名的字面量(literal),并把它们作为值传递...