jason__huang - 简书

发简信

jason__huang

0
关注
9
粉丝
7
文章
6778

字数
7

收获喜欢
2

总资产

IP属地：上海

jason__huang

武志红得到心理专栏学习笔记
红枫醉秋2 编，19 篇文章，77 人关注

各种形式的笔记
jason__huang

笑来老师得到专栏笔记
念念1999 编，94 篇文章，12 人关注

记录笑来老师《通往财富自由之路》专栏笔记

jason__huang

得到APP专栏文章思考笔记
深醒编，1067 篇文章，1094 人关注

得到APP是一个提供付费购优质内容的APP，我在上面订阅了五个专栏，一个是罗胖的，一个是李笑来的通往财富自由之路，一个是万维纲的精英日课，一个是刘润五分钟商学院，还有古典的超级个体。以后我还会订阅其它专栏，几个专栏就像几股活水，每天浇灌我的心田，滋润我的大脑，更新我的认知，提升我的能力，让我又一次活在希望之中。为了学以致用，加深自己的理解，锻炼自己的写作能力和用写作帮助思考，我决定在简书上开设我的个人专题，希望能持续下去，产生指数效应。如果有朋友喜欢，请点个赞，你的支持是我持续的动力，希望以文会友，在这片时空中，遇到一帮志趣相投的人，岂不快哉！
jason__huang

Spark Streaming执行原理
Spark Streaming 解决这 4 个问题的不同 focus，可以将 Spark Streaming 划分为四个大的模块：模块 1：DAG 静态定义模块 2：Jo...

532 0 0
jason__huang

Spark Sql 运行原理
Spark SQL 原理和运行机制 Catalyst 执行优化器 Catalyst 是 Spark SQL 执行优化器的代号，所有 Spark SQL 语句最终都能通过它来解...

5004 1 6
jason__huang

Shuffle的细节，重要的操作
SparkShuffle 以Shuffle为边界，Spark将一个Job划分为不同的Stage，这些Stage构成了一个大粒度的DAG。Spark的Shuffle分为Writ...

1473 0 0
jason__huang

大量数据量下，很实用的共享变量
最近在负责Spark Streaming 结合 Spark Sql的相关项目，语言是Java，留下一些笔记，也供大家参考，如有错误，请指教！共享变量，又称广播变量：每个w...

148 0 0

jason__huang

Dag图，Job生成
最近在负责Spark Streaming 结合 Spark Sql的相关项目，语言是Java，留下一些笔记，也供大家参考，如有错误，请指教！理解了这些，和我原先想象是不同的...

2058 0 1
jason__huang

Spark最基本的单位 RDD
最近在负责Spark Streaming 结合 Spark Sql的相关项目，语言是Java，留下一些笔记，也供大家参考，如有错误，请指教！基本概念： 1.RDD(Resi...

1288 0 0
jason__huang

Spark 执行基本原理（一切的核心）
最近在负责Spark Streaming 结合 Spark Sql的相关项目，语言是Java，留下一些笔记，也供大家参考，如有错误，请指教！执行逻辑： jar ->Appl...

246 0 0
jason__huang