文/慕容随风 图/来自网络 最近笔者和几个财经界的朋友聊天，大家不约而同的都提出了一个问题：为什么当我们越是节俭的时候，我们就越是缺钱呢？有一个当作家的朋友甚至如是说：当自己...
分布式系统里的Shuffle 阶段往往是非常复杂的，而且分支条件也多，我只能按着我关注的线去描述。肯定会有不少谬误之处，我会根据自己理解的深入，不断更新这篇文章。 前言 借用...
ServiceFramework 终于有示例开源项目了：GodEar https://github.com/allwefantasy/godear 基于Yarn的容器调度系统...
1. 异常说明 spark提交任务后，前N个Stage运行顺利，到达某一个Stage后，卡住，通过spark界面可以看到，executor运行正常，卡住的Stage的task...
1. 背景 异常堆栈如下 通过jmap打印heap如下 2. 产生原因 关于GC overhead limit exceeded ， oracle官网有如下解释 The co...
0. 写在前面 部分原文来自 support.pivotal.io 的翻译，对于该篇文章中感觉概念模糊不清的地方我做了修正，并扩充了我自己的部分理解，有不正确的地方还望大家指...
一、本文议题及适用对象 1、议题：这是一篇关于“如何学习英语口语”的文章。笔者会基于自身的英语口语学习经验进行总结、分享。 2、适用对象： （1）哑巴英语者、中式英语者、没有...
文/潇逍 由于不经意间在喜马拉雅听广播时，听到了这本书的名字，忽然觉得很有意思，所以就下载了电子版的来看看。不想只是因为在书中多看了这一眼，从此就再也忘不了那些小人物身上的深...
前言 我这篇文章会分几个点来描述Spark Streaming 的Receiver在内存方面的表现。 一个大致的数据接受流程 一些存储结构的介绍 哪些点可能导致内存问题，以及...
