240 发简信
IP属地:湖北
  • Bitmap原理--Bitmap是什么?

    对于有开发语言经验的人来说,可以将Bitmap简单理解为数组,但特别的是:数组内只能存放0、1两种值,例如:[1,0,1,0,1,1,0,0]。...

  • Resize,w 360,h 240
    牛市和熊市叫法的由来

    牛市和熊市是什么意思? 在预判股票行情时候,会出现两种发展趋势,一种是觉得股市行情前景比较乐观、会涨,常称为牛市。一种是觉得股市行情前景比较悲观...

  • Resize,w 360,h 240
    让Spark-Streaming在Yarn上长时间运行

    对于长时间运行的Spark Streaming作业,一旦提交到YARN群集便需要永久运行,直到有意停止。任何中断都会引起严重的处理延迟,并可能导...

  • 开启Back Pressure使生产环境的Spark Streaming应用更稳定、有效

    为了Spark Streaming应用能在生产中稳定、有效的执行,每批次数据处理时间(批处理时间)必须非常接近批次调度的时间间隔(批调度间隔),...

  • Resize,w 360,h 240
    Spark Streaming中流式计算的困境与解决之道

    Spark streaming 在各种流程处理框架生态中占着举足轻重的位置, 但是不可避免地也会面对网络波动带来的数据延迟的问题,所以必须要进...

  • 如何避免HBase写入过快引起的各种问题

    首先我们简单回顾下整个写入流程 整个写入流程从客户端调用API开始,数据会通过protobuf编码成一个请求,通过scoket实现的IPC模块被...

  • Resize,w 360,h 240
    13个Git小技巧献给Git的13岁

    关注公众号:“程序员成长软技能” ,日拱一卒,功不唐捐!13个Git小技巧,让你拥有更有用更强大的代码版本控制经验!Git,一个分布式版本控制...

  • 如何优雅的关闭Spark Streaming作业

    关注公众号:“程序员成长软技能” ,日拱一卒,功不唐捐!Spark Streaming 应用定位是长期执行的。但如何优雅的关闭它,使正在被处理...

  • Resize,w 360,h 240
    Kafka初识--消息系统

    官方描述(0.8):Kafka® is a distributed, partitioned, replicated commit log s...