Cloudera Engineering Blog 翻译：Offset Management For Apache Kafka With Apache Spark Strea...
发简信
IP属地：陕西
Cloudera Engineering Blog 翻译：Offset Management For Apache Kafka With Apache Spark Strea...
@明少十三 单一化某个bolt的功能？我看到一些建议是：为了尽量减少bolt之间的可能存在的不同主机间的网络传输，把相关度高的操作尽量放在同一个bolt里完成。 还是真心求教一下
告诉你Redis是一个牛逼货概述： Redis 是一个 Key-Value 存储系统。和 Memcached 类似，它支持存储的 value 类型相对更多，包括 string(字符串)、 list(链表...
@伊森_one_小明 确实是这样的。应该在并发下考虑如何解决，而不是仅仅依靠将bolt调整为1这样干。当时考虑的是需要把一份数据存入redis一份，所以直接把数据存储和去重人为的放到了一起了~如果需要再存一份的话，是不是在同一个bolt中在做一次在redis的数据存储？求教
告诉你Redis是一个牛逼货概述： Redis 是一个 Key-Value 存储系统。和 Memcached 类似，它支持存储的 value 类型相对更多，包括 string(字符串)、 list(链表...
@zmw小明 现在开发完了，一些调优都没有做，每天50E条所有的数据量，导致我现在遇到了一些问题，我也在查相关的资料~暂时还没有一个完整的性能测试
Storm 性能优化目录 场景假设 调优步骤和方法 Storm 的部分特性 Storm 并行度 Storm 消息机制 Storm UI 解析 性能优化 场景假设 在介绍 Storm 的性能调优方...
storm处理过程中遇到一个问题：同一个手机号，同一个产品，第一次推送后2小时或者7天之内，不重复推送。我用redis来实现去重：key:手机号+productid value:时间戳。这样在使用的时候还会出现2小时内重复推送的问题，更甚者是两条记录一模一样！请教一下，我把redisbolt的excutor的并发度调为1，现象会好点，但是还是会有。十分感谢
告诉你Redis是一个牛逼货概述： Redis 是一个 Key-Value 存储系统。和 Memcached 类似，它支持存储的 value 类型相对更多，包括 string(字符串)、 list(链表...
@quiterr 新手到处看书爬贴，自己试验参数中~希望能和大神多交流
Storm 性能优化目录 场景假设 调优步骤和方法 Storm 的部分特性 Storm 并行度 Storm 消息机制 Storm UI 解析 性能优化 场景假设 在介绍 Storm 的性能调优方...
非常感谢，最近领导让出个storm+kafka的性能测试报告，学习了
Storm 性能优化目录 场景假设 调优步骤和方法 Storm 的部分特性 Storm 并行度 Storm 消息机制 Storm UI 解析 性能优化 场景假设 在介绍 Storm 的性能调优方...
关于Spark Streaming中的任务有如下几个概念： Batch Job Stage Task 其实Stage,Task都是Spark Core里就有的概念，Job 在...
作者 谢恩铭，公众号「程序员联盟」（微信号：coderhub）。转载请注明出处。原文：//www.greatytc.com/p/0194b98df6bc 程序员联盟群...
学习了~
从内容/用户画像到如何做算法研发中午和一前同事一起用餐，发现还是有很多碰撞点的。交流了很多正在做的事情，对方也提供了非常多的思想值得自己很好的思考。 先是和他聊了下我们现在做内容标签的进展，其实就是在做内容...
网络上，有一篇文章从2010年开始，一直火到现在。 这篇文章是国家人事部行政科学研究所副所长吴德贵的演讲。 标题为：未来八类人将会被社会淘汰！ 文章里面提到的八类人： （1）...
