1.Zookeeper
自从开始深入了解企业级的开发软件以后,发现许多技术都得跟Zookeeper打交道,这是为什么呢?因为现在的企业级项目,基本都会采用分布式的架构,而Zookeeper强大的性能就是分布式项目所需要的。
Zookeeper的几大用处:
1.统一配置管理
2.统一命名服务
3.分布式锁(在项目中可充当注册中心的作用,实现各部分资源和消息的同步)
4.集群管理
2.Kafka
其实就是实现了消息传递、存储、流处理这些看起来十分简单的功能,但如何把它们完美的结合到一起,就是一种优雅的体现,Kafka做到了这一点。
相比HDFS分布式文件存储系统,虽然它能支持高效存储并且批处理数据,但是它只支持处理过去的历史数据。
相比普通的消息系统来说,虽然能处理现在至未来的数据,但是它并不没有存储历史的数据。
Kafka集众家之所长,使整个系统能兼顾各方面的需求,可以用一个词来说: “完美”!
Kafka是天然分布式的,所以它在如今的使用频率也是十分高的,他也同样会依赖于Zookeeper,为其监控Topic和consumer以及为其统一配置。Kafka的消息持久化是通过磁盘,可进行的修改是追加(跟Hbase一样)大块大块的存入磁盘,且仅允许顺序Io去追加内容。
具体的入门文章:Kafka入门