在帝都和钱塘之间奔波的非主流程序员，前国重实验室里的基层科研工作者，现在在云栖中乘物以游心，搬砖能还房贷还能有远方。
发简信
IP属地：台湾
1. 主流OLAP引擎技术原理大阅兵 1.1 何为OLAP 在前文 BI系统与ClickHouse：探索式BI的OLAP技术演进之路 [https://kstack.corp...
Elasticsearch 对外提供了一个 _tasks 接口，用于获取当前各个节点正在执行的任务，这里要避免和 pending_tasks 搞混，后者是用于获取在 mast...
跳表是一种神奇的数据结构，因为几乎所有版本的大学本科教材上都没有跳表这种数据结构，而且神书《算法导论》、《算法第四版》这两本书中也没有介绍跳表。但是跳表插入、删除、查找元素的...
背景 近日云上Elasticsearch的客户，提过来了一个需求，期望把上游业务的日志中的一些无用字段从ES中删除掉，这些字段的名称是固定位数的随机字符串，期望能够通过一些过...
JVM之所以拥有强大的生态，是因为它是跨语言性的，JVM只识别字节码文件，不论是什么语言编写的代码，只要经过编译后能生成.class的字节码文件，JVM都可以进行解析。当然这...
JVM Client 模式和 Server模式的区别 通过 java -version 可查看 JVM 所处的模式，并可以通过修改配置文件进行配置，那它们有什么区别呢？ Se...
前言 最近很多粉丝朋友私聊我说能不能给整理出一份多线程面试题出来，说自己在最近的面试中老是被问到这一块的问题被问的很烦躁，前一段时间比较忙没时间回私信，前两天看到私信我也是赶...
目录 前言 初版设计方案 CK 分页查询 使用ES Scroll Scan 优化深翻页 ES+Hbase 组合查询方案 RediSearch+RedisJSON 优化方案 总...
在使用filebeat采集部署在使用腾讯云TKE容器集群上的日志时，会把default、kube-system等默认的命名空间下的日志都采集上来，但是这些命名空间下的日志一般...
从事Elasticsearch云产品的研发已经四年多了，在服务公有云客户的过程中也遇到了各种各样的使用方式以及问题，本文就把过去几年记录的一些问题和解决办法进行归类和总结，常...
1. 背景 在之前的一篇文章"PB级大规模Elasticsearch集群的运维与调优实践"中，指出了在集群每天产生大量分片，并且索引不能删除的情况下，需要对比较老的索引通过配...
1 CPU和内存的交互 了解jvm内存模型前，了解下cpu和计算机内存的交互情况。【因为Java虚拟机内存模型定义的访问操作与计算机十分相似】 有篇很棒的文章，从cpu讲到内...
背景 有一天收到告警，显示用于存储日志的es集群磁盘使用率超过了85%，因此登陆kibana进行一番查看，发现该集群有很多几个月之前的索引，直接DELETE filebeat...
背景 客户为了实现search after功能，必须有一个modify_at字段在更新doc的时候不能修改，也就是更新的时候如果请求body里包含了这个modify_at字段...
背景 ClickHouse 作为开源 OLAP 引擎，因其出色的性能表现在大数据生态中得到了广泛的应用。区别于 Hadoop 生态组件通常依赖 HDFS 作为底层的数据存储，...
在某些业务场景中，业务服务端的日志或者是云上组件的日志会归档存储到对象存储COS中，在需要进行查询的时候需要从COS中获取并查询日志，此时可以借助于腾讯云Logstash[h...
