感谢感谢，解决了
[解决]git-ssh: connect to host github.com port 22: Connection timed out最近在更新了本地代码 node 版本后，提交代码时报错如下 $ git pull project developssh: connect to host github.com...
IP属地：四川
感谢感谢，解决了
[解决]git-ssh: connect to host github.com port 22: Connection timed out最近在更新了本地代码 node 版本后，提交代码时报错如下 $ git pull project developssh: connect to host github.com...
参数 --min-compaction-interval-seconds 是 compaction 的
如果是 clustering 的话应该是：--min-clustering-interval-seconds
Hudi系列22:离线Clusting一. 离线 Clustering 异步的 clustering 相对于 online 的 async clustering 资源隔离， 从未更加稳定。 1.1 设置参数 c...
本文简单介绍 HBase 的数据导入工具 ImportTSV 。通过一次将 hive 大表导入 HBase 的实战案例，梳理期间遇到的问题，调研更优的导入方式。本文着重关注：...
1 统计占用文件句柄数常见误区 Linux 上运行的程序经常能遇到 "max open files" 的报错，这是由于 linux 对程序以及系统打开的 open file...
TBLS 这边表里面写错了一个字段名
是 db_id 而不是 dbs_id
Hive MetaStore的结构本篇主要是介绍Hive在MySQL中存储的源数据的表结构。 Hive MetaStore 数据库表结构图 TBLS 记录数据表的信息 字段解释TBL_ID在hive中创建表的...
大部分人认识毛姆都是在那本著名的《月亮与六便士》中，从艺术家高更演化出的小说男主中认识了毛姆和他的文学创作。离开校园几年，回头看月亮这样的小说，被小说中人物的性格迷住且深感惊...
1 问题 用户有大量的并发 beeline hive sql 任务，偶发 Unable to read HiveServer2 uri from ZooKeeper 报错。h...
Hadoop 平台运行至今，前期处于放任自由的状态，后期才开始稍加管控，指定相关数据使用规范。日积月累，数据规模越来越大，元数据暴增，Namenode rpc 频繁超时告警...
1 问题 近期业务反馈 HBase GET 读性能不佳，查看监控，每天有几个时间波段，GET P99 请求时延很高。 2 问题原因 定位有一个业务有 7 张 Hive HBa...
这是 HBase regionserver 打印的一段 bucket cache 统计信息，里面有些指标有点让人摸不着头脑。下面将通过提问的方式，结合实际业务与源码逐一解释各...
1. 缘起 今年年初，在 B 站无意关注了一个成都骑摩托车摩旅去西藏的 UP 主，视频拍的非常棒，幽默有趣，其中一期有一小段 BGM -《鹿柴》一下就打动到了我，了解了一下...
这里提一句，低版本的 spark （spark 2.1 以及以下） 不支持 hive udf 的 jar on hdfs。
hive sql的数仓迁移成spark sql，之前的UDF函数怎么办?前言 离线数仓之前的主力工具是hive，有一些处理需要写udf实现，当hive sql迁移成spark sql时。之前的udf函数该怎么办呢，本文为自测并总结。结果写在前面，...
我们都知道 HBase 的数据根据 rowkey 字典序排序的，理解这个概念很重要。 先理解名词 - 「字典序」 根据 wiki 解释： 在英文字典中，排列单词的顺序是先按照...
1 问题 Zeppelin 部署 Trino 解释器，升级了 jdk 11，升级后 phoenix 解释器查询报错.查看 Zeppelin phoenix interpret...
跟你好像，加油加油
复盘「2018-2020」心路历程——山重水复疑无路，柳暗花明又一村最近同学在微信群中聊理财，提到了“定投指数基金”的概念，我不太懂，便自己了解了一下，竟无意中解开了我心中困扰了很久的一个心结。由于这段心路历程让我感受颇深，遂决定记录下来，以...
1.问题与现象 业务反馈 Phoniex 最近总是有 10 多秒的超时。我们测试的时候发现 Phoenix Client（ JDBC ） 第一次查询（基于 rowkey sc...
1. 问题 如下图：日志中有很多 KB 级别的 memstore flush ，为何没到配置的 256MB 就开始 flush ？ 2. 结论 这是由后台定时刷新线程发起的刷...
