airflow的宏和变量可以用于模版(templates)。 默认变量 所有的模版中都可以访问airflow引擎传输默认的变量。 变量描述{{ ds }}the execut...
airflow的宏和变量可以用于模版(templates)。 默认变量 所有的模版中都可以访问airflow引擎传输默认的变量。 变量描述{{ ds }}the execut...
难不成是水军?
docker容器迁移-不丢失数据跨主机docker容器迁移 最近买了一台新电脑 因为不想把数据又重新新建导入一遍 想要把数据库环境迁移到新电脑上 用到了docker迁移 用export&import 还是 sav...
@咬尘归 😃
Apache Zeppelin 基于 kerberos 多租户集成0 前言 构建大数据平台初期,我们的数据分析师做数据开发需要 ssh 到机器上,面对黑黑的 terminal 进行开发,为了提升开发效率,架构师让我开发一个 hive 可视化...
由于109已经成功更新journal node数据,导致110更新journal node 失败,然后110上的NameNode被杀死 -- 是什么意思。不是110先更新吗
NameNode退出原因分析一、背景 HDFS集群为HA模式,109节点为Standby 状态,110节点为Active状态。110 上的Active NameNode进程突然异常退出,109 Name...
一、背景 HDFS集群为HA模式,109节点为Standby 状态,110节点为Active状态。110 上的Active NameNode进程突然异常退出,109 Name...
1:搜索安装包 2:安装jdk11 3:查看当前版本 4:设置JAVA_HOME (一)找到JAVA安装目录 如果显示的是 /usr/bin/java 请执行下面步骤 输出应...
想请问下,外部分区表可以直接在他的目录下创建分区目录然后把数据放过去然后msck吗? hive表存储格式是orc,文件不是orc格式呀
HIVE常用命令之MSCK REPAIR TABLE命令简述工作中发现很多同事连基础的hive命令都不知道,所以准备写一个系列把hive一些常用的命令进行一个总结。第一个讲的命令是MSCK REPAIR TABLE。 MSCK REP...
哪里有番茄钟 没看到呀
一款可以始终悬浮的清单软件,用起来非常舒服追求极致的创作初衷,一群技术宅开发了闪点清单:一款可以始终悬浮在桌面的清单软件。 它可以提供一个迷你悬浮窗始终悬浮在电脑桌面,提示你最重要的信息,一键触达你需要的功能,用起来...
哇 终于明白了
对RFC 3339的时间、时区格式详解这是一个很小也很简单的事情,有些软件工程师可能不清楚,但是把时间戳格式理解清楚对每个开发工程师是很重要的一件事。 前段时间内我们在构建一个项目,对于时间戳的格式我们进行了一次...
这是一个很小也很简单的事情,有些软件工程师可能不清楚,但是把时间戳格式理解清楚对每个开发工程师是很重要的一件事。 前段时间内我们在构建一个项目,对于时间戳的格式我们进行了一次...
[TOC] 常出现docker中运行的容器获取到的时间与北京时间相差8小时的问题,其实是因为容器运行的时区不正确。 解决方法是把宿主机上的时区链接到容器里面 一、修改已运行容...
1.概述--美观、强大的可视化监控指标展示工具 grafana 是一款采用 go 语言编写的开源应用,主要用于大规模指标数据的可视化展现,是网络架构和应用分析中最流行的时序数...
Hadoop集群运维 场景1:namenode节点故障,active namenode节点状态切换?如何恢复? 1.1 Hadoop HA 的namenode状态切换 模拟线...
google翻译都不校准一下?
大数据Hadoop2.x与Hadoop3.x相比较有哪些变化在这篇文章中,我们将讨论Hadoop 2.x与Hadoop 3.x之间的比较。 Hadoop3版本中添加了哪些新功能,Hadoop3中兼容的Hadoop 2程序,Hadoop...
elementUI比bootstrap更香😄
2019-08-13 Django+Vue.js实现前后端分离的单页面博客系统(5)添加博文功能的实现昨天一直在想一些事情、解决一些问题所以摸鱼了一天没有开发这个项目,今天想到这个项目还没有做完,于是又回来继续做了。只可惜因为白天忙着参加培训,一天只开发了一个添加博文的功能。...
在工作中,我们经常需要查看服务器的实时网卡流量。通常,我们会通过这几种方式查看Linux服务器的实时网卡流量。 1. sar -n DEV 1 2 sar命令包含在sysst...