240 发简信
IP属地:云南
  • 120
    存储快照-COW和ROW

    存储快照主要解决数据丢失时的数据恢复,这种技术可以保存当前存储设备的状态,比如电脑的文件被误删除了,可以通过存储快照恢复到文件丢失之前的状态。 快照:关于指定数据集合的一个完...

  • 120
    Presto初体验

    0 - 前言 Facebook的数据仓库存储在少量大型Hadoop/HDFS集群。Hive是Facebook在几年前专为Hadoop打造的一款数据仓库工具。在以前,Faceb...

  • 120
    MySQL内存分配优化

    0 - 概述 系统的物理内存是有限的,而对内存的需求是变化的, 程序的动态性越强,内存管理就越重要,选择合适的内存管理算法会带来明显的性能提升。 MySQL作为常用的数据库,...

  • 记一次MySQL Crash处理

    在MySQL 5.7的高并发场景下,有可能会触发MySQL5.7的Bug,导致宕机,临时的紧急修复方法可针对实例进行参数的修改。Bug的详细信息,请参考Bug#77588[h...

  • MySQL查看线程内存占用情况

    1.背景 内存使用情况,决定着MySQL的性能,内存使用率过高会使系统响应时间变长,严重时内存耗尽还会出现OOM的情况。 2.资源检查 在操作系统层面,可以通过free命令查...

  • 120
    一次MySQL面试的故事(虚构)

    本文纯属娱乐 面试官:谈谈对事务的理解吧。 我:数据库的事务是指一组SQL语句组成的数据库逻辑处理单元,在这组SQL的操作中,要么全部执行成功,要么全部执行失败。 我:这里的...

  • 记一次ES的索引迁移

    由于公司需要统一整合ES服务,最近开始着手迁移。迁移方案主要分为物理迁移、本地升级、逻辑迁移三种。 物理迁移,就是冷拷ES数据到新集群,适合可以停机升级的业务; 本地升级,是...

  • 120
    Elasticsearch-sql使用实践

    1 - 简介 elasticsearch-sql以插件的形式运行在ES中,拦截_sql开头的请求,将请求中的sql语句解释成es的DSL查询语句,在ES内部调用执行后,将结果...

  • ElasticSearch基于snapshot和hdfs的备份和恢复

    0 - 背景 任何一个存储数据的软件,都需要定期的备份数据。es replica提供了运行时的高可用保障机制,可以容忍少数节点的故障和部分数据的丢失,但是整体上却不会丢失任何...

  • @心之所念丶 不会的,MySQL会逐步发送数据到客户端,但是不建议这么设计。大数据量的查询,可以分页的。

    浅谈ES的优势和限制

    ElasticSearch最广泛的使用场景,是提供垂直搜索功能。什么是垂直搜索呢?抄一段百度百科: 垂直搜索引擎是针对某一个行业的专业搜索引擎,是搜索引擎的细分和延伸,是对网...

  • 看索引情况

    浅谈ES的优势和限制

    ElasticSearch最广泛的使用场景,是提供垂直搜索功能。什么是垂直搜索呢?抄一段百度百科: 垂直搜索引擎是针对某一个行业的专业搜索引擎,是搜索引擎的细分和延伸,是对网...

  • ElasticSearch集群shard均衡策略

    ES集群的rebalance和allocation功能,可以自动均衡集群内部数据、分配分片,保证各个节点间尽量均衡。但是,在高访问量或者节点宕机的情况下,大范围的rebala...

  • MySQL的MVCC究竟算不算?

    0 - 前言 周末在家值班,看了一下MySQL的MVCC实现方式。之前我认为的MVCC: 每行数据都存在一个版本,每次数据更新时都更新该版本; 修改时Copy出当前版本随意修...

  • 08

    MHA在启用GTID的MySQL集群丢数据的问题

    今天有朋友咨询我MySQL高可用方案MHA的事情,恰好之前在公司改造过MHA,看过MHA的代码,解答了朋友的问题,在这里也分享一下经验。 MHA使用Perl语言编写,本文尽量...

  • 如何在MHA中添加配置参数

    MHA的配置文件可以分为两部分,global_configfile和configfile,分别是全局的配置文件和对应MySQL集群的配置文件。 全局配置文件中,设置了通用配置...

  • MHA在启用GTID的MySQL集群丢数据的问题

    今天有朋友咨询我MySQL高可用方案MHA的事情,恰好之前在公司改造过MHA,看过MHA的代码,解答了朋友的问题,在这里也分享一下经验。 MHA使用Perl语言编写,本文尽量...

  • ClickHouse表引擎介绍

    ClickHouse表引擎决定了: 数据的存储方式和位置,写到哪里以及从哪里读取数据; 支持哪些查询以及如何支持; 并发数据访问; 索引的使用(如果存在); 是否可以执行多线...

  • 120
    近期崛起的OLAP数据库--ClickHouse

    0 - 前言 ClickHouse是近期备受关注的开源列式存储数据库,主要用于数据分析(OLAP)领域。目前国内社区火热,各大厂纷纷跟进大规模使用: 今日头条内部用来做用户行...