MySQL 基本概念说明-mage

数据存储的基本概念

传统的存储数据方式,是把数据放到一个文件中,存放在磁盘上。当程序要用时,cpu会把数据加载到内核内存,然后内核内存将数据复制到程序内存。程序进行调用
当数据文件很大时,几百个G。此时硬件资源不足以支持调用整个数据文件。而且我们的程序可能就调用整个数据中的一行数据。此时我们就需要一个特定的数据存储系统,才帮助我们的应用程序来取得它调用的一条数据。即数据存储系统

MySQL 结构

MySQL是一个关系型的数据存储系统。主要存储关系型数据,有主键,外键,唯一键的约束,有事务
MySQL是一整套的系统。需要给前端提供一个socket远程连接的端口,
当要存储或者查询数据时,它需要给外界提供一个接口。供其查询和修改,即就是SQL语句。MySQL的数据也要以文件的方式存储在磁盘上,它需要个中间件。即把磁盘上的文件可以以最快和最节省资源,最优的方式提供给前端程序。也要把前端程序,要存储的数据,存储到磁盘上。因此,此中间件称为存储引擎

MySQL-basic.png
  • Socket: 提供远程连接

  • SQL语句查询接口: 跟linux的bash差不多,它是一个解释器来识别我们输入的SQL语句,是否符合语法,并调用MySQL的函数来进行执行。如果写了一堆SQL语句,MySQL称为存储过程。而在bash中称为脚本

  • 存储引擎: 相当于中间件,把程序要存储的数据进行转换,并写到磁盘上。把磁盘上的数据,进行转换展示给前端程序

MySQL 如何工作

如果MySQL中存在大量数据,如何高效的提供服务?
MySQL采用索引方式来提供服务。索引就是,把MySQL中的每一行数据,提取一部分,单独的放到一张表中。当程序查询时,首先查询索引。找到索引,然后去找对应的数据。几次查询即可找到数据。无需遍历整个表。它采用的是Btree数索引,一般会有2次索引头遍历。根据实际情况去。索引上面再加索引

image.png

MySQL索引相当于字典前面的笔画查询
优点: 能够加速查询,增加查询效率
缺点:每进行数据的一次修改,就相当于修改了索引和数据两块区域。即增加了IO,MySQL索引是按照顺序排序。如果修改的数据,打乱了索引的顺序,还需要对索引进行重新排序

如果数据量庞大,我们还要对数据库进行垂直分库和水平分表
因为MySQL是关系型数据库,有主键,外键,唯一键等各种约束。如果插入一条数据,MySQL首先会进行查询。看插入的数据,存不存在主键冲突,如果不存在则插入。相对应的修改和删除也是如此。从广义来说,无论MySQL做
垂直分库: 拆分数据库实例,把一个实例上的多个数据库,分别部署到多个实例上
水平分表: 把一张大表,进行分片(shards)。
一般水平分表后,数据库前面会有一个路由机器,来调度前面的请求,进行修改数据库。如果查询的话,水平分片后表不会满足。因为查询会查询每一个分片,然后对每一个分片查询的结果再次进行聚合查询。非常浪费性能和时间。一般此时,系统中会有专门的大数据系统来处理查询操作。
水平分表,一般是前端路由器,跟据某一个字段,对分片的数量进行hash计算,然后确定在哪一个分片上进行修改操作。水平分表,是直接把表的数据,进行分片。插入不是按照后端服务器的数量进行hash计算取模,因为后端服务器的数量的增加和修改,都会直接造hash 取模的结果不一样,从而要重新进行数据分布。所以直接按照分片数量进行取模,当增加或者减少后端数据库服务器时,只需要动态把分片复制到相对应的服务器上即可(即就是排干模式)。冗余的话,也是对分片进行冗余。此功能MySQL需要借助第三方插件完成,而NoSQL则原生支持

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 210,978评论 6 490
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 89,954评论 2 384
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 156,623评论 0 345
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 56,324评论 1 282
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 65,390评论 5 384
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 49,741评论 1 289
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 38,892评论 3 405
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 37,655评论 0 266
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,104评论 1 303
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 36,451评论 2 325
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 38,569评论 1 340
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 34,254评论 4 328
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 39,834评论 3 312
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 30,725评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,950评论 1 264
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 46,260评论 2 360
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 43,446评论 2 348

推荐阅读更多精彩内容

  • 序言 后面有大量类似于mysql的sum, group by查询elk=== elk总体架构 https://ww...
    Hqmm阅读 62,140评论 2 27
  • 一、基本概念 1.主键、外键、超键、候选键 超键:在关系中能唯一标识元组的属性集称为关系模式的超键。一个属性可以为...
    仁安天下阅读 173评论 0 1
  • 1 简介 Druid是针对时间序列数据提供低延时的数据写入以及快速交互式查询的分布式OLAP数据库。分布式OLAP...
    LZhan阅读 691评论 0 0
  • Elasticsearch是一个开源搜索引擎,功能强大,可以进行分布式的实时文件存储,每个字段都被索引并可被搜索,...
    洛奇lodge阅读 152评论 0 0
  • 我是黑夜里大雨纷飞的人啊 1 “又到一年六月,有人笑有人哭,有人欢乐有人忧愁,有人惊喜有人失落,有的觉得收获满满有...
    陌忘宇阅读 8,528评论 28 53