AeroSpike基本原理及概念

说明:分两篇介绍,第一篇为基本概念介绍,第二篇为Java客户端操作。

1、什么是AeroSpike?


  Aerospike是一个分布式,可扩展的NoSQL数据库。T级别大数据高并发的结构化数据存储解决方案,读写操作达微妙级,99%的响应可在1毫秒内实现,99.9%的响应可在5毫秒内实现。
  采用混合架构,索引存储在 RAM 中,而数据存储在闪存/固态硬盘(SSD) 上,自动感知集群,可以随意增加节点线性扩容,无需分片,无需人工干预(性能与节点成正比上升),支持多语言集成;与redis相比不太会遇到性能瓶颈,客户端SQL介入对RDBMS支持友好,对玩转数据库的朋友来说,可以无缝接入。
  缺点吗?半开源状态,免费的有社区版下载,企业版是收费的,居说社区版不太稳定(本人使用感觉还很OK)。
  架构概述可参考:https://www.aerospike.com/docs/architecture/index.html

2、基本概念介绍


  大家可以自行下载world.js文件打开看一下源码,这里只拿出一行核心代码说明,registerMap里面的world.json就是我们要自定义的json(原world.js中world.json参数位置坐标是不包含中国省份的),这里我们要做的就是把中国省份地理坐标加入,因为registerMap支持的是标准的geo坐标系(不了解的可自行搜索),关于中国省份的坐标,大家可以从网上自行下载china.js,很容易找到,记得要稍微转换一下格式。
namespace 策略容器,类似RDBMS中的schema,可以设置副本数、内存大小、有效时长、存储引擎、文件存储位置。
Sets 类似RDBMS中的表。
Records 类似RDBMS中的行,行级的失效时间(TTL)。
Bin 类似RDBMS中的列,一行可以有多个bins。

Aerospike Mysql
namespace database
set table
bin column
record row
key pk

Aerospike支持的数据类型(v3.6+):早期的版本可能不太一样。
integers
doubles
strings
blobs
lists
maps
geoJSON
natively serialized types

3、坑爹的限制遵守


Aerospike server item limits
namespace名称 <= 31个字符(名称空间名称中不允许使用’:‘或’;’)
命名空间中所有键的总分类数 < 32 K
命名空间中的总二级索引 <= 256 indices
每个键的bin < 32 K
索引名称 <= 255个字符(索引名称中不允许使用’:‘或’;’)
hist-track-back 86400秒(切片10秒)
复制因子 =节点数是集群
命名空间的每个文件或磁盘的最大可配置大小 = 2 TiB
接口数量 <= 500(对于3.15之前的服务器版本,限制为50)

4、下载安装


上传文件:aerospike-server-community-3.9.1.1-el6.zip
解压:unzip aerospike-server-community-3.9.1.1-el6.zip
添加执行权限:
cd  aerospike-server-community-3.9.1.1-el6
chmod  a+x  asinstall
chmod  a+x  aerospike-tools-deps/install.sh
执行脚本安装:./asinstall
默认安装目录:/etc/aerospike

4.1、aerospike.conf 配置


  参数说明参考配置中注解 。

# Aerospike database configuration file.
service {
    user root
    group root
    paxos-single-replica-limit 1 # Number of nodes where the replica count is automatically reduced to 1.
    pidfile /var/run/aerospike/asd.pid
    service-threads 4
    transaction-queues 4
    transaction-threads-per-queue 4
    proto-fd-max 15000
}
logging {
    # Log file must be an absolute path.
    file /home/plugin/logs/aerospike.log {
        context any info
    }
}
network {
    service {
        address any
        port 3000
                access-address 192.168.75.142
    }
    heartbeat {
        # To use unicast-mesh heartbeats, remove the 3 lines above, and see
        # aerospike_mesh.conf for alternative.
                mode mesh         #mesh模式配置
                port 3002
                address 192.168.75.142
               # mesh-seed-address-port vmhost 3002
        interval 150
        timeout 10
    }
    fabric {
        port 3001
    }
    info {
        port 3003
    }
}
namespace testMemory {
    replication-factor 1 #备份副本1个
    memory-size 1G
    default-ttl 30d # 有效期30天,设置0为永久有效
    storage-engine memory
}

namespace testFile {
        replication-factor 1
        memory-size 1G
        default-ttl 30d # 30 days, use 0 to never expire/evict.
        storage-engine device {
               file /home/plugin/logs/aerospike.data
               filesize 2G
               data-in-memory true # 内存和文件中同时存储.

       }
}

4.2、启动


service aerospike start –启动
service aerospike status–查看状态
service aerospike restart –重启动
service aerospike stop –关闭
说明:确保配置文件的目录是存在的,否则你可能会看到下面的异常
WARN Failed to connect to seed 127.0.0.1:3000. AEROSPIKE_ERR_CLIENT Socket write error: 111  

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,509评论 6 504
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,806评论 3 394
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 163,875评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,441评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,488评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,365评论 1 302
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,190评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,062评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,500评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,706评论 3 335
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,834评论 1 347
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,559评论 5 345
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,167评论 3 328
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,779评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,912评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,958评论 2 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,779评论 2 354

推荐阅读更多精彩内容