AeroSpike初试

在一般的java应用中,都会使用redis作为缓存,但是redis相对来说一般存储的数据量不会太多,热点数据才会使用redis暂存用于热读;但是在一些场景下,数据量比较大,对读取的性能又比较高的时候,aerospike可能会显得更加的高效,特别是在并发高的时候;下面对aerospike做了一些简单的尝试⬇️⬇️

1.基本java客户端操作

1.1 client

封装一下client

public class AsClient {
    public static Map<String, Object> operate(String recordKey, Operation... opes) {
        Record record = client.operate(new WritePolicy(), key(recordKey), opes);
        return null != record ? record.bins : new HashMap<>();
    }

    static Key key(String recordKey) {
        return new Key(namespace, asSet, recordKey);
    }

    static Bin[] toBins(Map<String, Object> binMap) {
        Bin[] bins = new Bin[binMap.size()];
        int index = 0;
        for (String key : binMap.keySet()) {
            bins[index++] = new Bin(key, binMap.get(key));
        }
        return bins;
    }

    public static AerospikeClient getClient() {
        return client;
    }


    private static final AerospikeClient client;
    private static final String namespace = "ns1";//建议一个project对应一个库就好了
    private static final String asSet = "cyb_set";//个人感觉一个表也够用了,当做redis的键值来存数据

    static {
        //这是单节点的配置方法,如果后续加入其它节点,会自动发现
        client = new AerospikeClient("10.57.30.214", 3000);

        //这是多个节点的配置方式
       /* Host[] hosts = new Host[]{
                new Host("10.57.30.214", 3000)
        };
        ClientPolicy policy = new ClientPolicy();
//        policy.user = "";
//        policy.password = "";
//        policy.loginTimeout = 3000;
        client = new AerospikeClient(policy, hosts);*/
    }
}

1.2基本操作

public class BaseOpe {

    private static final AerospikeClient client = AsClient.getClient();


    /**
     * 如果不指定库和表,会默认使用配置文件中的默认库(test)和表
     *
     * @param recordKey 行键
     * @param binMap    列与值
     * @param ttl       -2:数据更新时不更新ttl,-1永不过期,0根据配置文件的默认配置,注:单位是s
     */
    public static void putRecord(String recordKey, Map<String, Object> binMap, Integer ttl) {
        WritePolicy policy = new WritePolicy();//写策略可以配置比如:失效时间,存在值时是否覆盖,还是不操作等,默认是UPDATE,即存在覆盖,不存在插入,还有REPLACE,替换掉所有的bins
        if (null != ttl) {
            policy.expiration = ttl;//-2:数据更新时不更新ttl,-1永不过期,0根据配置文件的默认配置,注:单位是s
        }
        client.put(policy, key(recordKey), toBins(binMap));
    }


    /**
     * 根据key查询记录,不传binName查询出所有的bin
     */
    public static Map<String, Object> getRecord(String recordKey, String... binNames) {
        Map<String, Object> result = new HashMap<>();
        if (null == binNames || binNames.length == 0) {
            Record record = client.get(new QueryPolicy(), key(recordKey));
            if (null != record) {
                result = record.bins;
            }
        } else {
            Record record = client.get(new QueryPolicy(), key(recordKey), binNames);
            if (null != record) {
                result = record.bins;
            }
        }
        return result;
    }

    public static List<Map<String, Object>> batchGet(String... recordKeys) {
        Key[] keys = new Key[recordKeys.length];
        for (int i = 0; i < keys.length; i++) {
            keys[i] = key(recordKeys[i]);
        }
        Record[] records = client.get(new BatchPolicy(), keys);
        List<Map<String, Object>> result = new ArrayList<>();
        for (Record record : records) {
            result.add(record.bins);
        }
        return result;
    }

    /**
     * 根据key删除记录
     */
    public static void delRecord(String recordKey) {
        client.delete(new WritePolicy(), key(recordKey));
    }


    /**
     * 通过设置为NULL来删除bin(列)
     */
    public static void deleteBin(String recordKey, String binName) {
        Bin bin = Bin.asNull(binName);
        client.put(new WritePolicy(), key(recordKey), bin);
    }

1.3列表List操作

public class ListOpe {
    private static final AerospikeClient client = AsClient.getClient();


    //List
    public static void add2List(String rowKey, String colKey, Object value) {
        operate(rowKey, ListOperation.append(colKey, Value.get(value)));
    }

    public static Object getOneFromList(String rowKey, String colKey, int index) {
        Map<String, Object> result = operate(rowKey, ListOperation.get(colKey, index));
        if (null == result) {
            return null;
        }
        return result.get(colKey);
    }

    public static Long getListSize(String rowKey, String colKey) {
        Map<String, Object> result = operate(rowKey, ListOperation.size(colKey));
        if (null == result) {
            return 0L;
        }
        return (Long) result.get(colKey);
    }
}

1.4 Map操作

public class MapOpe {
    private static final AerospikeClient client = AsClient.getClient();

    //Map
    @SuppressWarnings("unchecked")
    public static Map<String, Object> getSubMap(String rowKey, String binName, Object startKey, Object endKey) {
        Map<String, Object> result = operate(rowKey, MapOperation.getByKeyRange(binName, Value.get(startKey), Value.get(endKey), MapReturnType.KEY_VALUE));
        if (null == result) {
            return null;
        }
        List<AbstractMap.SimpleEntry<String, Object>> list = (List<AbstractMap.SimpleEntry<String, Object>>) result.get(binName);
        Map<String, Object> map = new HashMap<>();
        for (AbstractMap.SimpleEntry<String, Object> entry : list) {
            map.put(entry.getKey(), entry.getValue());
        }
        return map;
    }

    public static void putOrderMap(String rowKey, String colKey, Map<Object, Object> data) {
        MapPolicy policy = new MapPolicy(MapOrder.KEY_ORDERED, MapWriteMode.UPDATE);
        Map<Value, Value> valueMap = new HashMap<>();
        for (Object key : data.keySet()) {
            valueMap.put(Value.get(key), Value.get(data.get(key)));
        }
        operate(rowKey, MapOperation.putItems(policy, colKey, valueMap));
    }

    public static Object getOneFromMap(String rowKey, String colKey, Object valueKey) {
        Map<String, Object> result = operate(rowKey, MapOperation.getByKey(colKey, Value.get(valueKey), MapReturnType.VALUE));
        if (null == result) {
            return null;
        }
        return result.get(colKey);
    }

    public static Long getMapSize(String rowKey, String colKey) {
        Map<String, Object> result = operate(rowKey, MapOperation.size(colKey));
        if (null == result) {
            return null;
        }
        return (Long) result.get(colKey);
    }
}

1.5 操作总结

一般我们把as(aerospike)的namespace对应为db(database)的库,as的set对应db的表,as的bin对应表的列,as的set没有列的限制,也无需预先定义,每行的同一列可以是不同的数据类型,类的数量每一列也可以不一样,类似大多数NoSql设计;还有就是as的批量操作,可以将一批操作维持在一个事物内;List和Map的相关操作是对列的操作,我们通过普通操作插入一条数据,如果某列是List或者Map类型的话,可以使用ListOperation和MapOperation对其进行一些集合的操作。官方文档里面有很多其他细的操作,大家可以参考自己的项目是否可以使用,地址:https://www.aerospike.com/docs

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 217,826评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 92,968评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,234评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,562评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,611评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,482评论 1 302
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,271评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,166评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,608评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,814评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,926评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,644评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,249评论 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,866评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,991评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,063评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,871评论 2 354

推荐阅读更多精彩内容

  • 关于Mongodb的全面总结 MongoDB的内部构造《MongoDB The Definitive Guide》...
    中v中阅读 31,931评论 2 89
  • 车离开泊车位 风四处流窜 每个人各忙各的 不同数字的车牌很陌生 跳广场舞的大妈让你孤独 当你自以为会得意的一辈子 ...
    燃烧已烬阅读 212评论 0 0
  • 2018.6.29.星期五,天气晴,(200)二年级一班刘紫涵 早上闺女早读完去学校,我陪二宝玩,时间过的真...
    凤舞涵歆阅读 138评论 0 0
  • 2018.9.30 星期日 晴 《8幅漫画:你什么样,孩子就什么样》 1•ᴗ•自己没做好 拼命逼孩子 你的健身器材...
    陈一宁妈妈阅读 179评论 0 2