美文网首页Java 杂谈
AeroSpike基本原理及概念

AeroSpike基本原理及概念

作者: 清风_gary_明月 | 来源:发表于2019-08-23 20:29 被阅读1次

说明:分两篇介绍,第一篇为基本概念介绍,第二篇为Java客户端操作。

1、什么是AeroSpike?


  Aerospike是一个分布式,可扩展的NoSQL数据库。T级别大数据高并发的结构化数据存储解决方案,读写操作达微妙级,99%的响应可在1毫秒内实现,99.9%的响应可在5毫秒内实现。
  采用混合架构,索引存储在 RAM 中,而数据存储在闪存/固态硬盘(SSD) 上,自动感知集群,可以随意增加节点线性扩容,无需分片,无需人工干预(性能与节点成正比上升),支持多语言集成;与redis相比不太会遇到性能瓶颈,客户端SQL介入对RDBMS支持友好,对玩转数据库的朋友来说,可以无缝接入。
  缺点吗?半开源状态,免费的有社区版下载,企业版是收费的,居说社区版不太稳定(本人使用感觉还很OK)。
  架构概述可参考:https://www.aerospike.com/docs/architecture/index.html

2、基本概念介绍


  大家可以自行下载world.js文件打开看一下源码,这里只拿出一行核心代码说明,registerMap里面的world.json就是我们要自定义的json(原world.js中world.json参数位置坐标是不包含中国省份的),这里我们要做的就是把中国省份地理坐标加入,因为registerMap支持的是标准的geo坐标系(不了解的可自行搜索),关于中国省份的坐标,大家可以从网上自行下载china.js,很容易找到,记得要稍微转换一下格式。
namespace 策略容器,类似RDBMS中的schema,可以设置副本数、内存大小、有效时长、存储引擎、文件存储位置。
Sets 类似RDBMS中的表。
Records 类似RDBMS中的行,行级的失效时间(TTL)。
Bin 类似RDBMS中的列,一行可以有多个bins。

Aerospike Mysql
namespace database
set table
bin column
record row
key pk

Aerospike支持的数据类型(v3.6+):早期的版本可能不太一样。
integers
doubles
strings
blobs
lists
maps
geoJSON
natively serialized types

3、坑爹的限制遵守


Aerospike server item limits
namespace名称 <= 31个字符(名称空间名称中不允许使用’:‘或’;’)
命名空间中所有键的总分类数 < 32 K
命名空间中的总二级索引 <= 256 indices
每个键的bin < 32 K
索引名称 <= 255个字符(索引名称中不允许使用’:‘或’;’)
hist-track-back 86400秒(切片10秒)
复制因子 =节点数是集群
命名空间的每个文件或磁盘的最大可配置大小 = 2 TiB
接口数量 <= 500(对于3.15之前的服务器版本,限制为50)

4、下载安装


上传文件:aerospike-server-community-3.9.1.1-el6.zip
解压:unzip aerospike-server-community-3.9.1.1-el6.zip
添加执行权限:
cd  aerospike-server-community-3.9.1.1-el6
chmod  a+x  asinstall
chmod  a+x  aerospike-tools-deps/install.sh
执行脚本安装:./asinstall
默认安装目录:/etc/aerospike

4.1、aerospike.conf 配置


  参数说明参考配置中注解 。

# Aerospike database configuration file.
service {
    user root
    group root
    paxos-single-replica-limit 1 # Number of nodes where the replica count is automatically reduced to 1.
    pidfile /var/run/aerospike/asd.pid
    service-threads 4
    transaction-queues 4
    transaction-threads-per-queue 4
    proto-fd-max 15000
}
logging {
    # Log file must be an absolute path.
    file /home/plugin/logs/aerospike.log {
        context any info
    }
}
network {
    service {
        address any
        port 3000
                access-address 192.168.75.142
    }
    heartbeat {
        # To use unicast-mesh heartbeats, remove the 3 lines above, and see
        # aerospike_mesh.conf for alternative.
                mode mesh         #mesh模式配置
                port 3002
                address 192.168.75.142
               # mesh-seed-address-port vmhost 3002
        interval 150
        timeout 10
    }
    fabric {
        port 3001
    }
    info {
        port 3003
    }
}
namespace testMemory {
    replication-factor 1 #备份副本1个
    memory-size 1G
    default-ttl 30d # 有效期30天,设置0为永久有效
    storage-engine memory
}

namespace testFile {
        replication-factor 1
        memory-size 1G
        default-ttl 30d # 30 days, use 0 to never expire/evict.
        storage-engine device {
               file /home/plugin/logs/aerospike.data
               filesize 2G
               data-in-memory true # 内存和文件中同时存储.

       }
}

4.2、启动


service aerospike start –启动
service aerospike status–查看状态
service aerospike restart –重启动
service aerospike stop –关闭
说明:确保配置文件的目录是存在的,否则你可能会看到下面的异常
WARN Failed to connect to seed 127.0.0.1:3000. AEROSPIKE_ERR_CLIENT Socket write error: 111  

4.3、查看


更多可关注

相关文章

  • AeroSpike基本原理及概念

    说明:分两篇介绍,第一篇为基本概念介绍,第二篇为Java客户端操作。 1、什么是AeroSpike?   Aero...

  • Aerospike基本概念

    一、什么是Aerospike(AS) Aerospike是一个分布式,高可用的 K-V类型的Nosql数据...

  • Aerospike (2) - 写机制

    注:本文转自我的个人博客 Aerospike (2) - 写机制。 最近使用Aerospike遇到了不少的问题,在...

  • Aerospike java client

    上一篇介绍了Aerosike的基本概念,本文将介绍如何用java连接Aerospike。 一、导入jar包 jav...

  • Aerospike

    Aerospike是什么 Aerospike是一个分布式可扩展的键-值NoSql数据库。它支持灵活的数据模式,并且...

  • Linux 程序设计1:深入浅出 Linux 共享内存

    笔者最近在阅读Aerospike 论文时,发现了Aerospike是利用了Linux 共享内存机制来实现的存储索引...

  • 第一章 法律和依法治国的基本理论

    本章内容提要:本章主要介绍法律的基本原理及概念,如法律的产生、法的特征及本质等,并对依法治国问题进行详细介绍。 第...

  • ios 音视频处理总结

    ios 音视频基本原理概念(转)

  • 2021 408 计算机大纲

    数据结构 【考查目标】 掌握数据结构的基本概念、基本原理和基本方法。 掌握数据的逻辑结构、存储结构及基本操作的实现...

  • solr教程一

    solr的基本原理 相关概念: 核心概念 Core: 对应于standalone(独立模式) Collectio...

网友评论

    本文标题:AeroSpike基本原理及概念

    本文链接:https://www.haomeiwen.com/subject/hlcxectx.html