工作的需要,开始更多地倾向于去中心化的结构,目前看来Cassandra算是去中心化DB中性能/管理最热门的选择,崇尚其P2P的理念。
自身原因对JAVA不擅长(周围写C的好少),还是更热衷于C++/JS,所以把Cassandr C++/NODEJS(内网环境下)搭建的过程记录下来,共同好者分享。
1,一些条件:
VituralBox 4.3 Win7 x64
Centos 6.4 x64_86(来自某国内某镜像网站)
thrift-0.9.1.tar.gz
openssl-1.0.1e.tar.gz
apache-cassandra-2.0.2-bin.tar.gz
repo指向
[base]
name=CentOS-$releasever - Base
baseurl=file:///media
enable=1
gpgcheck=1
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-CentOS-6
2,预埋YUM库
//DVD1
yum install -y automake libtool flex bison pkgconfig gcc-c++ boost-devel zlib-devel python-devel ruby-devel openssl-devel
yum install -y crypto-utils openssl
//DVD2
rpm -ivh libevent-devel-1.4.13-4.el6.x86_64.rpm libevent-doc-1.4.13-4.el6.noarch.rpm libevent-headers-1.4.13-4.el6.noarch.rpm
(libevent-devel 纯本地盘似乎不支持yum)
3,openssl安装
./config no-shared no-idea no-mdc2 no-rc5 zlib enable-tlsext no-ssl2 --prefix=/usr/local –openssldir=/usr/local/openssl
make depend
make
make install
4,thrift安装(依赖boost、libcry、libssl)
./configure
make
make install
5,生成CPP 4 CASSANDR驱动
cd /opt/cassandra/interface
thrift --gen cpp cassandra.thrift
[root@cent4 gen-cpp]# ll
total 2488
-rwxr-xr-x. 1 root root 1420936 Nov 21 07:33 aa
-rw-r--r--. 1 root root 3292 Nov 21 09:11 aa.cpp
-rw-r--r--. 1 root root 215304 Nov 19 09:11 aa.o
-rw-r--r--. 1 root root 390 Nov 19 20:32 cassandra_constants.cpp
-rw-r--r--. 1 root root 456 Nov 19 20:31 cassandra_constants.h
-rw-r--r--. 1 root root 474152 Nov 19 07:02 Cassandra.cpp
-rw-r--r--. 1 root root 186568 Nov 19 07:02 Cassandra.h
-rw-r--r--. 1 root root 9713 Nov 19 07:06 Cassandra_server.cpp
-rw-r--r--. 1 root root 9713 Nov 19 07:02 Cassandra_server.skeleton.cpp
-rw-r--r--. 1 root root 135803 Nov 19 07:02 cassandra_types.cpp
-rw-r--r--. 1 root root 69527 Nov 19 07:02 cassandra_types.h
5,编译C++ SAMPLE
.bash_profile 加下 export LD_LIBRARY_PATH=/usr/local/lib
g++ -I/usr/local/include/thrift aa.cpp Cassandra.cpp cassandra_types.cpp -L/usr/local/lib -lthrift -o aa
6,加载Nodejs SAMPLE
nodejs使用的是某大神写的node-cassandra-cql-master,比较好用。
对于内网的服务器,可以先CLONE一台能上网的,npm install node-cassandra-cql-master,然后把nodejs和 node-cassandra-cql-master直接scp就能使用
var cql = require('node-cassandra-cql');
var client = new cql.Client({hosts: ['192.168.137.104:9042'], keyspace: 'mykeyspace'});
client.execute('select * from users',['ConsistencyLevel.QUORUM'],
function(err, result)
{
if (err)
console.log('execute failed: '+err);
else
console.log('xxxx' + result.rows+'\n');
}
);
//client.shutdown();
client.streamRows('select * from standard9',
function(err, row) {
//the callback will be invoked per each row as soon as they are received
if (err)
console.log("Oh dear..."+err);
else {
console.log('sssse', row.get('name')+':'+row.get('age'));
}
}
);
==============================
7,建张SAMPLE表
create column family standard9 with
key_validation_class=UTF8Type and
comparator = UTF8Type and
column_metadata =
[
{column_name:name ,validation_class:UTF8Type},
{column_name: value, validation_class:UTF8Type},
{column_name: age, validation_class:UTF8Type},
];
插一下垃圾数据
insert into standard9 (key,name, value) values ('1745','aaa', 'bbb');
insert into standard9 (key,name, value) values ('1744','QWER', 'ddd');
insert into standard9 (key,age,name, value) values ('2931','99', 'ZXCV','AAA');
8,把system_autch replication_factor增加下
ALTER KEYSPACE system_auth WITH REPLICATION = {'class' : 'NetworkTopologyStrategy', 'dc2' : 2};
建议全keyspace走NTSnitch
否则会遇到cassandra的一致性报错
9,接下来跑apache给的examples
注意其中的cass.set_keyspace("mykeyspace");
string key = "2222";还有一些值需要设置为true的属性。
一些接口说明的文档网上都有,不再详述。
10,总结
走thrift可以让开发人员更好地掌握数据结构、接口定义及一些thrift底层原理。横扩移植需要一些基础库。
走NodeJS,开发效率相对较高,横扩移植能力强。
未来,如果cassandra能增补regularexpress或者rawdevice,多吸引点粉丝,就更好了。