2011年4月21日张宴的轻量级开源简单队列服务 HTTPSQS 1.6版本发布,第一时间更新httpsqs版本为最新1.6
HTTPSQS(HTTP Simple Queue Service)是一款基于 HTTP GET/POST 协议的轻量级开源简单消息队列服务,使用 Tokyo Cabinet 的 B+Tree Key/Value 数据库来做数据的持久化存储。
队列(Queue)又称先进先出表(First In First Out),即先进入队列的元素,先从队列中取出。加入元素的一头叫“队头”,取出元素的一头叫“队尾”。利用消息队列可以很好地异步处理数据传送和存储,当你频繁地向数据库中插入数据、频繁地向搜索引擎提交数据,就可采取消息队列来异步插入。另外,还可以将较慢的处理逻辑、有并发数量限制的处理逻辑,通过消息队列放在后台处理,例如FLV视频转换、发送手机短信、发送电子邮件等。
HTTPSQS 具有以下特征:
● 非常简单,基于 HTTP GET/POST 协议。PHP、Java、Perl、Shell、Python、Ruby等支持HTTP协议的编程语言均可调用。
● 非常快速,入队列、出队列速度超过10000次/秒。
● 高并发,支持上万的并发连接,C10K不成问题。
● 支持多队列。
● 单个队列支持的最大队列数量高达10亿条。
● 低内存消耗,海量数据存储,存储几十GB的数据只需不到100MB的物理内存缓冲区。
● 可以在不停止服务的情况下便捷地修改单个队列的最大队列数量。
● 可以实时查看队列状态(入队列位置、出队列位置、未读队列数量、最大队列数量)。
● 可以查看指定队列ID(队列点)的内容,包括未出、已出的队列内容。
● 查看队列内容时,支持多字符集编码。
● 源代码不超过800行,适合二次开发。
CentOS 5.4下安装:
- ulimit -SHn 65535
- wget http://httpsqs.googlecode.com/files/libevent-2.0.10-stable.tar.gz
- tar zxvf libevent-2.0.10-stable.tar.gz
- cd libevent-2.0.10-stable/
- ./configure --prefix=/usr/local/libevent-2.0.10-stable/
- make
- make install
- cd ../
- wget http://httpsqs.googlecode.com/files/tokyocabinet-1.4.47.tar.gz
- tar zxvf tokyocabinet-1.4.47.tar.gz
- cd tokyocabinet-1.4.47/
- ./configure --prefix=/usr/local/tokyocabinet-1.4.47/
- #Note: In the 32-bit Linux operating system, compiler Tokyo cabinet, please use the ./configure --enable-off64 instead of ./configure to breakthrough the filesize limit of 2GB.
- #./configure --enable-off64 --prefix=/usr/local/tokyocabinet-1.4.47/
- make
- make install
- cd ../
- wget http://httpsqs.googlecode.com/files/httpsqs-1.6.tar.gz
- tar zxvf httpsqs-1.6.tar.gz
- cd httpsqs-1.6/
- make
- make install
- cd ../
FreeBSD下安装:
一、下载所需软件包:
- fetch http://monkey.org/~provos/libevent-2.0.10-stable.tar.gz
- fetch ftp://ftp.freebsd.org/pub/FreeBSD/ports/i386/packages-7-stable/All/gmake-3.81_3.tbz
- fetch ftp://ftp.freebsd.org/pub/FreeBSD/ports/i386/packages-7-stable/All/libiconv-1.13.1_1.tbz(gmake需要,如已安装可跳过)
- fetch ftp://ftp.freebsd.org/pub/FreeBSD/ports/i386/packages-7-stable/All/gettext-0.17_1.tbz(gmake需要,如已安装可跳过)
- fetch http://1978th.net/tokyocabinet/tokyocabinet-1.4.47.tar.gz
- fetch http://httpsqs.googlecode.com/files/httpsqs-1.6.tar.gz
二、安装
1、安装libevent
- tar zxvf libevent-2.0.10-stable.tar.gz
- cd libevent-2.0.10-stable
- ./configure --prefix=/usr/local/libevent
- make && make install
- cd ..
2、安装gmake(编译tokyocabinet需要)
- pkg_add gmake-3.81_3.tbz
3、安装tokyocabinet
- tar zxvf tokyocabinet-1.4.47.tar.gz
- cd tokyocabinet-1.4.47
- ./configure --prefix=/usr/local/tokyocabinet-1.4.47 --enable-off64
- /usr/local/bin/gmake
- /usr/local/bin/gmake install
- cd ..
注:在32位Linux操作系统上编译Tokyo cabinet,请使用./configure --enable-off64代替./configure,可以使数据库文件突破2GB
4、安装httpsqs
- tar zxvf httpsqs-1.6.tar.gz
- cd httpsqs-1.6
- make && make install
5、启动httpsqs
- /usr/bin/httpsqs -d -p 8800 -x /data/soft/httpsqs
- /usr/bin/httpsqs -h //帮助
三、测试
本文地址:http://www.92csz.com/42/530.html如非注明则为本站原创文章,欢迎转载。转载请注明转载自:moon's blog