gearman + mysql方式实现持久化操作示例
本文实例讲述了gearman+mysql方式实现持久化操作。分享给大家供大家参考,具体如下:
1、为什么要持久化?
gearman的jobserver中的工作队列存储在内存中,一旦服务器有未处理的任务时重启或者宕机,那么这些任务就会丢失。
持久化存储队列可以允许添加后台任务,并将其存储在外部的持久型队列里(比如MySQL数据库)。
2、关于gearman的持久化的文章,建议可以看官方文档
http://gearman.org/manual/job_server/#persistent_queues
3、创建用于持久化的数据库和表
CREATEDATABASEgearman; CREATETABLE`gearman_queue`( `unique_key`varchar(64)NOTNULL, `function_name`varchar(255)NOTNULL, `priority`int(11)NOTNULL, `data`longblobNOTNULL, `when_to_run`int(11), PRIMARYKEY(`unique_key`) )ENGINE=InnoDBDEFAULTCHARSET=utf8;
4、创建gearman用户
>createuser'gearman'@'%'IDENTIFIEDBY'123456'; >grantallongearman.*TO'gearman'@'%'; >flushprivileges;
5、启动gearmand时指定持久化参数
>gearmand-qlibdrizzle\ --libdrizzle-host=192.168.1.100\ --libdrizzle-port=3306\ --libdrizzle-user=gearman\ --libdrizzle-password=123456\ --libdrizzle-db=gearman\ --libdrizzle-table=gearman_queue\ --libdrizzle-mysql
或者使用如下
>gearmand-qmysql\ --mysql-host=192.168.1.100\ --mysql-port=3306\ --mysql-user=gearman\ --mysql-password=123456\ --mysql-db=gearman\ --mysql-table=gearman_queue
如果出现如下问题,说明你在编译安装gearman时没有把libdrizzle装上
gearmand:unrecognisedoption'--libdrizzle-host=192.168.1.100'
在如下网址,下载libdrizzle
https://launchpad.net/libdrizzle/+download
如:libdrizzle-5.1.4.tar.gz
安装libdrizzle
>tarxflibdrizzle-5.1.4.tar.gz >cdlibdrizzle-5.1.4
这里最好不要指定--prefix,因为你指定了其它目录,下面gearman编译时可能会找不到相关头文件和链接库,需要你手动添加软链接
>./configure >make&&makeinstall
然后我们重新编译安装gearman
>tarxfgearmand-1.1.12.tar.gz >cdgearmand-1.1.12
如果configure的有哪些参数不清楚,可以用下面命令查看
>./configure--help
这里需要安装mysql-devel,以便gearman支持mysql的持久化
>yuminstallmysql-servermysql-devel
因为我早先装过gearman,没有指定--prefix,所以这里也没有指定,有需要的可以自行指定
>./configure >make&&makeinstall
configure完成最后显示的一段信息
*LIBS: *LDFLAGSFlags: *Assertionsenabled:no *Debugenabled:no *Warningsasfailure:no *Buildingwithlibsqlite3no *Buildingwithlibdrizzleyes *Buildingwithlibmemcachednotfound *Buildingwithlibpqno *Buildingwithtokyocabinetno *Buildingwithlibmysqlyes *SSLenabled:no *cyasslfound:no *opensslfound:yes *make-j:2 *VCScheckout:no *sphinx-build::
最后可以看到libdrizzle和libmysql那地方显示yes
查看是否安装上
>gearmand--help
如果出现如下错误
gearmand:errorwhileloadingsharedlibraries:libdrizzle.so.9:cannotopensharedobjectfile:Nosuchfileordirectory
请打开修改/etc/ld.so.conf
>vi/etc/ld.so.conf
加入如下一句话
/usr/local/lib
运行ldconfig
>ldconfig
再次运行上面的gearmand--help,如果出现如下信息,则安装成功
builtin: libdrizzle: --libdrizzle-hostarg(=localhost)Hostofserver. --libdrizzle-portarg(=3306)Portofserver.(bydefaultDrizzle) --libdrizzle-udsargUnixdomainsocketforserver. --libdrizzle-userarg(=root)Usernameforauthentication. --libdrizzle-passwordargPasswordforauthentication. --libdrizzle-dbarg(=gearman)Databasetouse. --libdrizzle-tablearg(=queue)Tabletouse. --libdrizzle-mysqlUseMySQLprotocol. MySQL: --mysql-hostarg(=localhost)MySQLhost. --mysql-portarg(=3306)Portofserver.(bydefault3306) --mysql-userargMySQLuser. --mysql-passwordargMySQLuserpassword. --mysql-dbargMySQLdatabase. --mysql-tablearg(=gearman_queue)MySQLtablename.
通过libdrizzle启动gearmand如果出现如下问题
gearmand:Errorwhileinitializingthequeue:libdrizzle
并且日志里面的记录是这样的
ERROR2017-02-2207:51:02.536574[main]Failedtoinitializelibdrizzle: initialize(QUEUE_ERROR)->libgearman-server/queue.cc:246
不知道是不是mysql版本太高的原因,还是其他的原因,如果大家试了实在不行还是换另一个方式,另一方式我测试是成功的。
创建一个后台job
>gearman-ftest-b123456
查看数据库如下:
更多关于MySQL相关内容感兴趣的读者可查看本站专题:《MySQL索引操作技巧汇总》、《MySQL常用函数大汇总》、《MySQL日志操作技巧大全》、《MySQL事务操作技巧汇总》、《MySQL存储过程技巧大全》及《MySQL数据库锁相关技巧汇总》
希望本文所述对大家MySQL数据库计有所帮助。
声明:本文内容来源于网络,版权归原作者所有,内容由互联网用户自发贡献自行上传,本网站不拥有所有权,未作人工编辑处理,也不承担相关法律责任。如果您发现有涉嫌版权的内容,欢迎发送邮件至:czq8825#qq.com(发邮件时,请将#更换为@)进行举报,并提供相关证据,一经查实,本站将立刻删除涉嫌侵权内容。