位置: 编程技术 - 正文
推荐整理分享PHP并发多进程处理利器Gearman使用介绍(php 并发 解决方案),希望有所帮助,仅作参考,欢迎阅读内容。
文章相关热门搜索词:php并发量一般多高,php并发编程,php进程数与并发关系,php多进程处理任务,php并发处理,php进程数与并发关系,php 多进程 多线程,php多进程处理任务,内容如对您有帮助,希望把文章链接给更多的朋友!
工作中我们有时候会遇到比如需要同时发布数据到多个个服务器上,或者同时处理多个任务。可以使用PHP的curl_multi的方式并发处理请求,但是由于网络和数据以及各个服务器等等的一些情况导致这种并发处理的响应时间很慢,因为在并发请求的过程中还包括记录日志,处理数据等逻辑,等待处理结果并返回,所以也不能友好的满足后台操作的体验。
现在有另外一种方案,利Gearman来实现并发的需求。通过Client将请求发送到Gearman的Jobs,在每个Work中来再来进行curl_multi和数据处理和日志等一些操作,同时用supervisor 来监控Gearman以及Works的进程,这样可以实现一个并行的多进程和负载均衡的方案。
Gearman可以做什么:
异步处理:图片处理,订单处理,批量邮件/通知之类的要求高CPU或内存的处理:大容量的数据处理,MapReduce运算,日志聚集,视频编码分布式和并行的处理定时处理:增量更新,数据复制限制速率的FIFO处理分布式的系统监控任务
Gearman工作原理:使用Gearman的应用通常有三部分组成:一个Client、一个Worker、一个 任务服务器。 Client的作用是提出一个 Job 任务 交给 Job Server 任务服务器。Job Server 会去寻找一个 合适的 Worker 来完成这项任务。Worker 执行由 Client 发送过来的 Job,并且将结果通过 Job Server 返回给 Client。Gearman 提供了 Client 和 Worker 的 API,利用这些API 应用可以同 Gearman Job Server来进行通信。Gearman 内部 Client 和 Worker 之间的通信都是通过 TCP 连接来进行的。
Gearman可以将工作的负载分担到不同的机器中。
安装:
启动:gearmand -d
安装PHP Gearman扩展我都是用pcel来安装的,你也可以下载源码包来编译安装,但是记得要先安装libgearman和re2c,不然扩展编译安装会出错。
pecl install gearman #不成功并提示版本问题可以试试 pecl install gearman-1.0.3,默认好像是1.1.2编译安装也很简单
PHP接口函数Gearman提供很多完善的扩展函数,包括GearmanClient,GearmanJob,GearmanTask,GearmanWorker,具体可以查看PHP官方手册.这是官方提供的Example其中的一个,相当与一个并发的分发任务处理的例子
gearman_work.php
我在3个终端中都执行了gearman_work.php
来查看下执行gearman_work.php的结果shell
看到上面的3. seconds,说明client请求过去的任务被并行分发执行了。在实际的生产环境中,为了监测gearmand和work的进程没有被意外退出,我们可以借助Supervisor这个工具.
ECSHOP完美解决Deprecated: preg_replace()报错的问题 随着PHP5.5的普及,ECSHOP系统又爆出了新的错误。PHP发展到PHP5.5版本以后,有了很多细微的变化。而ECSHOP官方更新又太慢,发现这些问题后也不及时升级
完美解决phpdoc导出文档中@package的warning及Error的错误 今天在编写PHPDoc的导出文档的时候发现一个很郁闷的错误,虽然这个warning不是什么重要错误,但是看着总是很不爽的。于是就去网上找了很多相关的资
XHProf报告字段含义的解析 FunctionName:方法名称。Calls:方法被调用的次数。Calls%:方法调用次数在同级方法总数调用次数中所占的百分比。Incl.WallTime(microsec):方法执行花费的时
标签: php 并发 解决方案
本文链接地址:https://www.jiuchutong.com/biancheng/294899.html 转载请保留说明!友情链接: 武汉网站建设