PHP多进程swoole应用实例swoole多进程process方法

news/2024/7/19 12:02:30 标签: php, 后端, swoole, 多进程, 爬虫

应用一:请求接口,减少时间

假设我们需要CURL多个地址,例如3个,每个需要1秒,如果我们同步运行至少需要3秒完成,这对用户的体验是非常不好的,我们可以引入swoole的process子进程开启三个进程同时curl则需要1秒处理好。

代码实现:

<?php

echo 'start:' . date("Ymd H:i:s");
$urls = [
    'http://www.baidu.com',
    'http://www.sina.com.cn',
    'http://www.qq.com',
];
//模仿读取(已注销)
/*foreach ($urls as $url) {
    $content = [] = file_get_contents($url);
}*/

//使用swoole的process开启多个子进程
for ($i = 0; $i < 3; $i++) {
    //子进程  use用于传值
    $process = new swoole_process(function (swoole_process $worker) use ($i, $urls) {
        //curl处理
        $content = curlData($urls[$i]);
        //因为下面参数是true所以会输出到管道里
        echo $content . PHP_EOL;
    }, true);
    $pid = $process->start();
    $wokers[$pid] = $process;

}

foreach ($wokers as $process) {
    echo $process->read();
}

function curlData($url)
{
    //模拟消耗1秒
    sleep(1);
    return $url . "success" . PHP_EOL;
}

echo 'end:' . date("Ymd H:i:s");

运行结果如下,确实运行缩短至1秒

图片

应用二:发送邮件和短信

比如,我们要对已知的用户数据进行判断,是否需要发送邮件和短信,如果需要发送则发送。

不使用多进程时,我们首先判断是否发送邮件,如果需要则发送;然后再判断是否需要发送短信,如果需要则发送。如果发送邮件耗时2s,发送短信耗时2s,那么我们完成任务大概需要4s左右的时间。

如果我们使用多线程的话,可以开两个线程,一个用于处理邮件,一个用于处理短信,则耗时一共需要2s左右,处理时间缩短了一半。

下面看详细代码

<?php
$info = array(
    "sendmail"=>1,
    "mailto"=>"12345@qq.com",
    "sendsms"=>1,
    "smsto"=>"123456"
);
echo "start:".date("Y-m-d H:i:s").PHP_EOL;
$mail_process = new swoole_process('sendMail',true);
$mail_process->start();
$sms_process = new swoole_process('sendSMS',true);
$sms_process->start();
//主进程输出子进程范围内容
echo $mail_process->read();
echo PHP_EOL;
echo $sms_process->read();
echo PHP_EOL;
echo "end:".date("Y-m-d H:i:s").PHP_EOL;
//并行函数
function sendMail(swoole_process $worker){
    global $info;
    if($info['sendmail']==1){
        sleep(2);
        $worker->write("send mail to ".$info['mailto']);
    }
}
function sendSMS(swoole_process $worker){
    global $info;
    if($info['sendmail']==1){
        sleep(2);
        $worker->write("send sms to ".$info['smsto']);
    }
}

应用三:网页抓取,循环执行任务,划分多个进程执行

假设我们现在有一个通过curl抓取网页内容的需求,需要抓取10个网页,url地址通过数组读取,每个curl耗时2s。如果我们通过for循环来抓取这10个网页,需要耗时20s,使用多进程我们可以将任务划分成5份,分别由5个进程执行,每个进程抓取2个url,并发执行,共耗时4s,效率提高5倍。

<?php

$url_arr = array();
for ($i=0;$i<10;$i++){
    $url_arr[] = "www.baidu.com?wd=".$i;
}
echo "start:".date("Y-m-d H:i:s").PHP_EOL;
$workers = array();
for ($i=0;$i<5;$i++){
    $process = new swoole_process('getContents',true);
    $process->start();
    $process->write($i);
    $workers[] = $process;
}
//主进程数据结果
foreach ($workers as $process){
    echo $process->read();
    echo PHP_EOL;
}
echo "end:".date("Y-m-d H:i:s").PHP_EOL;
function getContents(swoole_process $worker){
    $i = $worker->read();
    global $url_arr;
    $res1 = execCurl($url_arr[($i*2)]);
    $res2 = execCurl($url_arr[($i*2+1)]);
    echo $res1.PHP_EOL.$res2;
}
function execCurl($url){
    sleep(2);
    return "handle ".$url." finished";
}

执行效果如下:

图片

从上面的例子可以看出:swoole多进程process方法,比curl模拟并发的更加方便一些。


http://www.niftyadmin.cn/n/908697.html

相关文章

python---生成随机密码

#简短地生成随机密码&#xff0c;包括大小写字母、数字&#xff0c;可以指定密码长度from random import choice import string#python3中为string.ascii_letters,而python2下则可以使用string.letters和string.ascii_lettersdef GenPassword(length8,charsstring.ascii_letter…

最新v4.2版本CRMEB商城API接口文档标准版后台(一)

CRMEB_标准版后台 基础接口 登录页面图片数据 基本信息 Path&#xff1a; /adminapi/login/info Method&#xff1a; GET 接口描述&#xff1a; 请求参数 返回数据 名称类型是否必须默认值备注其他信息 statusnumber非必须 msgstring非必须 dataobject非必须├─ slid…

HDU 2242 考研路茫茫——空调教室 无向图缩环+树形DP

考研路茫茫——空调教室 Problem Description众所周知&#xff0c;HDU的考研教室是没有空调的&#xff0c;于是就苦了不少不去图书馆的考研仔们。Lele也是其中一个。而某教室旁边又摆着两个未装上的空调&#xff0c;更是引起人们无限YY。一个炎热的下午&#xff0c;Lele照例在教…

用js操作表格

效果图&#xff1a; 任务&#xff1a; 1. 鼠标移到不同行上时背景色改为色值为 #f2f2f2&#xff0c;移开鼠标时则恢复为原背景色 #fff var trdocument.getElementsByTagName("tr"); for(var i 0;i<tr.length;i) { bgcChange(tr[i]); } // 鼠标移动改变背景,可以通…

最新v4.2版本CRMEB商城API接口文档标准版前台(二)

CRMEB_标准版前台 crmeb api 基础接口 apple登陆 基本信息 Path&#xff1a; /api/apple_login Method&#xff1a; POST 接口描述&#xff1a; 请求参数 Headers 参数名称参数值是否必须示例备注Content-Typeapplication/x-www-form-urlencoded是 Body 参数名称参数…

第八章:Python基础の面向对象(二)

本課主題 面向对象的多态面向对象的成员成员修饰符特殊成员面向对象其他应用异常处理设计模式与单例模式 面向对象的多态 指定参数类型只是多态的一种表现另外一种是允许自己类型和自己的子类型(典型)以下是一个多态的例子&#xff0c;创建一个 func 函数&#xff0c;这个函数接…

MySQL通过frm和idb恢复数据库的方法

基于本地MySQL操作 原因&#xff1a;比较方便 这个方法比较繁琐 有一步到位的大佬可以留言指教 一、安装PHPstudy、Navicat&#xff08;MySQL连接工具&#xff09; 二、本地数据库创建数据库 三、执行恢复&#xff08;重点&#xff09; 1、创建要恢复的表 2、执行解除…

Windows+Phpstorm2021 Xdebug调试

1、下载xdebug php扩展&#xff0c;下载地址&#xff1a;Xdebug: Support — Tailored Installation Instructions 2、打开phpinfo页面&#xff0c;CtrlA全选页面&#xff0c;CtrlC复制phpinfo内的所有内存&#xff0c;沾粘到输入框中 点击 “Analyse my phpinfo() output”按钮…