[ laravel爬虫实战--基础篇 ] guzzle发送并发请求
Song •
6335 次浏览 •
0个评论 •
2017年11月01日
一般我们的请求都是阻塞的,如果需要同时进行多请求的话,就得需要使用并发请求了。
Guzzle
你可以使用Promise
和异步请求来同时发送多个请求:
$client = new Client();
// 创建一个请求列表
$promises = [
baidu => $client->getAsync(https://www.baidu.com/),
jd => $client->getAsync(http://www.jd.com/),
earnp => $client->getAsync(http://bbs.earnp.com/),
];
// 等待所有请求完成
$results = Promise\unwrap($promises);
// 查看请求结果
$baidu = $results[baidu]->getHeader(Content-Length);
$jd = $results[jd]->getHeader(Content-Length);
$earnp = $results[earnp]->getHeader(Content-Length);
dd($jd);
上面确定了并发的数量,当你想发送不确定数量的请求时,可以使用GuzzleHttp\Pool
对象:
$client = new Client();
$requests = function ($total) {
$uri = http://baidu.com;
for ($i = 0; $i < $total; $i++) {
yield new Request(GET, $uri);
}
};
$pool = new Pool($client, $requests(100), [
concurrency => 5,
fulfilled => function ($response, $index) {
// 成功的响应。
},
rejected => function ($reason, $index) {
// 失败的响应
},
]);
// 构建请求
$promise = $pool->promise();
// 等待请求池完成。
$promise->wait();
这样我们就可以发布并发请求了
更多相关好文
-
laravel中distinct()的使用方法与去重 2017-09-11
-
Laravel将view缓存为静态html,laravel页面静态缓存 2021-10-09
-
[ laravel爬虫实战--基础篇 ] guzzle描述与安装 2017-11-01
-
[ 配置教程 ] 在ubuntu16.04中部署LNMP环境(php7+maridb且开启maridb远程以及nginx多域名访问 )并配置laravel环境 2017-07-18
-
mysql如何给运营人员添加只有查询权限的账号 2024-12-02
热门文章
-
mysql如何给运营人员添加只有查询权限的账号 2024-12-02
-
Mac 安装mysql并且配置密码 2024-11-20
-
阿里云不同账号(跨账号)ECS服务器同地域如何实现免费内网互通? 2024-11-12
-
electron安装使用better-sqlite3并解决NODE_MODULE_VERSION xxx. This version of Node.js requires 2024-11-06
-
Zerotier+Moon+Nginx实现内网穿透搭建网站 2024-08-23
花生壳绑定ubuntu服务器?