考虑以下代码:
public function getItemHistoryForRegion(array $items, array $regions) {
$client = new Client(['expect' => false]);
$acceptedResponses = [];
$rejectedResponses = [];
$createdRequests = [];
$regionAndItem = [];
foreach($items as $item) {
foreach ($regions as $region) {
array_push($regionAndItem, [$item, $region]);
array_push($createdRequests, new Request('GET', 'https://public-crest.eveonline.com/market/'.$region.'/types/'.$item.'/history/'));
}
}
$pool = new Pool($client, $createdRequests, [
'concurrency' => 10,
'fulfilled' => function ($response, $index) use (&$acceptedResponses) {
EveLogHandler::requestLog($response, 'eve_online_region_item_history_responses.log');
$acceptedResponses[$index] = json_decode($response->getBody()->getContents());
},
'rejected' => function ($reason, $index) use(&$rejectedResponses) {
EveLogHandler::messageLog($reason, 'eve_online_region_item_history_rejected_responses.log');
},
]);
$promise = $pool->promise();
$promise->wait();
$historyDetails = new HistoryDetails($acceptedResponses, $regionAndItem);
$historyDetails->createHistoryDetails();
return $historyDetails->getHistoryDetails();
}
我创建了一个请求数组,然后将其池化。这里通常有10,000个请求。
其中一个问题是被拒绝的部分:
'rejected' => function ($reason, $index) use(&$rejectedResponses) {
EveLogHandler::messageLog($reason, 'eve_online_region_item_history_rejected_responses.log');
},
在这里,我只是注销了被拒绝的消息,它返回为:
[2016-01-27 16:35:00] production.INFO: Message ["[object] (GuzzleHttp\\Exception\\ConnectException(code: 0): cURL error 52: Empty reply from server (see http://curl.haxx.se/libcurl/c/libcurl-errors.html) at /home/ccccc/test_site/vendor/guzzlehttp/guzzle/src/Handler/CurlFactory.php:186)"] []
[2016-01-27 16:35:57] production.INFO: Message ["[object] (GuzzleHttp\\Exception\\ConnectException(code: 0): cURL error 52: Empty reply from server (see http://curl.haxx.se/libcurl/c/libcurl-errors.html) at /home/ccccc/test_site/vendor/guzzlehttp/guzzle/src/Handler/CurlFactory.php:186)"] []
有很多这样的任务,因为可能有超过13个作业排队,每个任务发送10,000个请求,正如您看到的,我将它们汇集在一起,所以我一次发送10个请求。
此api的速率限制为每秒150次请求。所以我知道我没有打到150,至少我不应该打。
我要问你的问题是如何重新尝试被拒绝的请求?有什么方法可以说,在失败时,重试最多x次吗?口香糖有内置的吗?
发布于 2016-02-01 11:36:28
您正在接收的curl错误可能表明服务器/代理/防火墙速率限制了您;特别是当您的应用程序向其抛出10k请求时。错误本身(至少根据利伯尔表示您的应用程序没有收到响应)。
我相信您会寻找“重试中间件”或“速率限制中间件”。
https://stackoverflow.com/questions/35043493
复制