如何设置PHP cURL下载的最大大小限制


How to set a maximum size limit to PHP cURL downloads?

PHP cURL下载有最大大小限制吗?即,当传输达到一定的文件限制时,cURL会退出吗?

curl_setopt($ch, CURLOPT_URL, $url);
curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, $timeout);
$data = curl_exec($ch);

它适用于下载远程图像的网站。我想确保cURL在达到一定限制时会停止。

此外,我的研究表明,getimagesize()下载图像,以返回其大小,因此这不是一个选项。

我有另一个答案,可以更好地解决这种情况,并将其留给后人

CURLOPT_WRITEFUNCTION对此有好处,但CURLOPT_PROGRESSFUNCTION是最好的

// We need progress updates to break the connection mid-way
curl_setopt($cURL_Handle, CURLOPT_BUFFERSIZE, 128); // more progress info
curl_setopt($cURL_Handle, CURLOPT_NOPROGRESS, false);
curl_setopt($cURL_Handle, CURLOPT_PROGRESSFUNCTION, function(
    $DownloadSize, $Downloaded, $UploadSize, $Uploaded
){
    // If $Downloaded exceeds 1KB, returning non-0 breaks the connection!
    return ($Downloaded > (1 * 1024)) ? 1 : 0;
});

请记住,即使PHP.net为CURLOPT_PROGRESSFUNCTION:状态^

一个接受五个参数的回调

我的本地测试只有四(4)个参数,因为第一个(句柄)不存在。

服务器不接受Range标头。你能做的最好的事情就是在收到比你想要的更多的数据后立即取消连接。示例:

<?php
$curl_url = 'http://steamcommunity.com/id/edgen?xml=1';
$curl_handle = curl_init($curl_url);
$data_string = "";
function write_function($handle, $data) {
global $data_string;
$data_string .= $data;
if (strlen($data_string) > 1000) {
    return 0;
}
else
    return strlen($data);
} 
curl_setopt ($curl_handle, CURLOPT_RETURNTRANSFER, 1);
curl_setopt ($curl_handle, CURLOPT_CONNECTTIMEOUT, 2);
curl_setopt ($curl_handle, CURLOPT_WRITEFUNCTION, 'write_function');
curl_exec($curl_handle);
echo $data_string;

也许更干净的是,您可以使用http包装器(如果使用curlwrappers编译,也会使用curl)。基本上,你会在一个循环中调用fread,然后当你得到比你想要的更多的数据时,在流上fclose。如果禁用了allow_url_fopen,您也可以使用传输流(使用fsockopen而不是fopen打开流并手动发送头)。

有。我想这是PHP内存限制。由于下载是在内存中完成的

CURLOPT_FILECURLOPT_WRITEHEADER^是您的朋友,因为它们允许您将cURL下载重新路由到流这允许您创建tmpfile()临时流stream_get_meta_data()为您提供文件路径)并下载到它们。并且直接下载到驱动器可以提高内存限制。

下载完成后,您可以阅读这些文件,并对它们执行您想要的操作。