上传到Amazon S3与Amazon PHP SDK 2 - MD5错误在同一文件,每次


Upload to Amazon S3 with Amazon PHP SDK 2 - MD5 error on same file, everytime

我有一个PHP应用程序,可以上传视频(从小的- 1MB -到大的- 400MB)。

一切正常,除了一些特殊文件。

这些文件总是显示MD5校验和错误:

AWS错误码:BadDigest,状态码:400,AWS请求ID: 89BBC1D79A4492A7, AWS错误类型:客户端,AWS错误消息:您指定的Content-MD5与我们收到的不匹配。

我验证了MD5,它真的不mach,但我不知道为什么!

如果是损坏错误,返回的S3 MD5会有所不同,但总是相同的。

在我的本地机器(Mac)和服务器(Ubuntu)上,MD5是:

9131 ee88a194b555d0a3519f67294f31

在Amazon中是:

8 e6789baf9c5d434003a5443d30143fa

上传的代码是这样的:

    try
    {
        $start = (float) array_sum(explode(' ',microtime()));
        $save_path = "/tmp/$video[quality]/$video[video_id].mp4";
        $db_path = "$video[channel]/$video[quality]/$video[video_id].mp4";
        $bytes = number_format(filesize($save_path) / 1048576, 2) . ' MB';
        System_Daemon::info(($i + 1) . "/$num_of_videos - started upload of $video[channel] - $video[video_id] with $bytes");
        $s3 = Aws'S3'S3Client::factory(
                        array(
                            'key' => 'MY KEY',
                            'secret' => 'MY SECRET',
                            'region' => Region::US_EAST_1
                        )
        );

        $results = $s3->putObject(array(
            'Bucket' => 'media.tubelivery.com',
            'Key' => $db_path,
            'Body' => fopen($save_path, 'r'),
            'ACL' => Aws'S3'Enum'CannedAcl::PUBLIC_READ
                ));
        //Delete the original file
        unlink($save_path);
        clearstatcache($save_path);
        //Change the video state to 0
        update_video_state_to_uploaded_to_S3($video['id']);
        $end = (float) array_sum(explode(' ',microtime()));
        $time = sprintf("%.4f", ($end - $start)) . " sec";
        System_Daemon::info("uploaded video " . ($i + 1) . " to $db_path in $time");
    }
    catch (Aws'S3'Exception'S3Exception $e)
    {
        System_Daemon::err("ERROR uploading $video[video_id].mp4 to S3");
        foreach($results as $key => $result)
        {
            System_Daemon::err("$key => $result");
        }
        $save_path = "/tmp/$video[quality]/$video[video_id].mp4";   
        clearstatcache($save_path);
        System_Daemon::err("ERROR: $e");
    }

这是确切的日志:

[Mar 13 02:35:53]      err: ERROR uploading 4XwKKMlGibo.mp4 to S3 [l:145]
[Mar 13 02:35:53]      err: Expiration =>  [l:148]
[Mar 13 02:35:53]      err: ServerSideEncryption =>  [l:148]
[Mar 13 02:35:53]      err: ETag => "7f65e3f892d96b9703d411219e2b868a" [l:148]
[Mar 13 02:35:53]      err: VersionId =>  [l:148]
[Mar 13 02:35:53]      err: RequestId => 80821CC621946236 [l:148]
[Mar 13 02:35:53]      err: ERROR: Aws'S3'Exception'BadDigestException: 
                            AWS Error Code: BadDigest, 
                            Status Code: 400, 
                            AWS Request ID: 7C4B4834C6235D1A, 
                            AWS Error Type: client, 
                            AWS Error Message: The Content-MD5 you specified did not match what we received. [l:152]

任何想法?我做错了什么?

我正在使用S3进行大型数据传输,并且出现了完全相同的错误消息。事实证明,我们使用的库对超过一定大小的文件使用了多部分上传功能。我不确定PHP SDK是否做同样的事情,但显然,多部分对象存储在S3中的方式导致生成的哈希值与在本地机器上生成的哈希值不同。

我看到这个问题很古老,但想让你知道你并不孤单!