python - 使用requests下载大文件,设置steam=True,如何确保文件被完整下载?
PHP中文网
PHP中文网 2017-04-18 09:27:20
0
2
786

我使用requests下载文件,有时候会在网络情况不好的情况下不能完整的下载文件,该如何确保文件被完整的下载?

条件1: 文件的响应头中并没有content-length,我无法知道文件具体的大小

下载代码如下

r = requests.get(url, stream=True) with open('test', 'wb') as fd: for chunk in r.iter_content(1024 * 100): fd.write(chunk)

网络问题不好重现,我测试的方法是,在本地使用python -m SimpleHTTPServer搭建服务端,然后用此代码下载大文件,然后手动关闭服务端,此代码并没有引发任何异常成功退出,下载的文件也是不完整的。

我希望这种不正常关闭连接能够触发异常处理,该如何做?

PHP中文网
PHP中文网

认证0级讲师

모든 응답 (2)
PHPzhong

分段下,下完再拼起来就好了

    左手右手慢动作

    只是验证下载文件完整性的话可以在循环结束后验证文件MD5值,不过实现要把源文件的MD5传到连接里,可以在工作目录建立一个文本文件存下当前目录所有文件的MD5值,再通过GET参数传到requests里,例如http://localhost/a.mp4?md5=xx...

      최신 다운로드
      더>
      웹 효과
      웹사이트 소스 코드
      웹사이트 자료
      프론트엔드 템플릿
      회사 소개 부인 성명 Sitemap
      PHP 중국어 웹사이트:공공복지 온라인 PHP 교육,PHP 학습자의 빠른 성장을 도와주세요!