pyspider 有没有类似scrapy的文件图片下载功能 或者有什么插件可以实现这个功能?
大家讲道理
大家讲道理 2016-11-12 11:22:38
0
2
634

pyspider 有没有类似scrapy的文件图片下载功能 或者有什么插件可以实现这个功能?现在正在做scrapy到pyspider的迁移

大家讲道理
大家讲道理

光阴似箭催人老,日月如移越少年。

membalas semua (2)
代言

和网页一样 self.crawl(image_url, callback=self.image_save) 提交抓取,写一个 image_save 将 response.content 写到你需要的地方即可。

如果是大规模图片下载,建议单独写一个下载器。


    代言

    好像没有这个功能图片用 urllib 的 urlretrieve 实现下载到本地?

      Muat turun terkini
      Lagi>
      kesan web
      Kod sumber laman web
      Bahan laman web
      Templat hujung hadapan
      Tentang kita Penafian Sitemap
      Laman web PHP Cina:Latihan PHP dalam talian kebajikan awam,Bantu pelajar PHP berkembang dengan cepat!