现在想爬取某个关键字下的所有商品的图片,例如关键字:电饭煲,大概要爬4400张图片。我试了一整天的pyspider,但是爬不了,请问用python还有其它方法可以做到吗?
闭关修行中......
Python PhantomJS selenium boleh menyelesaikan masalah andaRujuk artikel ini: http://blog.chinaunix.net/uid-22414998-id-3692113.html?page=3
Kod ujian:
#coding=utf-8 from selenium import webdriver driver = webdriver.PhantomJS() driver.get("https://s.taobao.com/search?q=iphone") datas = driver.find_elements_by_class_name('J_ItemPic') for _ in datas: print _.get_attribute('src')
Rujuk jawapan ini:
sarung perangkak python
Atau video pengajaran ini:
Bagaimana untuk menggunakan permintaan Python dan BeautifulSoup4 untuk melengkapkan perangkak Taobao
P.S. Adalah disyorkan untuk membaca lebih banyak artikel sebelum bertanya, mungkin jawapannya sudah ada!
Menggunakan beautifulsoup sangat mudah untuk dipilih.
Lihat pada mesej ralat
Berikut ialah perangkak imej Baidu: http://blog.csdn.net/qq_34844199/article/details/51468841,可以借鉴
Python PhantomJS selenium boleh menyelesaikan masalah anda
Rujuk artikel ini: http://blog.chinaunix.net/uid-22414998-id-3692113.html?page=3
Kod ujian:
Rujuk jawapan ini:
sarung perangkak python
Atau video pengajaran ini:
Bagaimana untuk menggunakan permintaan Python dan BeautifulSoup4 untuk melengkapkan perangkak Taobao
P.S. Adalah disyorkan untuk membaca lebih banyak artikel sebelum bertanya, mungkin jawapannya sudah ada!
Menggunakan beautifulsoup sangat mudah untuk dipilih.
Lihat pada mesej ralat
Berikut ialah perangkak imej Baidu: http://blog.csdn.net/qq_34844199/article/details/51468841,可以借鉴