python - 爬取淘宝的商品图片
阿神
阿神 2017-04-17 17:53:03
0
5
522

现在想爬取某个关键字下的所有商品的图片,例如关键字:电饭煲,大概要爬4400张图片。我试了一整天的pyspider,但是爬不了,请问用python还有其它方法可以做到吗?

阿神
阿神

闭关修行中......

모든 응답(5)
洪涛

Python+PhantomJS+selenium으로 문제를 해결할 수 있습니다
이 문서를 참조하세요: http://blog.chinaunix.net/uid-22414998-id-3692113.html?page=3

테스트 코드:

으아아아
迷茫

이 답변을 참조하세요:

파이썬 크롤러 케이스

또는 다음 지침 비디오:

Python 요청과 BeautifulSoup4를 사용하여 Taobao 크롤러를 완성하는 방법은 무엇입니까?


P.S. 질문하기 전에 더 많은 기사를 읽어보는 것이 좋습니다. 어쩌면 답이 이미 나와 있을 수도 있습니다!

巴扎黑

Beautifulsoup을 사용하면 선택이 매우 편리합니다.

迷茫

오류 메시지를 보면 항상 캡쳐에 실패하는 이유가 있습니다. IP가 차단되었는지, 캡쳐 로직에 문제가 있는지 확인하세요.
Python 온라인 컴파일 및 실행

左手右手慢动作

다음은 Baidu 이미지 크롤러입니다. http://blog.csdn.net/qq_34844199/article/details/51468841에서 배울 수 있습니다.

최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿