Blogger Information
Blog 1
fans 0
comment 1
visits 572
Latest Downloads
More>
Web Effects
Website Source Code
Website Materials
Front End Template
【面试题】高级爬虫面试测试题 v1.3
鸢公子
Original
572 people have browsed it

Python Web高级爬虫工程师测试题
(请本文件发送到:SpiderTestQuestion@163.com并附带简历)

1、 用yield写一个斐波那契数列的生成器函数。

2、 放一段scrapy项目parse函数的代码(解析列表页,使用分组提取,解析字段)。

3、 遇到过哪些反爬策略,如果突破?

4、 scrapy各个模块启动顺序(Spider, Middleware, Pipeline的加载、实例化、Open、Close的顺序)。

5、 使用过哪些抓包工具,各有什么优点。

6、 有没有自己博客,贴一下网址。

7、 字体加密反爬机制及分类。

8、 遇到过那些验证码,怎么突破的,不使用打码平台有办法吗?

9、 简述了解的采集任务管理平台,有何不同,有修改过源码吗?

10、 遇到过哪些难度大的网站,卡在哪了,认为反爬的天花板网站/软件有哪些。

11、 selenium/splash/puppeteer(谷歌)/playwright(微软)/web scraper(插件) 优劣势。

12、 js/小程序/apk的Hook 原理。

13、 遇到过那些防御系统,极验验证码/易盾/观镜防御系统反爬策略优劣。

14、 简述绕过小程序动态调试中用户验证的方式。

15、 还有哪些问题是没问到的,又是自己的优势优点,可自行作答

附件:高级爬虫面试测试题 v1.3

Statement of this Website
The copyright of this blog article belongs to the blogger. Please specify the address when reprinting! If there is any infringement or violation of the law, please contact admin@php.cn Report processing!
All comments Speak rationally on civilized internet, please comply withNews Comment Service Agreement
1 comments
鸢公子 2021-10-15 15:01:28
走过路过别错过,现在正在做汇总,有什么想法畅所欲言,每一个想法我都会回复的! (点赞收藏评论后可以快速找到这里)
1 floor
Author's latest blog post
About us Disclaimer Sitemap
php.cn:Public welfare online PHP training,Help PHP learners grow quickly!