高级爬虫面试题测试题 v1.3

Python Web高级爬虫工程师测试题

(请本文件发送到: SpiderTestQuestion@163.com 并附带简历)

1、 用yield写一个斐波那契数列的生成器函数。

2、 放一段scrapy项目parse函数的代码(解析列表页，使用分组提取，解析字段)。

3、 遇到过哪些反爬策略，如果突破？

4、 scrapy各个模块启动顺序(Spider, Middleware, Pipeline的加载、实例化、Open、Close的顺序)。

5、 使用过哪些抓包工具，各有什么优点。

6、 有没有自己博客，贴一下网址。

7、 字体加密反爬机制及分类。

8、 遇到过那些验证码，怎么突破的，不使用打码平台有办法吗？

9、 简述了解的采集任务管理平台，有何不同，有修改过源码吗？

10、 遇到过哪些难度大的网站，卡在哪了，认为反爬的天花板网站/软件有哪些。

11、 selenium/splash/puppeteer(谷歌)/playwright(微软)/web scraper(插件) 优劣势。

12、 js/小程序/apk的Hook 原理。

13、 遇到过那些防御系统，极验验证码/易盾/观镜防御系统反爬策略优劣。

14、 简述绕过小程序动态调试中用户验证的方式。

15、 还有哪些问题是没问到的，又是自己的优势优点，可自行作答

附件：高级爬虫面试测试题 v1.3