高级爬虫面试题测试题 v1.3
Python Web高级爬虫工程师测试题
(请本文件发送到: SpiderTestQuestion@163.com 并附带简历)
1、 用yield写一个斐波那契数列的生成器函数。
2、 放一段scrapy项目parse函数的代码(解析列表页,使用分组提取,解析字段)。
3、 遇到过哪些反爬策略,如果突破?
4、 scrapy各个模块启动顺序(Spider, Middleware, Pipeline的加载、实例化、Open、Close的顺序)。
5、 使用过哪些抓包工具,各有什么优点。
6、 有没有自己博客,贴一下网址。
7、 字体加密反爬机制及分类。
8、 遇到过那些验证码,怎么突破的,不使用打码平台有办法吗?
9、 简述了解的采集任务管理平台,有何不同,有修改过源码吗?
10、 遇到过哪些难度大的网站,卡在哪了,认为反爬的天花板网站/软件有哪些。
11、 selenium/splash/puppeteer(谷歌)/playwright(微软)/web scraper(插件) 优劣势。
12、 js/小程序/apk的Hook 原理。
13、 遇到过那些防御系统,极验验证码/易盾/观镜防御系统反爬策略优劣。
14、 简述绕过小程序动态调试中用户验证的方式。
15、 还有哪些问题是没问到的,又是自己的优势优点,可自行作答
附件:高级爬虫面试测试题 v1.3