学习的课本为<python网络数据采集>,大部分代码来此此书. 网络爬虫爬取数据首先就是要有爬取的权限,没有爬取的权限再好的代码也不能运行.所以首先要伪装自己的爬虫,让爬虫不像爬虫而是像人一样访问网页.废话不多说开始伪装. 1.修改请求头 这里要用到python的requests的模块,首相介绍一下http请求头,它就是你每次在访问网页时,向服务器传输的一组属性和配置信息.下面有七个字段被大多数浏览器用来初始化网络请求. 属性 内容 Host https://www.google.com/ C…