scrapy保存csv文件有空行的解决方案

比如现在我有一个名为test的爬虫，运行爬虫后将结果保存到test.csv文件

默认情况下，我执行scrapy crawl test -o test.csv ，得到的结果可能就是下面这种情况，每两行中间都会有一个空行

解决方法是修改scrapy的源码，具体就是 io.TextIOWrapper 里面添加一行newline=‘’

找到这个源码具体方法：

方法一：找到python安装路径里面scrapy文件夹，exporters.py文件，使用notepad++等文本编辑器打开

然后修改如下，保存即可。

方法二：使用pycharm来修改源码

随便找个文件，然后导入CsvItemExporter

按住ctrl，同时点击CsvItemExporter字样，跳转到源码。按照之前的方法修改就可以了。