手记

scrapy 爬取数据保存为本地JSON文件 - 编码问题

保存 json 文件 命令行启动如下:

scrapy crawl 程序名 -o item.json

上面保存的json文件 中文内容 会是 二进制字符,使用如下命名进行编码:

scrapy crawl 程序名 -o item.json -sscrapy crawl 程序名 -o item.json -s FEED_EXPORT_ENCODING=UTF-8

也可以在settings.py 文件中设置添加

FEED_EXPORT_ENCODING = 'UTF8'

此时不需要在命令行中添加FEED_EXPORT_ENCODING选项了。

2人推荐
随时随地看视频
慕课网APP