Python
Python3
Scrapy
クローラー
Python2

scrapyのJSON出力を日本語にする方法

More than 1 year has passed since last update.

scrapyで日本語を含むページをクロールすると、その結果のJSONに\uXXXXという文字列が大量に埋め込まれてしまいます。
これを防ぐためには、settings.pyに以下のように書きましょう。

FEED_EXPORT_ENCODING='utf-8'

参考
https://doc.scrapy.org/en/latest/topics/feed-exports.html#feed-export-encoding