内射老阿姨1区2区3区4区_久久精品人人做人人爽电影蜜月_久久国产精品亚洲77777_99精品又大又爽又粗少妇毛片

scrapy導(dǎo)出文件時(shí)出現(xiàn)中文亂碼怎么辦-創(chuàng)新互聯(lián)

scrapy導(dǎo)出文件時(shí)出現(xiàn)中文亂碼怎么辦?相信很多沒有經(jīng)驗(yàn)的人對(duì)此束手無策,這篇文章總結(jié)了scrapy導(dǎo)出文件時(shí)出現(xiàn)中文亂碼的解決辦法,通過這篇文章希望你能解決這個(gè)問題。

從事四川雅安電信機(jī)房,服務(wù)器租用,云主機(jī),虛擬空間,域名注冊(cè),CDN,網(wǎng)絡(luò)代維等服務(wù)。

背景:

使用scrapy crawl spidername -o filename.json命令執(zhí)行爬蟲,并將item寫入文件,發(fā)現(xiàn)中文亂碼,比如這樣子:
scrapy導(dǎo)出文件時(shí)出現(xiàn)中文亂碼怎么辦

解決方法

第一種方法:

使用scrapy命令導(dǎo)出時(shí)指定編碼格式

scrapy crawl baidu -o baidu_med.json -s FEED_EXPORT_ENCODING=utf-8
第二種方法:

借助Pipeline將item寫入到文件
1.修改pipelines.py,添加:

import json
import codecs

class YiyaoPipeline(object):
   def __init__(self):
     self.file = codecs.open('item.json', 'wb', encoding='utf-8')

   def process_item(self, item, spider):
     line = json.dumps(dict(item), ensure_ascii=False) + '\n'
     self.file.write(line)
     return item

2.修改settings.py,激活pipeline:

ITEM_PIPELINES = {
  'yiyao.pipelines.YiyaoPipeline': 300,
}

注意:settings.py默認(rèn)有ITEM_PIPELINES配置,只是注銷掉了。
3.使用scrapy命令導(dǎo)出時(shí),直接執(zhí)行:

scrapy crawl baidu

看完這篇文章,你能夠獨(dú)立解決scrapy導(dǎo)出文件時(shí)出現(xiàn)中文亂碼的問題了嗎?如果還想學(xué)到更多技能或想了解更多相關(guān)內(nèi)容,歡迎關(guān)注創(chuàng)新互聯(lián)行業(yè)資訊頻道,感謝各位的閱讀。

另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn,海內(nèi)外云服務(wù)器15元起步,三天無理由+7*72小時(shí)售后在線,公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性價(jià)比高”等特點(diǎn)與優(yōu)勢(shì),專為企業(yè)上云打造定制,能夠滿足用戶豐富、多元化的應(yīng)用場(chǎng)景需求。

標(biāo)題名稱:scrapy導(dǎo)出文件時(shí)出現(xiàn)中文亂碼怎么辦-創(chuàng)新互聯(lián)
轉(zhuǎn)載源于:http://www.rwnh.cn/article16/dpspgg.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供電子商務(wù)、網(wǎng)站收錄、標(biāo)簽優(yōu)化、靜態(tài)網(wǎng)站、關(guān)鍵詞優(yōu)化、品牌網(wǎng)站設(shè)計(jì)

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)

小程序開發(fā)
都江堰市| 彰武县| 攀枝花市| 望谟县| 延安市| 乌兰浩特市| 郧西县| 鄂尔多斯市| 资阳市| 滦平县| 佛学| 永州市| 库尔勒市| 广丰县| 兴业县| 山阴县| 石棉县| 齐齐哈尔市| 英超| 开封县| 中阳县| 三台县| 兖州市| 攀枝花市| 囊谦县| 安顺市| 东丽区| 海口市| 曲阳县| 文昌市| 平江县| 绵竹市| 英山县| 岳阳县| 什邡市| 东乌珠穆沁旗| 佛冈县| 安远县| 榆林市| 土默特左旗| 静安区|