亚洲乱码中文字幕综合,中国熟女仑乱hd,亚洲精品乱拍国产一区二区三区,一本大道卡一卡二卡三乱码全集资源,又粗又黄又硬又爽的免费视频

Pycharm打印大數(shù)據(jù)文件顯示不全的解決方法

 更新時間:2024年03月28日 11:46:03   作者:沙振宇  
這篇文章主要介紹了Pycharm打印大數(shù)據(jù)文件顯示不全的解決方法,昨晚寫了個小爬蟲,簡單分析下發(fā)現(xiàn)可以修改請求的url,直接獲取所有目標(biāo)的數(shù)據(jù),想先打印在控制臺看看,發(fā)現(xiàn)打印的數(shù)據(jù)不全,所以本文記錄了一下解決方法,需要的朋友可以參考下

前言

昨晚寫了個小爬蟲,簡單分析下發(fā)現(xiàn)可以修改請求的url,直接獲取所有目標(biāo)的數(shù)據(jù)。想先打印在控制臺看看,發(fā)現(xiàn)打印的數(shù)據(jù)不全,一開始還以為被反爬蟲了,獲取的數(shù)據(jù)本身不全,后來將數(shù)據(jù)直接保存JSON文件(3兆多大小),用Ubuntu文檔編輯器打不開(直接卡死),用vim打開發(fā)現(xiàn)數(shù)據(jù)完整(說明爬蟲獲取的數(shù)據(jù)本身沒毛?。?,再在Pycharm用Python打開發(fā)現(xiàn)提示文件過大,打印在控制臺也還是顯示不全。

在這里插入圖片描述

在這里插入圖片描述

正文

原來Pycharm IDEA對能關(guān)聯(lián)的文件大小做了限制,主要是為了保護(hù)內(nèi)存,默認(rèn)值為2500kb,這對爬蟲用戶來說相當(dāng)不友好,但時安裝軟件的時候也不提醒下?

在Pycharm菜單找到Edit Custom Properties…

在這里插入圖片描述

追加以下字段

idea.max.intellisense.filesize = 20000
idea.max.content.load.filesize = 20000
idea.cycle.buffer.size = 20000

其中20000代表限制大小為20000kb(暫時夠用),可自行修改

在這里插入圖片描述

重啟Pycharm

在這里插入圖片描述

以上就是Pycharm打印大數(shù)據(jù)文件顯示不全的解決方法的詳細(xì)內(nèi)容,更多關(guān)于Pycharm打印數(shù)據(jù)顯示不全的資料請關(guān)注腳本之家其它相關(guān)文章!

相關(guān)文章

最新評論