python讀取幾個G的csv文件方法
更新時間：2019年01月07日 10:44:25 作者：RobbenEmi
今天小編就為大家分享一篇python讀取幾個G的csv文件方法，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧
如下所示：
import pandas as pd
file = pd.read_csv('file.csv',iterator=True)
while True:
chunk = file.get_chunk(1000)
print(chunk.head(10))
print(chunk.tail(10))
以上這篇python讀取幾個G的csv文件方法就是小編分享給大家的全部內(nèi)容了，希望能給大家一個參考，也希望大家多多支持腳本之家。
相關(guān)文章
這篇文章主要介紹了Python解析json代碼實例解析,文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值,需要的朋友可以參考下2019-11-11
這篇文章主要介紹了Python數(shù)據(jù)類型字典dictionary，字典是另一種可變?nèi)萜髂Ｐ?，且可存儲任意類型對象。本篇文字將詳細講述字典的常用方法，需要的可以參考一下2022-03-03
Python爬蟲過程解析之多線程獲取小米應用商店數(shù)據(jù)
這篇文章主要介紹了Python爬蟲過程解析之多線程獲取小米應用商店數(shù)據(jù),本文給大家介紹的非常詳細，對大家的學習或工作具有一定的參考借鑒價值，需要的朋友可以參考下2020-11-11
python3使用pandas獲取股票數(shù)據(jù)的方法
今天小編就為大家分享一篇python3使用pandas獲取股票數(shù)據(jù)的方法，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧2018-12-12
這篇文章主要介紹了Python類的繼承和多態(tài)代碼詳解，具有一定借鑒價值,需要的朋友可以參考下2017-12-12
python連接sql?server數(shù)據(jù)庫的方法實戰(zhàn)
當我們用Python來編寫網(wǎng)站,必須要能夠通過python操作數(shù)據(jù)庫,下面這篇文章主要給大家介紹了關(guān)于python連接sql?server數(shù)據(jù)庫的相關(guān)資料,文中通過圖文介紹的非常詳細,需要的朋友可以參考下2022-08-08
Python對接PicGo實現(xiàn)圖片自動加水印并上傳操作示例
這篇文章主要為大家介紹了Python對接PicGo實現(xiàn)圖片自動加水印并上傳的操作示例，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進步2021-10-10
在現(xiàn)代網(wǎng)絡應用和開發(fā)中,使用Cookies是一種常見的方式,它們用于存儲用戶信息、會話狀態(tài)等,本文為大家整理了多種Python獲取瀏覽器Cookies的方法,希望對大家有所幫助2023-12-12
這篇文章主要為大家詳細介紹了python實現(xiàn)購物車小程序，文中示例代碼介紹的非常詳細，具有一定的參考價值，感興趣的小伙伴們可以參考一下2022-02-02
python sklearn中tsne算法降維結(jié)果不一致問題的解決方法
最近在做一個文本聚類的分析,在對文本數(shù)據(jù)embedding后,想著看下數(shù)據(jù)的分布,于是用sklearn的TSNE算法來降維embedding后的數(shù)據(jù)結(jié)果,當在多次執(zhí)行后,竟發(fā)現(xiàn)TSNE的結(jié)果竟然變了,而且每次都不一樣,所以本文就給大家講講如何解決sklearn中tsne算法降維結(jié)果不一致的問題2023-10-10