php筆記之:有規(guī)律大文件的讀取與寫入的分析
這幾天在做一個(gè)東西.研究PHP讀取行數(shù)較多的文件(大概上百萬行).考慮到效率問題.進(jìn)行了簡(jiǎn)單的研究.總結(jié)如下
第一條.file()函數(shù)的效率問題.
file()函數(shù)的效率很底下 如果是有規(guī)律的文件.比如每行一條相應(yīng)數(shù)據(jù).那么盡量不要是用file()函數(shù)
可以使用file_get_contents()然后用explode切割.這樣效率會(huì)快三分之一
舉個(gè)例子:
文件樣式如下:
11111\n
22222\n
33333\n
44444\n
55555\n
.....\n
nnnnnnnnnnn\n
如果用file($file)讀入的話.耗時(shí)很長(zhǎng).
可以用如下方法explode("\n",file_get_contents($file));效率會(huì)快很多.
第二條,數(shù)組的遍歷方式.
數(shù)據(jù)已經(jīng)被讀入數(shù)組了.下面就是遍歷了.
我所需要的是確定數(shù)組中有無一個(gè)值的存在,比如說44444是否在數(shù)組中.首先想到的是in_array()
不過實(shí)驗(yàn)了下發(fā)現(xiàn)效率很低下.于是參考別人的代碼想到一個(gè)辦法.把數(shù)組翻轉(zhuǎn)過來.變成所有值都為1.原來的值變成了索引.那么只要我在if里寫($arr[索引]==1)去判斷.果然效率高出很多.
在數(shù)組的遍歷過程中.如果數(shù)組個(gè)頭非常大,并且數(shù)組中的數(shù)據(jù)并不是全能用到的話,最好把用來遍歷的數(shù)組抽出來.這樣會(huì)提高很多效率.
第三條,數(shù)組的存儲(chǔ).
把計(jì)算過后的數(shù)據(jù)保存起來.存在一個(gè)文件中.考慮了三種方法.一種是直接寫成php文件.一種是serialize,一種是json串.
第一種方式
直接寫入文件<?php 連接var_export($var)連接";"連接?>保存成PHP
需要的時(shí)候直接require進(jìn)來.
第二種方式.把變量serialize然后file_put_contents()進(jìn)入文件.使用的時(shí)候unserialize就ok.
第三種方式和第二種類似.只不過寫成了json串.
經(jīng)過測(cè)試.發(fā)現(xiàn)第二種效率最高.第三種其次.和第二種效率不相上下.第一種最慢.和我預(yù)想的差距很大.真是大跌眼鏡.
相關(guān)文章
Zend Framework入門教程之Zend_Session會(huì)話操作詳解
這篇文章主要介紹了Zend Framework入門教程之Zend_Session會(huì)話操作,結(jié)合實(shí)例形式詳細(xì)分析了Zend_Session會(huì)話操作的具體使用技巧,需要的朋友可以參考下2016-12-12無需數(shù)據(jù)庫在線投票調(diào)查php代碼
這篇文章主要為大家詳細(xì)介紹了無需數(shù)據(jù)庫在線投票調(diào)查php代碼2016-07-07Laravel5.1 框架控制器基礎(chǔ)用法實(shí)例分析
這篇文章主要介紹了Laravel5.1 框架控制器基礎(chǔ)用法,結(jié)合實(shí)例形式分析了laravel5.1框架控制器的基本原理、定義與使用方法,需要的朋友可以參考下2020-01-01PHP+iframe圖片上傳實(shí)現(xiàn)即時(shí)刷新效果
下面小編就為大家?guī)硪黄狿HP+iframe圖片上傳實(shí)現(xiàn)即時(shí)刷新效果。小編覺得挺不錯(cuò)的,現(xiàn)在就分享給大家,也給大家做個(gè)參考。一起跟隨小編過來看看吧2016-11-11Yii2實(shí)現(xiàn)ActiveForm ajax提交
這篇文章主要 為大家詳細(xì)介紹了Yii2實(shí)現(xiàn)ActiveForm ajax提交的相關(guān)資料,具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2017-05-05phpstudy2020搭建站點(diǎn)的實(shí)現(xiàn)示例
這篇文章主要介紹了phpstudy2020搭建站點(diǎn)的實(shí)現(xiàn)示例,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2020-10-10python進(jìn)程與線程小結(jié)實(shí)例分析
本文通過實(shí)例代碼分析了python進(jìn)程與線程知識(shí)小結(jié),非常不錯(cuò),具有一定的參考借鑒價(jià)值,需要的朋友參考下吧2018-11-11WordPress后臺(tái)中實(shí)現(xiàn)圖片上傳功能的實(shí)例講解
這篇文章主要介紹了WordPress后臺(tái)中實(shí)現(xiàn)圖片上傳功能的實(shí)例講解,包括多個(gè)圖片上傳表單功能的實(shí)現(xiàn),需要的朋友可以參考下2016-01-01