欢迎光临
我们一直在努力

php高效统计txt大文件行数函数

php中提供了专门的file函数来读取文件,通过file函数可以一次性获取一个txt文件的行数:

  <?  $line = count(file($filepath));  echo $line;  ?>

但是file函数不适用于大文件,执行缓慢并且会造成严重的内存问题。

网上还有一种通过fopen函数以及while逐行统计的代码,如下:

  <?  line = 0 ;  $fp = fopen($filepath , 'r') or die("open file failure!");  if($fp){  while(stream_get_line($fp,8192,"n")){     $line++;  }  fclose($fp);  }  echo $line;  ?>

这种方法在读取大文件行数时,同样面临着效率太慢的问题。

经过实践,我们采用以下方法可以超高效率的读取txt大文件行数,并且内存占用也很低。

  <?  function count_line($file){    $fp=fopen($file, "r");    $i=0;    while(!feof($fp)) {     //每次读取2M     if($data=fread($fp,1024*1024*2)){     //计算读取到的行数     $num=substr_count($data,"n");     $i+=$num;    }  }  fclose($fp);  return $i;  }  ?>

通过多行统计,每次读取N个字节,然后再统计读取的行数累加。

测试情况,文件大小 3.14 GB

第1次:line: 13214810 , time:56.2779 s;

第2次:line: 13214810 , time:49.6678 s;

赞(0)
版权声明:本文采用知识共享 署名4.0国际许可协议 [BY-NC-SA] 进行授权
文章名称:《php高效统计txt大文件行数函数》
文章链接:https://www.ruiwuer.com/240.html
本站资源仅供个人学习交流,请于下载后24小时内删除,不允许用于商业用途,否则法律问题自行承担。

登录

找回密码

注册