php中提供了专门的file函数来读取文件，通过file函数可以一次性获取一个txt文件的行数：

  1. <?php
  2. $line = count(file($filepath));
  3. echo $line;
  4. ?>

但是file函数不适用于大文件，执行缓慢并且会造成严重的内存问题。


网上还有一种通过fopen函数以及while逐行统计的代码，如下：

  1. <?php
  2. line = 0 ;
  3. $fp = fopen($filepath , 'r') or die("open file failure!");
  4. if($fp){
  5. while(stream_get_line($fp,8192,"\n")){
  6.    $line++;
  7. }
  8. fclose($fp);
  9. }
  10. echo $line;
  11. ?>

这种方法在读取大文件行数时，同样面临着效率太慢的问题。


经过实践，我们采用以下方法可以超高效率的读取txt大文件行数，并且内存占用也很低

  1. <?php
  2. function count_line($file){
  3.   $fp=fopen($file, "r");
  4.   $i=0;
  5.   while(!feof($fp)) {
  6.    //每次读取2M
  7.    if($data=fread($fp,1024*1024*2)){
  8.    //计算读取到的行数
  9.    $num=substr_count($data,"\n");
  10.    $i+=$num;
  11.   }
  12. }
  13. fclose($fp);
  14. return $i;
  15. }
  16. ?>

通过多行统计，每次读取N个字节，然后再统计读取的行数累加。


测试情况,文件大小 3.14 GB


第1次:line: 13214810 , time:56.2779 s;


第2次:line: 13214810 , time:49.6678 s;

赏
相关评论(0)
您是不是忘了说点什么？

友情提示：垃圾评论一律封号...

还没有评论，快来抢沙发吧！