PHP读取大文件

最近公司有个job，分析公司App的启动次数，本来以为api的请求信息是存储在DB中，So Easy，没想到是存储在log文件。

看这几百G的log（按天存储），php读起来特别的吃力，综合网上各路大神的代码，最后筛选出，下面的读取算是速度最快的，特此记录。

函数笔记

<?php
/**
 * 返回文件行段的内容
 * @param string $filename
 * @param int $startLine
 * @param int $endLine
 * @param string $method
 * @return string
 */
function getFileLines($filename, $startLine = 1, $endLine = 200, $method = 'rb') {
    $content = array();
    $count = $endLine - $startLine;
    // 判断php版本（因为要用到SplFileObject，PHP>=5.1.0）
    if (version_compare(PHP_VERSION, '5.1.0', '>=')) {
        $fp = new SplFileObject($filename, $method);
        // 转到第N行, seek方法参数从0开始计数
        $fp->seek($startLine - 1);
        for ($i = 0; $i <= $count; ++$i) {
            // current()获取当前行内容
            $content[] = $fp->current();
            // 下一行
            $fp->next();
        }
    } else {
        $fp = fopen($filename, $method);
        if (!$fp) {
            return 'error:can not read file';
        }
        // 跳过前$startLine行
        for ($i = 1; $i < $startLine; ++$i) {
            fgets($fp);
        }
        for ($i; $i <= $endLine; ++$i) {
            // 读取文件行内容
            $content[] = fgets($fp);
        }
        fclose($fp);
    }
    // array_filter过滤：false,null,''
    return array_filter($content);
}

/**
 * 返回文件的行数
 * @param string $filename
 * @return int
 */
function getFileLineCnt($filename) {
    $line = 0; //初始化行数
    //打开文件
    $fp = fopen($filename, 'rb') or die("open file failure!");
    if ($fp) {
        //获取文件的一行内容，注意：需要php5才支持该函数；
        while (stream_get_line($fp, 8192, "\n")) {
            $line++;
        }
        fclose($fp); //关闭文件
    }
    //返回行数；
    return $line;
}

备注：转载请注明出处！！！