php读程序,php 读取大文件程序代码 -ag凯发k8国际
php 读取大文件与读取一般的文件是有些区别的,如果你的文件到了几百mb或gb这样可能普通的php读取文件会很慢或卡死了,下面我来介绍一下php 读取大文件技巧吧。
一般读取文件我们用fopen 或者 file_get_contents ,前者可以循环读取,后者可以一次性读取,但都是将文件内容一次性加载来操作。如果加载的文件特别大时,如几百m,上g时,这时性能就降下来了,那么php里有没有对大文件的处理函数或者类呢? 答案是:有的。
php真的越来越“面向对象”了,一些原有的基础的spl方法都开始陆续地实现出class了。
从 php 5.1.0 开始,spl 库增加了 splfileobject 与 splfileinfo 两个标准的文件操作类。splfileinfo 是从 php 5.1.2 开始实现的。
从字面意思理解看,可以看出 splfileobject 要比 splfileinfo 更为强大。
不错,splfileinfo 仅用于获取文件的一些属性信息,如文件大小、文件访问时间、文件修改时间、后缀名等值,而 splfileobject 是继承 splfileinfo 这些功能的。
代码如下
复制代码
/** 返回文件从x行到y行的内容(支持php5、php4)
* @param string $filename 文件名
* @param int $startline 开始的行数
* @param int $endline 结束的行数
* @return string
*/
function getfilelines($filename, $startline = 1, $endline=50, $method='rb') {
$content = array();
$count = $endline - $startline;
// 判断php版本(因为要用到splfileobject,php>=5.1.0)
if(version_compare(php_version, '5.1.0', '>=')){
$fp = new splfileobject($filename, $method);
$fp->seek($startline-1);// 转到第n行, seek方法参数从0开始计数
for($i = 0; $i <= $count; $i) {
$content[]=$fp->current();// current()获取当前行内容
$fp->next();// 下一行
}
}else{//php<5.1
$fp = fopen($filename, $method);
if(!$fp) return 'error:can not read file';
for ($i=1;$i
fgets($fp);
}
for($i;$i<=$endline; $i){
$content[]=fgets($fp);// 读取文件行内容
}
fclose($fp);
}
return array_filter($content); // array_filter过滤:false,null,''
}
ps: 上面都没加”读取到末尾的判断”:!$fp->eof() 或者 !feof($fp),加上这个判断影响效率,自己加上测试很多很多很多行的运行时间就晓得了,而且这里加上也完全没必要。
从上面的函数就可以看出来使用splfileobject比下面的fgets要快多了,特别是文件行数非常多、并且要取后面的内容的时候。fgets要两个循环才可以,并且要循环$endline次。
此方法花了不少功夫,测试了很多中写法,就是想得出效率最高的方法。哪位觉得有值得改进的欢迎赐教。
使用,返回35270行-35280行的内容:
代码如下
复制代码
echo '';
var_dump(getfilelines('test.php',35270,35280));
echo '';
再看一个实例
代码如下
复制代码
function readbigfile($filename, $count = 20, $tag = "rn") {
$content = "";//最终内容
$current = "";//当前读取内容寄存
$step= 1;//每次走多少字符
$taglen = strlen($tag);
$start = 0;//起始位置
$i = 0;//计数器
$handle = fopen($filename,'r ');//读写模式打开文件,指针指向文件起始位置
while($i < $count && !feof($handle)) {
fseek($handle, $start, seek_set);//指针设置在文件开头
$current = fread($handle,$step);//读取文件
$content .= $current;//组合字符串
$start = $step;//依据步长向前移动
//依据分隔符的长度截取字符串最后免得几个字符
$substrtag = substr($content, -$taglen);
if ($substrtag == $tag) { //判断是否为判断是否是换行或其他分隔符
$i ;
$content .= "
";
}
}
//关闭文件
fclose($handle);
//返回结果
return $content;
}
$filename = "csdn.sql";//需要读取的文件
$tag = "n";//行分隔符 注意这里必须用双引号
$count = 100;//读取行数
$data = readbigfile($filename,$count,$tag);
echo $data;
注意:通过使用php的fseek和fread相结合,即可做到随意读取文件中的某一部份数据,关于函数传入的变量$tag的值,根据系统不一样,传入的值也是有区别的:windows用”rn”,linux/unix用”n”,mac os用”r”。
总结
以上是ag凯发k8国际为你收集整理的php读程序,php 读取大文件程序代码的全部内容,希望文章能够帮你解决所遇到的问题。
- 上一篇: php文件utf8编码转gbk编码格式,
- 下一篇: php中的thumb函数,phpcms