php逐行写入

怎样用PHP逐行读取数G的大文件最有效率且不会搞爆内存

1、如果你的文件不大，就应该使用file，把所有文件内容读入数组，对数组进行处理（+1），然后写会文件。

2、首先删除多余换行，保证一行就是一条数据。然后用逗号分隔每个字段，删除掉xxxxx。最后用数据库管理工具倒入。要是用php程序，你调用一下接口倒入也很简单了。其实你最好给出6条数据的例子。

3、必须大于CVS文件内最长的一行。在PHP5中该参数是可选的。如果忽略（在PHP0.4以后的版本中设为0）该参数的话，那么长度就没有限制，不过可能会影响执行效率。

4、foreach($fileas&$line)echo$line.这个更方便，file()直接把文本按行转换成数组fgets如果没指定第二参数，将直接读取到缓存结束为止，其实它不以换行来循环的，它的第二参数也是限制每次读取的字符个数而已。

5、对于任何一个网站肯定是少不了下载功能，常见的下载功能有图片、视频、Excel表格，如果文件比较小的话，那么不会遇到任何的问题，但是当文件信息而超过了PHP的最大内存，那么在这个时候它就会有的内存溢出的问题。

前面硬件都过关了，但程序也要加强了，一下上传500M是哪种语言都不能实现的，唯一解决方案，文件切割，如迅雷下载原理一样（采用续点上传），分成若干小块，然后全部上传完毕以后，再进行文件合成。

不用说，还得找PHP配置文件php.ini的麻烦：）打开php.ini，首先找到；；FileUploads；；区域，有影响文件上传的以下几个参数：file_uploads=on；是否允许通过HTTP上传文件的开关。

_FILES[myFile][size]已上传文件的大小，单位为字节。_FILES[myFile][tmp_name]文件被上传后在服务端储存的临时文件名，一般是系统默认。

分片上传的原理就是通过切割上传文件，然后在浏览器的头部通过etag来进行划分文件传输，服务器端接收到文件片段和分割起始符之后，进行拼接文件，最后合成一个大文件。

③ php可以遍历一个txt文件行么、就是一行一行地遍历

$handler=fopen('test6.txt','r');//打开文件

while(!feof($handler)){
$m[]=fgets($handler,4096);//fgets逐行读取，4096最大长度，默认为1024
}

fclose($handler);//关闭文件

//输出文件
echo'<pre>';
print_r($m);
echo'</pre>';

④ PHP怎么运行EXEC文件

在PHP中调用外部命令，可以用如下三种方法来实现：

1、用PHP提供的专门函数

（1）PHP提供共了3个专门的执行外部命令的函数：system()，exec()，passthru(）。

（2）system() 原型：string system (string command [, int return_var])

（3）system()函数很其它语言中的差不多，它执行给定的命令，输出和返回结果。第二个参数旦宴闷是可选的，用来得到命令执行后的状态码。

2、例子：模弯

代码如下:

<?php

system("/usr/local/bin/webalizer/webalizer");
?>

exec()

（1）原型：string exec (string command [, string array [, int return_var]]) exec

（2）()函数与system()类似，也执行给定的命令，但不输出结果，而是返回结果的最后一行。虽然它只返回命令结果的最后一行，但用第二个参数array 可以得到完整的结果，方法是把结果逐行追加到array的结尾处。祥高所以如果array不是空的，在调用之前最好用unset()最它清掉。只有指定了第二 个参数时，才可以用第三个参数，用来取得命令执行的状态码。

⑤ PHP 如何读取大文件

作为 PHP 开发者，衡量成功的唯一方法是：评估优化前后的表现。我们需要关注的指标有两个：CPU 使用率和内存使用率。CPU 使用率越低，内存使用率也会相应降低，反之亦然。在异步处理模型中，这两个指标尤为重要，若任一达到服务器限制，将成问题。在传统 PHP 架构中，CPU 和内存使用率通常是反比关系。然而，衡量 PHP 内部的 CPU 使用率较为困难，通常在 Ubuntu 或 macOS 上使用类似 top 的命令，或在 Windows 上使用 Linux 子系统和 top 命令。

本教程的代码可以在 GitHub 上找到。我们将测量内存使用情况，并实现一些优化策略进行度量。测量结果将帮助我们做出合理的选择。

我们有几种有效读取大文件的方法。第一种方法是在读取和处理所有数据的同时输出或执行其他操作。第二种方法是在不关心数据内容的情况下对数据流进行转换。在第一种情况中，我们需要一次性加载文件中的大量数据（例如每 10,000 行）并交给队列管理器处理。在第二种情况中，假设我们想要压缩 API 响应的内容，即使不关心内容，也需确保以压缩格式备份。

生成器是读取大型文件的有力工具，尤其适用于需要处理数据的情况。通过生成器逐行读取文件，我们可以最大限度地减少内存使用，而不会影响数据处理。对于不关心数据内容的情况，可以使用流（stream）将文件数据从一个文件传输到另一个文件。这种方法在处理小文件时效果良好，但对于大型文件则不推荐。

在需要处理数据的情况下，生成器可能是最佳选择，因为它允许我们逐行读取文件，而不会一次性加载整个文件到内存中。当应用于莎士比亚着作文件时，使用生成器读取文件仅消耗了 393 KB 的内存，即使将文件分为 126 个块也仅使用 459 KB 内存。这种内存使用效率得益于生成器的特性，即在迭代中需要存储最大文本块的内存。

为了验证内存使用情况，我们编写了脚本测量文件传输。结果表明，即使在文件传输过程中，内存使用量仍然为 393 KB，与逐行读取文件时相同。这表明流（stream）传输和逐行读取具有相似的内存使用效率。

除了传输文件外，还可以使用过滤器处理数据。例如，使用 Zip 扩展对文件进行压缩，或创建自定义过滤器以实现特定功能。自定义过滤器可以应用于流操作，如 stream__to_stream，从而避免在处理大型文件时消耗过多内存。

实现自定义协议和过滤器需要一些工作，但它们可以显着提高应用程序的内存效率。例如，编写一个调整大小图像过滤器或加密应用程序过滤器，即使处理大型文件，应用程序也能几乎不使用内存。

通过本教程，我们学习了如何有效地读取和写入大文件，并了解了生成器、流、过滤器等工具的使用。这些知识将帮助我们避免在处理大文件时出现内存问题，并提高应用程序的整体性能。在处理大文件时，考虑内存使用情况至关重要，尤其是在异步应用中。通过使用这些工具和技术，我们可以构建更高效、更稳定的 PHP 应用程序。

⑥ php逐行读取txt、csv并分页

$filename='a.txt';//文件名
$str=file_get_content($filename);//获得内容
$arr=explode("\n",$str);//分行存入数组
foreach($arr as $row){//遍历每行
$temp=explode(" ",$row);
//此时$temp[0]=前面的id号,$temp[1]=中文名,$temp[2]=后面的一长串
//赋值吧
}

//explode是按字符分割string
//可以查查php手册

//存回去用file_put_content