php怎么跑大量数据 php能做大数据吗

在PHP中怎么解决大量数据处理的问题

mysql_query函数查询的方式是查询出全部结果后缓存到内存中，这样就会出现超内存的现象，使用另外一个函数mysql_unbuffered_query可以解决这个问题，mysql_unbuffered_query不会缓存结果集，而是查询出来数据后立马对结果集进行操作，也就是便查询边返回，这样就不会出现超出内存的现象，但是使用mysql_unbuffered_query的是时候不能使用 mysql_num_rows() 和 mysql_data_seek()。并且向 MySQL 发送一条新的 SQL 查询之前，必须提取掉所有未缓存的 SQL 查询所产生的结果行。例如：

网站建设哪家好，找创新互联公司！专注于网页设计、网站建设、微信开发、微信小程序定制开发、集团企业网站建设等服务项目。为回馈新老客户创新互联还提供了会同免费建站欢迎大家使用！

使用缓存结果集的代码：

function selecttest()

{

try {

$pdo = new PDO("mysql:host=localhost;dbname=test", 'root', '123456');

// 不使用缓存结果集方式

// $pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);

$sth = $pdo-prepare('select * from test');

$sth-execute();

echo '最初占用内存大小：' . memory_get_usage() . "\n";

$i = 0;

while ($result = $sth-fetch(PDO::FETCH_ASSOC)) {

$i += 1;

if ($i 10) {

break;

}

sleep(1);

print_r($result);

echo '占用内存大小：' . memory_get_usage() . "\n";

}

} catch (Exception $e) {

echo $e-getMessage();

}

}

执行时将会报超出内存的错误：

Fatal error: Allowed memory size of 134217728 bytes exhausted (tried to allocate 204800000 bytes) in E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php on line 56

Call Stack:

0.0005 135392 1. {main}() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:0

0.0005 135568 2. test-selecttest() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:85

0.0050 142528 3. PDOStatement-execute() E:\ProgramDevelopment\RuntimeEnvironment\xampp\htdocs\test\test.php:56

将上面代码中的$pdo-setAttribute(PDO::MYSQL_ATTR_USE_BUFFERED_QUERY, false);一行的注释去掉后将不在缓存结果集，这时运行该函数的结果如下：

最初占用内存大小：144808

Array

(

[id] = 1

[a] = v

[b] = w

[c] = i

)

占用内存大小：145544

Array

(

[id] = 2

[a] = b

[b] = l

[c] = q

)

占用内存大小：145544

Array

(

[id] = 3

[a] = m

[b] = p

[c] = h

)

占用内存大小：145536

Array

(

[id] = 4

[a] = j

[b] = i

[c] = b

)

占用内存大小：145536

可以看到，这时返回一条数据内存占用非常的小，也就700多字节，这样就不会出现超出内存的错误了。

在PHP中怎么解决大量数据处理的问题？许昌鲤鱼IT计算机电脑软件编程培训中心

目前主流的编程软件VisualBasic的版本是VisualBasic 6.0专业版。我们所使用的操作系统是Windows10。

先把VisualBasic 6.0的安装光盘放入电脑的光盘驱动器中，通常电脑能够自动运行光盘上的安装程序。在安装VisualBasic之前，最好先详细地阅读一下光盘上的Readme.txt文件，了解安装VisualBasic 6.0需要的一些基本知识，然后单击光盘上的Setup.exe文件，并按照安装程序的提示进行操作。

首先，安装程序会显示一个启动画面。如果使用的是不同的安装盘，也许Readme文件的格式可能有所不同，但是不影响应用程序的安装。

在上面的对话框中可以直接单击对话框上的【下一步】按钮，进入下面的操作。这时会进入一个显示微软的最终用户许可协议书的窗口，里面的内容规定了最终用户的一些必要的义务。在这里只能选择同意，因为如果选择不同意，安装程序就退出了。

在下面的窗口中，将要求用户输入用户名和所属的公司名称，并输入产品的ID号。这个ID号应该包含在购买的光盘中。输入相应的信息之后，单击【下一步】按钮。如果输入的ID号正确，那么将进入VisualBasic 6.0安装程序的下一个窗口，在这里有两个选项，对话框中对这两个选项进行了必要的解释。在这里选择第一个选项，也是安装程序的默认选项。

单击【下一步】按钮，进入安装程序的下一个对话框。在这个对话框中，安装程序要求选择VisualBasic 6.0应用程序的公共文件的安装路径。在这里可以根据自己的需要把应用程序安装到希望的路径中。在完成了路径的选择之后，单击【下一步】按钮，进入安装程序的下一步操作。ß这时完成了安装程序的初始配置，现在进入了真正和VisualBasic 6.0相关的安装程序，在经过一段初始化操作之后，安装程序将显示选择安装类型的对话框。

在这个对话框中，要进行两个操作，一个是选择VisualBasic 6.0系统的安装路径，第二个是选择程序的安装类型。这里同样可以任意指定程序的安装位置，比如指定到“E:/VB”。在选择安装类型的时候，有两个选择：典型安装，是安装程序根据最常用的选项安装，第二项是允许根据需要来配置安装选项。

单击【自定义安装】按钮，会显示设置安装选项的对话框。

在左边的列表框中选中或者清除复选框，就表示要或者不要安装相应的组件。单击对话框右边的【更改选项】按钮，可以进行更为细致的设置。

选择好了需要的选项之后，单击【继续】按钮，可以开始复制VisualBasic 6.0的文件，当程序复制完所有的文件，并进行相应的系统配置之后，就会要求重新启动Windows，按照要求重新启动系统之后，VisualBasic 6.0的安装工作就基本完成了。

在重新启动电脑之后，系统会询问是否安装MSDN，这是VisualBasic 6.0的帮助系统，可以根据自己的需要安装这个系统。

希望我能帮助你解疑释惑。

php怎么导出大量数据的Excel

php导出大量数据Excel的具体操作步骤如下：

1、使用phpstudy搭建一个测试平台，直接访问数据库。

2、下载的phpcms安装包拷贝到IIS目录，开通访问，即可搭建成功。

3、登录网站后台，系统权限，文件目录以及数据库等功能，进行管理。

4、在phpcms后台，扩展，数据库工具，数据库导出，程序池选择phpcmsv9，开始备份数据。

5、打开IIS网站目录，在D:\wwwroot\kmxy\wwwroot\caches\bakup\default文件夹，查看导出的数据库文件。

6、登录phpmyadmin，选择数据库导出，选择Excel格式，即可导出。

php curl 大量数据采集

这个需要配合js，打开一个html页面，首先js用ajax请求页面，返回第一个页面信息确定处理完毕（ajax有强制同步功能），ajax再访问第二个页面。（或者根据服务器状况，你可以同时提交几个URL，跑几个相同的页面）

参数可以由js产生并传递url，php后台页面根据URL抓页面。然后ajax通过php，在数据库或者是哪里设一个标量，标明检测到哪里。由于前台的html页面执行多少时候都没问题，这样php的内存限制和执行时间限制就解决了。

因为不会浪费大量的资源用一个页面来跑一个瞬间500次的for循环了。（你的500次for循环死了原因可能是获取的数据太多，大过了php限制的内存）

不过印象中curl好像也有强制同步的选项，就是等待一个抓取后再执行下一步。但是这个500次都是用一个页面线程处理，也就是说肯定会远远大于30秒的默认执行时间。

求 php 循环执行大量数据 解决办法。

你用网页的方式，让人点击，服务器采集，简直是弱爆了。每个人的点击循环1000次，来个100人同时点，你要用的是普通的虚拟机就不行了。

最好是换种方式实现，不要通过网页进行采集。

可以非常简单的在数据库的表，创建一个采集队列，后台执行一个crontab的计划任务，去完成队列里的采集任务。