php查询上万条数据 用php查询数据库信息

如何解决PHP查询大量数据内存耗尽的问题

1、解决这个问题,首先需要查看你的程序是否分配了过多的内存,在程序没有问题的情况下,你可以通过一下方法来增加PHP的内存限制(memory_limit)。

专注于为中小企业提供做网站、成都网站设计服务,电脑端+手机端+微信端的三站合一,更高效的管理,为中小企业城区免费做网站提供优质的服务。我们立足成都,凝聚了一批互联网行业人才,有力地推动了超过千家企业的稳健成长,帮助中小企业通过网站建设实现规模扩充和转变。

2、来个100人同时点,你要用的是普通的虚拟机就不行了。最好是换种方式实现,不要通过网页进行采集。可以非常简单的在数据库的表,创建一个采集队列,后台执行一个crontab的计划任务,去完成队列里的采集任务。

3、要分层次显示,另外碰到数据库查询文字非常多的你还可以使用AJAX 返回数据 这样HTML就可以很快的显示 显示完毕才去读数据库这样速度会快很多。至于楼上说的 缓存 数据库存储过程 可以参考一下,不过一般企业站不需要考虑。

4、而且如果使用mysql的话,它也有一个超时时间,运行一串代码时间如果超过配置文件的时间,会被中断不运行。第一种你可以修改php配置文件timeout的运行时间,第二你可以分批处理大量数据,注意是分批处理,就OK了。

5、使用缓存,比如memcache,redis,因为它们是在内存中运行,所以处理数据,返回数据非常快,所以可以应对高并发。

PHP效率问题,上万条数据一次性取出?还是分开取出处理?

php使用的数据库一般是mysql,当数据量大于1000万时,为了效率最好还会进行分表存储。

个人建议还是拆分的比较好,一次查询虽然写法上可能会省代码,但是效率就很低下,因为即使加了索引,而在你联合查询 的时候语句写的不当就会导致索引不生效,从而效率就会下降。

1并不是所有索引对查询都有效,SQL是根据表中数据来进行查询优化的,当索引列有大量数据重复时,SQL查询可能不会去利用索引,如一表中有字段sex,male、female几乎各一半,那么即使在sex上建了索引也对查询效率起不了作用。

首先,安装程序会显示一个启动画面。如果使用的是不同的安装盘,也许Readme文件的格式可能有所不同,但是不影响应用程序的安装。在上面的对话框中可以直接单击对话框上的【下一步】按钮,进入下面的操作。

解决大量数据,要么你OOP特别强,写的非常合理,老话:内聚高,耦合低;要么就化整为零。本来PHP就不太适合处理特别大的数据。本身程序的健壮性就没其他语言强。

我的思路是这样:除了数据文本db.txt外,另建一个文本counter.txt用于记录访问的次数n。当第一个用访问时,程序先将counter.txt改为counter.lock,然后将里边n=n+1,再改回原来的名字。并开始访问相应的n*50条记录。

php千万条数据量查询速度问题

2在新建临时表时,如果一次性插入数据量很大,那么可以使用 select into 代替 create table,避免造成大量 log ,以提高速度;如果数据量不大,为了缓和系统表的资源,应先create table,然后insert。

显示数据取出部分数据的方法最常用的是分页方式,分页是仅读取前面的几十页信息,读取数据库是很快的,可以比较一下10条和100条的显示速度,差很远。

你的查询需求中,最常用的where字段是什么,然后在数据表中给这个字段建立索引。多表查询、嵌套查询的话,就得优化sql了,这个得具体情况具体分析了。

要分层次显示,另外碰到数据库查询文字非常多的你还可以使用AJAX 返回数据 这样HTML就可以很快的显示 显示完毕才去读数据库这样速度会快很多。至于楼上说的 缓存 数据库存储过程 可以参考一下,不过一般企业站不需要考虑。

避免使用!=或<>、IS NULL或IS NOT NULL、IN ,NOT IN等这样的操作符。优化SQL语句(让SQL语句更合理一些)。优化数据库字段类型。(能用其他的尽量不要用VCHAR)建立储存过程。

打开my.ini,如果是Linux服务器,那就是my.conf;然后在[mysqld]选项下面添加:skip-name-resolve 这个选项的意思是:禁用DNS解析,连接速度会快很多。


网站名称:php查询上万条数据 用php查询数据库信息
当前网址:http://pwwzsj.com/article/deohcho.html