你用网页的方式,让人点击,服务器采集,简直是弱爆了。每个人的点击循环1000次,来个100人同时点,你要用的是普通的虚拟机就不行了。
成都创新互联公司专注于七里河网站建设服务及定制,我们拥有丰富的企业做网站经验。 热诚为您提供七里河营销型网站建设,七里河网站制作、七里河网页设计、七里河网站官网定制、成都微信小程序服务,打造七里河网络公司原创品牌,更为您提供七里河网站排名全网营销落地服务。
最好是换种方式实现,不要通过网页进行采集。
可以非常简单的在数据库的表,创建一个采集队列,后台执行一个crontab的计划任务,去完成队列里的采集任务。
有两种情况, 一是 php可运行的最大时间是不是有设置. 虽然你加了set_time_limit(0). 但很有可能没设置成功,因为php有安全模式, 你可以修改php.ini
2是系统资源不够, 可能是php宕了或者 数据库宕了.
1W条数据量也不是特别大,那就直接读取,然后在foreach入库就可以了
如果数据量非常大的时候,那就分段读取,然后入库~
考虑到php超时,那就网页端打开,第一部分执行完,刷新页面,开始执行第二部分,依次进行...
当然,直接在命令行下执行也可以~
网页名称:php百万数据循环,php百万数据查询优化
URL地址:https://www.cdcxhl.com/article14/dsichde.html
成都网站建设公司_创新互联,为您提供微信小程序、静态网站、定制网站、小程序开发、ChatGPT、商城网站
声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联