常常采集一页两页就停下来了php
完整的解决方案以下:nginx
php.ini 中 max_execution_time = 0 的设置只针对PHP自己起做用
php-fpm 模式下 须要修改的参数是 php-fpm.conf (ubuntu 中的配置文件为 /etc/php5/fpm/pool.d/www.conf) 中 request_terminate_timeout = 0
safe_mode 配置已经于PHP5.4取消,无需配置
接下来不报502错误了,开始报504错误;继续搜寻在线支持,未找到相关信息只提到了nginx容器可能有问题。其实504错误主要因为nginx超时形成的,修改其配置文件便可ubuntu
编辑 /etc/nginx/nginx.conf 在 http 段添加以下代码,若是有这些设置了就更改对应的值
...
http{
...
fastcgi_connect_timeout 1800;
fastcgi_send_timeout 1800;
fastcgi_read_timeout 1800;
fastcgi_buffer_size 1024k;
fastcgi_buffers 32 1024k;
fastcgi_busy_buffers_size 2048k;
fastcgi_temp_file_write_size 2048k;
...
至此解决了报错的问题,采用批量采集源方式,手工更新采集 20页*25篇 = 500篇文章正常执行,耗时2个小时。php-fpm