問:奇怪問題,這臺服務器上的網站百度全部不能抓取!
在百度站長平臺–抓取診斷–127.0.0.1這臺上的網站全部抓取超時或者失敗,
但同樣的程序在另一臺上就可以抓取。
這是什么原因?是不是哪個程序或者什么安全措施給阻止了?,奇怪問題,這臺服務器上的網站百度全部不能抓取!
答:您好,1、請提供相關域名以便我司核實,非常感謝您長期對我司的支持!
問:http://www.zgsuqian.cn/
問:http://www.zgmuye.com/
答:您好,1、測試模擬百度可以正在抓取,附圖。
2、如果仍無法抓取,請提供百度抓取報錯的詳細截圖反饋我司核實。
非常感謝您長期對我司的支持!
問:
我是在站長平臺上弄的。如圖。
答:您好,1、請點擊抓取失敗報錯,查看詳細抓取失敗報錯原因,以便我司核實,非常感謝您長期對我司的支持!
問:奇怪問題,這臺服務器上的網站百度全部不能抓取!
在百度站長平臺–抓取診斷–127.0.0.1這臺上的網站全部抓取超時或者失敗,
但同樣的程序在另一臺上就可以抓取。
這是什么原因?是不是哪個程序或者什么安全措施給阻止了?
答:您好,1、請提供相關域名以便我司核實,非常感謝您長期對我司的支持!
問:http://www.zgsuqian.cn/
問:http://www.zgmuye.com/
答:您好,1、測試模擬百度可以正在抓取,附圖。
2、如果仍無法抓取,請提供百度抓取報錯的詳細截圖反饋我司核實。
非常感謝您長期對我司的支持!
問:
我是在站長平臺上弄的。如圖。
答:您好,1、請點擊抓取失敗報錯,查看詳細抓取失敗報錯原因,以便我司核實,非常感謝您長期對我司的支持!
問:之前的工單已經處理過了
麻煩再看看php日志和web日志
我看了,php日志還在報錯
pid = /www/wdlinux/phps/70/var/run/php-fpm.pid
error_log = /www/wdlinux/phps/70/var/log/php-fpm.log
log_level = notice
[www]
listen = /tmp/php-70-cgi.sock
listen.backlog = -1
listen.allowed_clients = 127.0.0.1
listen.owner = www
listen.group = www
listen.mode = 0666
user = www
group = www
pm = dynamic
pm.max_children = 512
pm.start_servers = 32
pm.min_spare_servers = 32
pm.max_spare_servers = 256
pm.max_requests = 102400
request_terminate_timeout = 60
我已經修改了配置
[04-Nov-2017 19:21:01] ERROR: failed to post process the configuration
[04-Nov-2017 19:21:01] ERROR: FPM initialization failed
[04-Nov-2017 19:28:03] NOTICE: fpm is running, pid 3783
[04-Nov-2017 19:28:04] NOTICE: ready to handle connections
[05-Nov-2017 01:38:45] WARNING: [pool www] child 3790, script '/home/www/weyfans_com/public_html/plugin.php' (request: "GET /plugin.php?id=aljes&rid=20&subrid=331&subsubrid=776&zufangtype=20") execution timed out (77.357685 sec), terminating
[05-Nov-2017 01:38:45] WARNING: [pool www] child 3785, script '/home/www/weyfans_com/public_html/plugin.php' (request: "GET /plugin.php?id=aljes&new=5&rid=16&zufangtype=20") execution timed out (74.816805 sec), terminating
[05-Nov-2017 01:38:45] WARNING: [pool www] child 3790 exited on signal 15 (SIGTERM) after 22241.294328 seconds from start
[05-Nov-2017 01:38:45] NOTICE: [pool www] child 4004 started
[05-Nov-2017 01:38:45] WARNING: [pool www] child 3785 exited on signal 15 (SIGTERM) after 22241.335037 seconds from start
[05-Nov-2017 01:38:45] NOTICE: [pool www] child 4005 started
[05-Nov-2017 01:38:47] WARNING: [pool www] seems busy (you may need to increase pm.start_servers, or pm.min/max_spare_servers), spawning 8 children, there are 11 idle, and 48 total children
[05-Nov-2017 01:55:52] WARNING: [pool www] seems busy (you may need to increase pm.start_servers, or pm.min/max_spare_servers), spawning 8 children, there are 17 idle, and 63 total children
[05-Nov-2017 01:55:53] WARNING: [pool www] seems busy (you may need to increase pm.start_servers, or pm.min/max_spare_servers), spawning 16 children, there are 30 idle, and 71 total children
[05-Nov-2017 03:48:05] WARNING: [pool www] child 4067, script '/home/www/zhaochongwu_com/public_html/portal.php' (request: "GET /portal.php?mod=view&aid=12449&page=1") execution timed out (60.260892 sec), terminating
[05-Nov-2017 03:48:05] WARNING: [pool www] child 3799, script '/home/www/weyfans_com/public_html/plugin.php' (request: "GET /plugin.php?id=aljes&rid=35&subrid=558&subsubrid=766&zufangtype=11") execution timed out (61.059358 sec), terminating
[05-Nov-2017 03:48:05] WARNING: [pool www] child 3799 exited on signal 15 (SIGTERM) after 30001.660352 seconds from start
[05-Nov-2017 03:48:05] NOTICE: [pool www] child 4165 started
[05-Nov-2017 03:48:05] WARNING: [pool www] child 4067 exited on signal 15 (SIGTERM) after 6733.407731 seconds from start
[05-Nov-2017 03:48:05] NOTICE: [pool www] child 4166 started
[05-Nov-2017 12:41:17] WARNING: [pool www] child 3784 exited on signal 7 (SIGBUS) after 61993.034760 seconds from start
[05-Nov-2017 12:41:17] NOTICE: [pool www] child 4531 started
自從我修改完配置,重啟完php還在報錯
應該不會了啊
麻煩幫我測試下好嗎
百度蜘蛛抓取時不時就報錯
網站首頁加載有時候也一直在轉圈很慢
奇怪的很
ngnix應該響應很快的啊,比以前阿帕奇時候沒快多少
答:您好,
1.當前查看您服務器上最近一次php報錯是說的min_spare_servers(32)和PM。max_spare_servers(1024)不能大于max_children PM(512),查看您上面的配置文件中已經修改,當前重啟測試已經沒有報錯。
2.百度蜘蛛抓取和首頁加載有時轉圈的問題,需要具體的去核實,當前觀察了一段您服務器上網站http://www.zhaochongwu.com/,并沒有出現一直加載的情況,并測試在百度站長工具中網站模擬抓取正常,非常感謝您長期對我司的支持!
問:這樣抓取的確是正常的
但是我的百度站長后臺一直在報504錯誤
而且很多帖子都是老舊的以前的帖子 。
問:WARNING不影響嗎
答:您好
只要站點能正常訪問,系統運行正常,一般WARNING信息是可忽略的,該信息只是表示警告而已 ,非常感謝您長期對我司的支持!