問:Unknown robot (identified by 'spider')這個機器人每天爬行,消耗網站不少流量,發現它的IP是127.0.0.1,于是在web.config文件里加入了如下代碼
<?xml version="1.0" encoding="UTF-8"?>
<configuration>
<system.webServer>
<rewrite>
<rules>
<rule name="band ip" stopProcessing="true">
<match url="(.*)" />
<conditions logicalGrouping="MatchAny">
<add input="%{HTTP_X_FORWARDED_FOR}&%{REMOTE_ADDR}&%{HTTP_X_Real_IP}" pattern="(127.0.0.1)" />
</conditions>
<action type="AbortRequest" />
</rule>
</rules>
</rewrite>
</system.webServer>
</configuration>
可還是沒用。請問有什么別的辦法能屏蔽這個IP?
,如何禁止這個“搜索引擎”的爬行
答:您好,我司查看分析了一天的日志,核實日志中訪問大的蜘蛛是的是百度蜘蛛和sougou蜘蛛,當前主機每月流量15G 當前只消耗了4.2G 目前建議不用做任何處理屏蔽繼續觀察即可,非常感謝您長期對我司的支持!
問:網站空間不穩定,被搜索引擎提示,希望進行調整,保證空間穩定性,讓搜索引擎不在出現這樣的提示
答:您好,
已經為您調整了節點請再觀察一下,查看您使用的港臺主機優勢是不用備案,但容易受到國際網絡出口波動影響,建議您考慮將域名備案后升級到國內主機試用,穩定性和速度會有所提升。
,非常感謝您長期對我司的支持.由此給您帶來的不便之處,敬請原諒!謝謝!