問(wèn):Unknown robot (identified by 'spider')這個(gè)機(jī)器人每天爬行,消耗網(wǎng)站不少流量,發(fā)現(xiàn)它的IP是127.0.0.1,于是在web.config文件里加入了如下代碼
<?xml version="1.0" encoding="UTF-8"?>
<configuration>
<system.webServer>
<rewrite>
<rules>
<rule name="band ip" stopProcessing="true">
<match url="(.*)" />
<conditions logicalGrouping="MatchAny">
<add input="%{HTTP_X_FORWARDED_FOR}&%{REMOTE_ADDR}&%{HTTP_X_Real_IP}" pattern="(127.0.0.1)" />
</conditions>
<action type="AbortRequest" />
</rule>
</rules>
</rewrite>
</system.webServer>
</configuration>
可還是沒(méi)用。請(qǐng)問(wèn)有什么別的辦法能屏蔽這個(gè)IP?
,如何禁止這個(gè)“搜索引擎”的爬行
答:您好,我司查看分析了一天的日志,核實(shí)日志中訪問(wèn)大的蜘蛛是的是百度蜘蛛和sougou蜘蛛,當(dāng)前主機(jī)每月流量15G 當(dāng)前只消耗了4.2G 目前建議不用做任何處理屏蔽繼續(xù)觀察即可,非常感謝您長(zhǎng)期對(duì)我司的支持!
問(wèn):網(wǎng)站空間不穩(wěn)定,被搜索引擎提示,希望進(jìn)行調(diào)整,保證空間穩(wěn)定性,讓搜索引擎不在出現(xiàn)這樣的提示
答:您好,
已經(jīng)為您調(diào)整了節(jié)點(diǎn)請(qǐng)?jiān)儆^察一下,查看您使用的港臺(tái)主機(jī)優(yōu)勢(shì)是不用備案,但容易受到國(guó)際網(wǎng)絡(luò)出口波動(dòng)影響,建議您考慮將域名備案后升級(jí)到國(guó)內(nèi)主機(jī)試用,穩(wěn)定性和速度會(huì)有所提升。
,非常感謝您長(zhǎng)期對(duì)我司的支持.由此給您帶來(lái)的不便之處,敬請(qǐng)?jiān)?謝謝!