問:你好,最近網(wǎng)站收錄效果很差,于是反饋了百度站長平臺(tái),得到的結(jié)果是說網(wǎng)站抓取時(shí)間比較慢的原因,但我們自己感覺網(wǎng)站訪問速度沒什么問題啊,為什么抓取會(huì)慢呢?是不是服務(wù)器上設(shè)置出來什么問題呢?能否幫忙分析下網(wǎng)站日志看看什么原因,或者告訴我們網(wǎng)站訪問日志文件在什么位置!謝謝,網(wǎng)站百度蜘蛛抓取時(shí)間慢
答:您好,目前檢查您的服務(wù)器各項(xiàng)資源使用正常,測(cè)試訪問兩個(gè)域名https://www.hao-sheng-yi.com/ 和http://www.weizengo.com/打開都是很快的,您可以在百度站長平臺(tái)測(cè)試抓取一些靜態(tài)的資源,看下速度如何,如果能抓取到只是抓取較慢,可能和百度蜘蛛本身服務(wù)器線路到達(dá)您的服務(wù)器有關(guān),這個(gè)不太好改善。
如需分析日志,需要您開啟下wdcp面板中站點(diǎn)的日志,開啟后才會(huì)記錄,默認(rèn)是沒有開啟的,謝謝。
問:為什么在網(wǎng)站日志中找不到各大搜索引擎訪問日志?請(qǐng)問日志目錄是不是這個(gè)/home/web_logs/?www.c2b360.com站點(diǎn)已開啟所有日志記錄,為什么沒有搜索引擎訪問記錄?
答:您好,查看您的日志應(yīng)該是剛剛開啟,請(qǐng)等待蜘蛛的抓取,可以搜索baiduspider,google等關(guān)鍵詞獲取下,目前還沒有請(qǐng)不要著急,蜘蛛對(duì)新站的抓取是逐步的,您可以在百度站長平臺(tái)注冊(cè)一個(gè)帳號(hào),接入下網(wǎng)站,可以看到每日的抓取情況。
另外注意下robots.txt以及.htaccess文件中不要有限制屏蔽蜘蛛名或者IP等的規(guī)則,謝謝。
問:日志10月16日開始創(chuàng)建的,開啟10天肯定有的了,正常來說開啟一天也會(huì)看得到記錄的,現(xiàn)在是所有搜索引擎都沒有記錄,你不覺得奇怪嗎?是過濾了?還是服務(wù)器做了某些設(shè)置不讓蜘蛛訪問?
答:您好,服務(wù)器本身,包括機(jī)房防火墻,并不會(huì)攔截蜘蛛的抓取,請(qǐng)您先暫時(shí)調(diào)整下網(wǎng)站中的.htaccess和robots.txt規(guī)則再查看下,另外,這個(gè)問題也可能和wdcp的日志記錄方式有關(guān),日志的記錄方式和一般的日志格式不太相同。實(shí)際的抓取情況,您可以以百度站站平臺(tái)后面的統(tǒng)計(jì)為準(zhǔn),謝謝。