您可以使用此軟件快速抓取站點(diǎn)中可能出現(xiàn)的損壞鏈接和服務(wù)器錯(cuò)誤,或者識(shí)別站點(diǎn)中的臨時(shí)和重定向鏈接,還可以在爬行分析之后檢查信息的可能重復(fù),如web站點(diǎn)、頁(yè)面標(biāo)題、說(shuō)明和內(nèi)容。您可以大量導(dǎo)出所有這些錯(cuò)誤的問(wèn)題,并將它們發(fā)送給開發(fā)人員進(jìn)行修復(fù)。
工具功能01定位斷開的鏈接,立即抓取網(wǎng)站,找到損壞的鏈接(404)和服務(wù)器錯(cuò)誤。批量導(dǎo)出錯(cuò)誤和源URL以修復(fù)或發(fā)送給開發(fā)人員。審核重定向查找臨時(shí)和重定向,確定重定向鏈和循環(huán),或上傳url列表以審核站點(diǎn)的遷移。
分析頁(yè)面標(biāo)題和元數(shù)據(jù),分析頁(yè)面標(biāo)題和元描述在捕獲過(guò)程中,并確定網(wǎng)頁(yè)標(biāo)題的長(zhǎng)度、簡(jiǎn)短、缺失或重復(fù)的頁(yè)面標(biāo)題和元描述。我們發(fā)現(xiàn),重復(fù)內(nèi)容使用MD5算法來(lái)檢測(cè)準(zhǔn)確的url重復(fù)、部分重復(fù)的頁(yè)面標(biāo)題、指令或標(biāo)題,以及查找內(nèi)容較低的網(wǎng)頁(yè)。
使用XPath提取數(shù)據(jù),使用CSS路徑、XPath或regex從web頁(yè)面的HTML收集任何數(shù)據(jù)。這可能包括社會(huì)元標(biāo)簽,額外的標(biāo)題,,SKU或更多!檢查機(jī)器人和指令來(lái)查看機(jī)器人。txt, meta robots或X-Robots-Tag指令(如Noindex或nofollow)和URL.被牧師和rel= next和rel= prev阻塞
新聞?dòng)涉I坤信息原創(chuàng)發(fā)布,轉(zhuǎn)載轉(zhuǎn)發(fā)或復(fù)制請(qǐng)保留版權(quán)信息
更多關(guān)于云服務(wù)器,域名注冊(cè),虛擬主機(jī)的問(wèn)題,請(qǐng)?jiān)L問(wèn)西部數(shù)碼官網(wǎng):www.ps-sw.cn