我們要提防惡意的蜘蛛陷阱
發(fā)布時(shí)間:2013/06/20
字體:大中小
摘要:我們要提防惡意的蜘蛛陷阱,惡意蜘蛛陷阱體現(xiàn)在哪些方面,我們做網(wǎng)站優(yōu)化很多時(shí)候都是為了討好蜘蛛,很少有惡意的去阻止蜘蛛抓取網(wǎng)站,凡事都有例外,合肥網(wǎng)絡(luò)公司今天就來(lái)告訴大家如何阻止蜘蛛訪問(wèn)網(wǎng)站。
我們做網(wǎng)站優(yōu)化很多時(shí)候都是為了討好蜘蛛,很少有惡意的去阻止蜘蛛抓取網(wǎng)站,凡事都有例外,
合肥網(wǎng)絡(luò)公司http://m.fn9c.com今天就來(lái)告訴大家
如何阻止蜘蛛訪問(wèn)網(wǎng)站。
想要阻止蜘蛛訪問(wèn)網(wǎng)站,其實(shí)道理很簡(jiǎn)單,只要將正常的網(wǎng)站建設(shè)和優(yōu)化的一些做法顛倒過(guò)來(lái)。網(wǎng)站結(jié)構(gòu)不需要那樣簡(jiǎn)單清晰,網(wǎng)站內(nèi)容也不需要相關(guān)性,讓蜘蛛覺(jué)得網(wǎng)站不友好,或者干脆就不讓蜘蛛訪問(wèn)網(wǎng)站,也就是將網(wǎng)站屏蔽掉。
1.網(wǎng)站架構(gòu)上:正常情況下,網(wǎng)站結(jié)構(gòu)合理、清晰可以體現(xiàn)用戶體驗(yàn),但現(xiàn)在就要把網(wǎng)站結(jié)構(gòu)弄的亂亂的,這種做法是錯(cuò)誤的,有的人認(rèn)為,網(wǎng)站結(jié)構(gòu)亂,蜘蛛來(lái)了要理一會(huì)才能抓取內(nèi)容,說(shuō)不定還能多收錄一些,其實(shí)這種想法是沒(méi)有任何科學(xué)道理的。
蜘蛛訪問(wèn)網(wǎng)站不會(huì)因?yàn)榻Y(jié)果混亂,在網(wǎng)站中會(huì)多逗留,只會(huì)讓蜘蛛感覺(jué)網(wǎng)站很亂,沒(méi)有安全感,蜘蛛很快就會(huì)離開(kāi)網(wǎng)站,所以說(shuō)不要用自己的小聰明去吸引蜘蛛,網(wǎng)站結(jié)構(gòu)還是簡(jiǎn)單合理的好。
2.網(wǎng)站權(quán)重上:我們都知道網(wǎng)站權(quán)重最高的就是首頁(yè),內(nèi)容的權(quán)重很小。有的站長(zhǎng)就想讓內(nèi)頁(yè)的權(quán)重也都能提升,于是就將網(wǎng)站的權(quán)重分散給每一個(gè)內(nèi)頁(yè)。其實(shí)這的錯(cuò)誤的,網(wǎng)站所有的頁(yè)面都有權(quán)重固然好,但不要忘記了我們做優(yōu)化的網(wǎng)址是首頁(yè),網(wǎng)站內(nèi)頁(yè)權(quán)重高當(dāng)然是有利于優(yōu)化的,但不且實(shí)際。
3.網(wǎng)站內(nèi)容上:網(wǎng)站內(nèi)容相關(guān)才能很容易被收錄,很多站長(zhǎng)為了節(jié)省時(shí)間,經(jīng)常從別的網(wǎng)站采集內(nèi)容,或者找一些不相關(guān)的內(nèi)容粘貼上去。 這樣的內(nèi)容永遠(yuǎn)都不會(huì)被收錄,沒(méi)有被懲罰都是萬(wàn)幸了,這些都屬于惡意的蜘蛛陷阱。
4.登錄設(shè)置:很多論壇都會(huì)讓用戶先登錄,之后才能瀏覽信息,這樣的話蜘蛛爬到論壇的時(shí)候也會(huì)被擋在外面。蜘蛛也不可能去注冊(cè)論壇之后再去爬行,這也是天方夜譚吧。