一些網(wǎng)站設(shè)計技術(shù)對搜索引擎說很不友好,不利于蜘蛛爬行和抓取,這些技術(shù)被稱為蜘蛛陷阱。
常見的蜘蛛陷阱分為以下的幾種:
常見一:JavaScript鏈接
示例:<a href="javascript:window.location.href='2';" target="_blank">米趨</a>
常見二:在網(wǎng)頁里穿插FLASH
示例: flashObject('index.swf')
常見三:Sesssion ID
示例:百度推廣官方網(wǎng)站
http://fengchao.baidu.com/nirvana/main.html? userid=2473126#/manage/plan~_r=iwqk6gnq1y
http://fengchao.baidu.com/nirvana/main.html? userid=2473126#/manage/plan~_r=3br2o0us12
其中,紅色字體為Sesssion ID值
常見四:框架結(jié)構(gòu)(iframe)
示例: 百度MP3音樂盒
/* NOTE: remove when alb release
*#girliframe{width:340px; height:500px;border:0;} **/
紅色代碼為百度音樂盒調(diào)用框架結(jié)構(gòu)
常見五:動態(tài)RUL、參數(shù)過多RUL
示
例:
http://list.tmall.com/search_product.htm?spm=3.54626.101437.97&navlog=1&nav=spu-cat-qp&style=g&sort=s&
q=%BF%C6%B1%A6&n=40&s=0&cat=50030199&is=cate#J_crumbs
此URL中,動態(tài)參數(shù)過多,不利于搜索引擎蜘蛛抓取
常見六:社區(qū)等需要登陸的頁面
蜘蛛和人一樣如果需要訪問一些沒有權(quán)限的頁面的話,一樣需要登陸進去,但是蜘蛛不會和人一樣申請賬號來登陸,所以抓取不到?jīng)]有權(quán)限的頁面。
結(jié)論:在做SEO的時候盡量避免以上的一些不利于搜索引擎抓取的代碼及結(jié)構(gòu),讓搜索引擎更容易的看懂你的網(wǎng)站!
最好的站內(nèi)結(jié)構(gòu)可以及時的來應(yīng)對百度頻繁的算法。