網站中常見的搜索引擎陷阱
我們建設網站首先要考慮到的就是如何讓蜘蛛可以更好的抓取內容,增加收錄,以便網站發展過程中有一個很好的流量和排名,但實際上網站建設之時并不是所有的內容搜索引擎都會抓取,這里面還是有一些搜索引擎陷阱的。
1.Flash陷阱是常見的
很多網站為了網站的美觀度或者讓用戶產生強烈的視覺沖擊力,會在網頁中加入Flash,較常見的有Flash廣告和barnner圖等。在這些地方加入Flash效果本身是不會影響搜索引擎的數據抓取的,但要是在首頁用一個非常大的Flash動畫來替代就是一個誤區了。蜘蛛在抓取數據的時候就找不到頁面只能找到一個Flash文件。如果站長們必須在首頁用Flash的話,可以添加一個HTML版本的鏈接,這樣蜘蛛就可以順著鏈接抓取到HTML頁面。
2.會話ID陷阱
這種會話ID的作用就是為了跟蹤用戶反問的,每個訪問網站的用戶都會有一個獨立的ID,將ID添加在URL中就是所謂的會話ID。搜索引擎訪問網站抓取數據的時候,會被網站當成新的獨立用戶,這樣網站URL的會話ID就會有所不同,造成的結果就是蜘蛛雖然只訪問了同一個頁面,但網站URL卻是不同的,這也是一個蜘蛛陷阱。
3.訪問網頁時的各種跳轉陷阱
我們在訪問網站時通常會遇到很多跳轉,比如301跳轉,JS跳轉、302跳轉、Flash跳轉等,這些也是蜘蛛陷阱,不利于搜索引擎的抓取數據,所以網站中的這些跳轉還是要盡量避免的。
4.網站框架結構陷阱
網站框架結構也是蜘蛛陷阱之一,因為搜索引擎無法準確的判斷出頁面的內容是什么,所以網站框架結構的設計不利于搜索引擎的抓取。