一、網(wǎng)站評估期
站長都知道,大多數(shù)搜索引擎都有一個針對新網(wǎng)站的審查期,稱為沙箱效應。一般來說,審查期是1-6個月左右,其中一些甚至不收錄網(wǎng)站的第一頁,在一定的時間后才開始收錄。因此,如果新網(wǎng)站收錄了主頁沒有收錄內(nèi)部頁面,則很可能網(wǎng)站處于評估期,在評估期之后,內(nèi)部頁面將自然釋放,并開始收錄。
二、空間服務器問題
服務器是決定網(wǎng)站打開速度的重要指標之一。如果我們網(wǎng)站的空間服務器的穩(wěn)定性存在一定的波動和問題的話,那么這樣會給蜘蛛留下不好的印象的,盡管他仍然會再次光臨,但是多次爬行失敗后,蜘蛛便不會再來了。因此,站點空間的穩(wěn)定性是站點正常發(fā)展的基礎,不穩(wěn)定的空間會給站點的建設帶來相當大的危害。
三、文章質(zhì)量
一般來說,具有一定價值的頁面會被搜索引擎收錄,即使不及時被搜索引擎收錄,也經(jīng)過一段時間后會被收錄。但如果我們的網(wǎng)頁的價值很小,所以即使搜索引擎收錄了,很快就會被遺棄,搜索引擎的設計就是為了給用戶提供有價值的有用信息,所以收集無用的網(wǎng)頁是無意義的。
四、網(wǎng)站結(jié)構
如果網(wǎng)站設計出現(xiàn)問題,如使用許多搜索引擎不友好的 Javascript、Flash、iframe 來設計網(wǎng)站,這可能導致搜索引擎不被收錄。因為 Spider 不能讀取 Javascript、Flash 和 iframe的內(nèi)容,我們不能追求站點的美麗而忽略站點的可用性。有些技術可以用 DIV+CSS 代替。另一點是新網(wǎng)站,可能是由于網(wǎng)站管理員的疏忽,在robots.txt中寫了限制性聲明。尤其是那些對網(wǎng)站結(jié)構不太確定的人,很容易犯這樣的錯誤。
五、 網(wǎng)站外鏈建設
新網(wǎng)站不收錄內(nèi)部頁面,也可能與外部鏈有一定的關系,蜘蛛跟著URL進入我們的網(wǎng)站,當外鏈建設太少時,蜘蛛很難找到我們的網(wǎng)站,即使發(fā)現(xiàn)也得通過評估期。所以,這需要良好的外鏈建設,每天告訴蜘蛛在這里有吃的,蜘蛛會再次訪問你的網(wǎng)站,并且網(wǎng)絡爬行的次數(shù)會更頻繁。做好內(nèi)部鏈的建設,還可以增加蜘蛛爬行網(wǎng)頁的數(shù)量,有利于收集新的網(wǎng)頁。