| 拒絕搜尋引擎的狂掃 |
|
就是不給您「搜」--拒絕搜尋引擎的狂掃 |
當我們辛辛苦苦建立起一個網站的時候,尤其是購物網站。最希望的一件事,當然是在各大搜尋引擎上能被網友們找的到。當然,除了自己花時間又花錢去登錄在各大搜尋引擎上之外,當然就要歸功於這些相當「勤勞」的搜尋機器人啦!他們不分晝夜地光顧您的網站,您的家,不外乎就是要把你網站內的所有資訊全都挖出來,然後記錄進引擎資料庫中,以方便讓大家都能找的到你。
但是,這樣真的就很「妥當」嗎?
因為很多網站內的東東,會全部被搜光光,包括你想公示於人的或是私人祕密,全部搜光光!然後攤在陽光下! 此外,這些搜尋機器人都是利用多線程的方式在狂掃你的網站,你的網站有多少東西,他就會搜多少,而你的流量,就這樣一點一滴的被吃掉了!當然,被吃掉的流量並不會很多,奇摩與google合約1~2GB,以曝光效益上是能接受的!但在眾搜尋引擎之中,還是存在有「強盜型」的搜尋機器人,這在後頭再說明吧~
若為了某些原因,想拒絕搜尋引光顧你的「家」,就需要一張「謝客牌」囉~ 所以,我們可以在網站的目錄中,加入一個檔案--「robots.txt」。 當搜尋機器人來到你家大門口,看見這張「謝客牌」時,他就會翻了翻、看了看內容後就摸 摸鼻子走人啦~當然,robots.txt謝客牌裡當然要寫些東西囉~ | |
設定的方式很簡單,先建立一個空白的文字檔,然後在裡頭直接輸入以下文字:
User-agent: * Disallow: /
這行設定代表,本網站通通不給搜! 但做人,就是不能這麼寒酸,所謂「有朋之遠方來,不亦樂乎!」,如果單單只有某些目錄 是不給人看的,不給人搜的,只要寫在Disallow的後頭就好了。 |
|

| |
| 將建立的文字檔robots.txt檔上傳至您的主機目錄public_html底下 |
|

| |
|
|
|