該不該拒絕百度的流量?

edited 十月 2013 in 伺服器環境
應該越來越多人有同樣的困擾,明明網站的活躍度不高,流量卻是居高不下?

仔細看看流量統計,發現前幾名的只有兩個特徵,一個叫做砍站,一個叫做搜尋引擎。

搜尋引擎並不是不好,只是對岸的搜尋引擎都沒有做好DNS反查的動作,百度只是其中一個,讓人一度以為對岸在"監視"台灣的網站;因為主機是透過虛擬主機建置,我沒辦法透過太多伺服器設定控制這個情形,所以經常有完全擋回去的想法。

不知道大家對於這個情形都如何處理?

下面是一些相關資料:

61.135.145.205 => 百度

inetnum: 218.13.0.0 - 218.18.255.255
netname: CHINANET-GD
descr: CHINANET Guangdong province network
descr: Data Communication Division

其他都是一些透過ADSL砍站的朋友,離線瀏覽的效率相當差,而且會造成很大的困擾;如果這樣的情形造成流量超過負荷,我就必須進行封鎖了。

├004┤

原始討論: http://twpug.net/x/modules/newbb/viewtopic.php?topic_id=663

評論

  • edited 七月 2005
    以下這一篇是我發現到"百度"愈來愈囂張了...

    我曾在哈拉休閒站有po過..想互相來探討一下

    有關問題..但可惜的是..在那網站,好像不太有人

    重視此問題..沒想到..kiang兄也開始注意到類似

    的問題了..期望眾站長們..可以彼此互相討論一下.

    內容:

    剛剛在趕工繪製xoops佈景圖片時..隨手按下網站

    的重新整理..突然會員資訊中..出現了一面五星旗..

    .IP:202.108.11.***因為我網站還在測試中..沒有

    發佈...為什麼會出現了五星旗...可見得有人一直再

    掃我端口..知道我的伺服器有開....我趕快把伺服器

    加MYSQL關掉..馬上去查access.log檔..發現是大陸

    惡意網站"百度"在掃我端口..他們還很無恥的在網頁

    說明,他們掃瞄,不會對我的伺服器產生壓力(應該是負

    荷)百度說的話可以聽..屎都可以吃了..百度曾被列為

    惡意網站..我查access.log檔顯示202.108.11.***從

    這個網址:http://www.baidu.com/search/spider.htm

    連到我網站的..提醒有用XOOPS架站的朋友..提防一下

    202.108.11.***此IP..並且別去相信他網頁中教學..說

    要如何設定,可避免他們去掃你的伺服器..因為你一按照

    他的設定就完蛋了..我之前有架了一個純HTML的網站在

    雅虎..結果有收到一封MAIL..教我如何設定..可避免別人

    篡改我的網頁..後來一設定完..上傳到雅虎空間後...完了

    ..一開啟就一堆開不完的廣告視窗...他們教的語法其實是

    免費用你網站來放他們的濫廣告...那些人真可恥....

    希望大家幫忙轉貼..免得到時有人好網站被破壞了..轉貼請

    註明原著人:t9527
  • edited 七月 2005
    這其實是很掙扎的問題,因為搜尋引擎的流量代表著使用者行為;我擔心的只是他們對於頁面更新的快取與處理機制不夠完善,導致需要經常性擷取網站資料。

    我更擔心的是,從百度上搜尋資料的人,有三到四成是為了非法的資訊;換句話說,把整個網站都快取了,卻只為了裡面一兩個MP3或影片?

    所以必要時會把該ISP的所有流量都擋回去吧。
  • edited 七月 2005
    我認為,不要刻意去擋,除非他們的行為已經影響到正常使用者的瀏覽了。
    而對於一些搞SEO的朋友,我今天給你們一個例子,那就是我個人的網誌。

    請在Google輸入:打雜工人。

    排名第一的就是了(以今天2005.07.03為準),我根本沒做任何的SEO。
  • edited 七月 2005
    其實你可以嘗試看看主體網站的細節,他們做了不少SEO工作(至少過去放了大量的關鍵字在網頁中),也許是搭了順風船
  • edited 十月 2005
    唉,作春秋大夢的人越來越多,搜尋引擎造成的流量也越來越多...

    現在又出現一個 inktomisearch.com 在快取資料。
  • edited 十月 2005
    想請問一下站長,要怎麼樣去防止這樣的情況發生
    小弟公司裡面的 log 可是有成千上萬筆的百度啊...
    inktomisearch.com 這個也有
    從今年七月就在掃瞄port 跟網站了.....=_="""
    直接封鎖他的網段嗎??
  • edited 十月 2005
    自己管理的主機比較容易,要封鎖網段或是限制流量都可以,只是我大多在虛擬主機環境中執行。

    一般如果比較正派的搜尋引擎,你只要主動封鎖了他常用的幾個網段就好,但是有些就是喜歡一直換網段來玩你...
  • edited 十月 2005
    inktomisearch.com 我最近也遇到....
    一下出現兩百多個 session 再跟我玩..Q_Q..
    火大封鎖該往段..
Sign In or Register to comment.