防砍機制的規則說明

房東：小小
發表時間：2007-02-12

1. 第一層保護
設定 robot.txt ，告訴君子型的網路機器人，這裡不歡迎網路機器人，
有關 robot.txt 設定，這裡有一個文件說明 robots.txt ，
http://www.kollar.com/robots.html

最簡單的方式就是在你的網頁根目錄下建一個叫: robots.txt 的檔案
檔案內容為;
User-agent: *
Disallow: /
就可以阻擋使用機器人程式的自動抓取了

2. 進階保護
在網站使用會員系統，進入者會先要求登入，未登入者，
將只能看到首頁及一些簡單的網頁，主要內容及目錄需要會員才能瀏覽。
不過無法防止會員使用TelPort砍站，因為會員只要在TelPort內輸入帳號跟密碼，
系統就無法阻擋了

3. 實體保護:
a. 每一次 page view 本站皆有紀錄來訪 IP, session , time ...
b. 每次 hit 會先接受檢查(已經登錄會員的 client,可直接通關)
c. 檢查規則 :
我得先說teleport 這類型的網路機器人特性:
c1.同時會開啟多個不同的虛擬瀏覽器,對同一站進行擷取
c2.紀錄會發現同一個 IP,在很短時間產生多個 session_id ,而且幾乎不重複

依照以上特性,本站檔IP的規則為:
在一特定時間內,例如 60秒 ,如果同一個 IP,對本站發出出過一個定額(例如 20次),且這超過一個限定的 session_id 數,那麼代表這是個不正常的連線, 將他寫入 bad_ip 的table 並紀錄限制再進入的時間為 120分鐘,也就是120分鐘後才解除入境許\可,

以上的數據只是約略的數據,實際還需要各人網站的頻寬微調....

PS. 以上文章出自神奇傑利網加上部分本人說明，另外，
雖然擋掉proxy 對不少使用者來說不太公平，但可以告知User不要用Proxy瀏覽，
這樣就不會有問題了。

贊助網站

廣利不動產-新板特區指名度最高、值得您信賴的好房仲
您的托付,廣利用心為您服務
廣利不動產-板橋在地生根最實在--新板特區指名度最高、值得您信賴的好房仲
完整房訊，房屋、店面熱門精選物件，廣利不動產優質仲介，房屋租賃、買賣資訊透明，交易真安心！

　共 0 人回應

姓名：

佈告內容：

其他選項: