對于網絡上存在的許多爬蟲，雖然有些是對網站有益的，但是也有一些對網站服務器造成了壓力。日前為消滅網絡爬蟲，谷歌，Facebook和雅虎合作開發了一個試點項目，叫做可信賴問責組織（TAG）。谷歌作為TAG廣告欺詐戰爭的主要貢獻者，為了抵御來自全球網絡的非人為廣告流量，提供了它們自己數據中心的黑名單。數據中心兩個主要應對爬蟲的軟件是UrlSpirit and HitLeap，今年5月份就有超過6500個數據中心安裝了UrlSpirit，而6月中旬有4800個數據中心安裝了HitLeap。
責任編輯：王李通
2015-07-23 09:38:01
摘自：中國青年網
對于網絡上存在的許多爬蟲，雖然有些是對網站有益的，但是也有一些對網站服務器造成了壓力。谷歌作為TAG廣告欺詐戰爭的主要貢獻者，為了抵御來自全球網絡的非人為廣告流量，提供了它們自己數據中心的黑名單。
對于網絡上存在的許多爬蟲，雖然有些是對網站有益的，但是也有一些對網站服務器造成了壓力。日前為消滅網絡爬蟲，谷歌，Facebook和雅虎合作開發了一個試點項目，叫做可信賴問責組織（TAG）。谷歌作為TAG廣告欺詐戰爭的主要貢獻者，為了抵御來自全球網絡的非人為廣告流量，提供了它們自己數據中心的黑名單。數據中心兩個主要應對爬蟲的軟件是UrlSpirit and HitLeap，今年5月份就有超過6500個數據中心安裝了UrlSpirit，而6月中旬有4800個數據中心安裝了HitLeap。
熱文推薦
企業網版權所有?2010-2024 京ICP備09108050號-6
京公網安備 11010502049343號
