精品国产一级在线观看,国产成人综合久久精品亚洲,免费一级欧美大片在线观看

當前位置:存儲行業動態 → 正文

從色情網站窺大數據的藍海

責任編輯:vivian |來源:企業網D1Net  2012-04-13 09:13:59 本文摘自:新浪博客

色情網站有多大?根據谷歌旗下廣告服務商Doubleclick的數據顯示,獨立訪問量前500名的網站中,竟有數十個是成人網站。而色情網站的數據流量又極大,有人估計,色情網站的數據傳送量可能占整個互聯網的30%。


從色情網站窺大數據的藍海

 

生活在互聯網世界的人,都曾或多或少地瀏覽過在許多國家仍受管制的色情網站。我們很難洞察這類網站的發展狀況,因為相關的確切數據實在是少之又少??梢钥隙ǖ氖?,色情網站的訪問量肯定少不了。事實證明上述猜測是正確的,因為根據谷歌旗下廣告服務商Doubleclick的數據顯示,獨立訪問量前500名的網站中,竟有數十個是成人網站!

世界上最大的色情網站Xvideos每月有44億的訪問量,這個數字是CNN官網或24小時專門播放體育節目ESPN電視網的訪問量的3倍,是社交新聞站點Reddit的2倍。YouPorn、Tube8和Pornhub這些大型的色情網站,其訪問量也可以讓除了Google和Facebook等超大型網站之外的小網站們相形見絀。

從訪問量中,我們只能得出色情網站要比非色情網站更受歡迎這個結論。40億訪問量聽起來確實是個天文數字,但是當你將用戶在色情網站上做的事考慮在內,你就會發現,色情網站的大小和規模也不可小覷。

網站規模

色情網站和非色情網站的主要區別就是訪問者的停留時間。Engadget和ExtremeTech這類科技網站的用戶平均停留時間在3到6分鐘之間,這足以讓用戶閱讀完幾篇文章了;而色情網站的用戶停留時間則在15到20分鐘之間。

兩者之間的差異也情有可原,因為大多數網站的內容主要是文字和圖片,大型色情網站則力推視頻內容,眾所周知,看完一段視頻所花的時間可比閱讀完一篇文章花的多。ExtremeTech主頁的數據大小約為數百萬字節,但一段只有480×200低分辨率的色情視頻,每秒的數據量就在10萬字節左右,15分鐘的視頻就可以耗掉約9千萬字節的流量。將9千萬字節乘以Xvideos網站每月約3.5億的訪問人數,就可以得出Xvideos每月需要處理29PB的字節(1PB=1024TB,1TB=1024GB),即每秒50GB字節的的數據傳送。

簡而言之,色情網站每天需要處理海量的數據。在純帶寬(單位時間內可傳輸的數據量)上,美國本土能夠與之匹敵的也僅有視頻網站YouTube或Hulu了。色情網站的規模大到難以想象,排名第二的YouPorn的純帶寬都要比Hulu大出6倍。

網站的基礎設施

與僅僅提供文字和圖片相比,視頻服務所需要的資源可要多得多了,它需要大量的數據儲存、較短的CPU周期、內部I/O和高帶寬等。

雖然說色情網站各不相同,但是大多數色情網站都會儲存大約50到200TB的色情資料,對一個網站來說,這可不是一個小數目。不過幸好現在2TB的硬盤驅動器價格低廉且種類繁多,因此這對色情網站來說應該不算是太大的問題。

色情網站需要提供數千個動態的、可搜索的視頻數據庫,當有人點擊一個視頻時,文件會經過硬盤讀取繼而上傳到網絡上,這是一個繁雜的過程,而CPU周期和I/O能夠影響數據的讀取和上傳的快慢。除此之外,在硬件方面,色情網站還需要四核機架服務器、千兆交換機和負載均衡等。在軟件方面,大多數色情網站會使用快速、靈敏的數據庫,如Redis來儲存和提取視頻,還有輕量級、高性能的Nginx等來作為網頁的HTTP服務器。

在帶寬上,拿上面的Xvideos為例,大型的色情網站需要有足夠的網絡連通性來完成每秒400Gb的數據傳送。而且這還只是平均的數據傳輸速率,在高峰時段,Xvideos的背板帶寬可以飆升至每秒1000Gb甚至更多。當然了,有許多方法可以解決流量過多產生的問題,如網站可以成立自己的數據中心,或租用大型數據中心的一些機架服務器,或使用如亞馬遜或微軟提供的云儲存等。

真實的范例

世界第二大色情網站YouPorn給我們提供了一些一手的數據,看完你就會發現,事實上,谷歌的Doubleclick廣告服務商低估了色情網站的吸引力。

YouPorn有超過100TB的色情資料,每天的頁面訪問量超過1億,這就意味著它每天的數據傳輸量有950TB之多,大多數的數據傳送用在了加載視頻上。按照上面的數據計算,YouPorn每月的數據處理量有28PB,因此,排名第一的Xvideos的數據傳送肯定不止29PB,它每月的數據傳送量估計在35到40PB之間。在高峰時間段,YouPorn每秒需要處理100GB(每秒800Gb)的數據量,這個數據量等于YouPorn每秒傳送了10多張雙層的DVD。

在軟件方面,YouPorn完全使用Redis進行數據存儲,并使用MySQL小型數據庫管理系統對Redis進行添加或管理。網頁的HTTP服務器是Nginx,負載均衡則使用的是HAProxy和Varnish。Redis服務器每秒需要處理30萬個頁面請求,每小時會記錄下8到15GB的數據(包括用戶登錄、觀看記錄等),YouPorn認為Redis處理每天2億的訪問量不成問題。

互聯網只能處理50Tb每秒的數據,換而言之,單單一個YouPorn的流量就占了整個互聯網的2%。類似YouPorn這樣的色情網站有數十個之多,因此,認為色情網站的數據傳送量占據整個互聯網的30%就不算夸張了。

關鍵字:大數據

本文摘自:新浪博客

x 從色情網站窺大數據的藍海 掃一掃
分享本文到朋友圈
當前位置:存儲行業動態 → 正文

從色情網站窺大數據的藍海

責任編輯:vivian |來源:企業網D1Net  2012-04-13 09:13:59 本文摘自:新浪博客

色情網站有多大?根據谷歌旗下廣告服務商Doubleclick的數據顯示,獨立訪問量前500名的網站中,竟有數十個是成人網站。而色情網站的數據流量又極大,有人估計,色情網站的數據傳送量可能占整個互聯網的30%。


從色情網站窺大數據的藍海

 

生活在互聯網世界的人,都曾或多或少地瀏覽過在許多國家仍受管制的色情網站。我們很難洞察這類網站的發展狀況,因為相關的確切數據實在是少之又少??梢钥隙ǖ氖牵榫W站的訪問量肯定少不了。事實證明上述猜測是正確的,因為根據谷歌旗下廣告服務商Doubleclick的數據顯示,獨立訪問量前500名的網站中,竟有數十個是成人網站!

世界上最大的色情網站Xvideos每月有44億的訪問量,這個數字是CNN官網或24小時專門播放體育節目ESPN電視網的訪問量的3倍,是社交新聞站點Reddit的2倍。YouPorn、Tube8和Pornhub這些大型的色情網站,其訪問量也可以讓除了Google和Facebook等超大型網站之外的小網站們相形見絀。

從訪問量中,我們只能得出色情網站要比非色情網站更受歡迎這個結論。40億訪問量聽起來確實是個天文數字,但是當你將用戶在色情網站上做的事考慮在內,你就會發現,色情網站的大小和規模也不可小覷。

網站規模

色情網站和非色情網站的主要區別就是訪問者的停留時間。Engadget和ExtremeTech這類科技網站的用戶平均停留時間在3到6分鐘之間,這足以讓用戶閱讀完幾篇文章了;而色情網站的用戶停留時間則在15到20分鐘之間。

兩者之間的差異也情有可原,因為大多數網站的內容主要是文字和圖片,大型色情網站則力推視頻內容,眾所周知,看完一段視頻所花的時間可比閱讀完一篇文章花的多。ExtremeTech主頁的數據大小約為數百萬字節,但一段只有480×200低分辨率的色情視頻,每秒的數據量就在10萬字節左右,15分鐘的視頻就可以耗掉約9千萬字節的流量。將9千萬字節乘以Xvideos網站每月約3.5億的訪問人數,就可以得出Xvideos每月需要處理29PB的字節(1PB=1024TB,1TB=1024GB),即每秒50GB字節的的數據傳送。

簡而言之,色情網站每天需要處理海量的數據。在純帶寬(單位時間內可傳輸的數據量)上,美國本土能夠與之匹敵的也僅有視頻網站YouTube或Hulu了。色情網站的規模大到難以想象,排名第二的YouPorn的純帶寬都要比Hulu大出6倍。

網站的基礎設施

與僅僅提供文字和圖片相比,視頻服務所需要的資源可要多得多了,它需要大量的數據儲存、較短的CPU周期、內部I/O和高帶寬等。

雖然說色情網站各不相同,但是大多數色情網站都會儲存大約50到200TB的色情資料,對一個網站來說,這可不是一個小數目。不過幸好現在2TB的硬盤驅動器價格低廉且種類繁多,因此這對色情網站來說應該不算是太大的問題。

色情網站需要提供數千個動態的、可搜索的視頻數據庫,當有人點擊一個視頻時,文件會經過硬盤讀取繼而上傳到網絡上,這是一個繁雜的過程,而CPU周期和I/O能夠影響數據的讀取和上傳的快慢。除此之外,在硬件方面,色情網站還需要四核機架服務器、千兆交換機和負載均衡等。在軟件方面,大多數色情網站會使用快速、靈敏的數據庫,如Redis來儲存和提取視頻,還有輕量級、高性能的Nginx等來作為網頁的HTTP服務器。

在帶寬上,拿上面的Xvideos為例,大型的色情網站需要有足夠的網絡連通性來完成每秒400Gb的數據傳送。而且這還只是平均的數據傳輸速率,在高峰時段,Xvideos的背板帶寬可以飆升至每秒1000Gb甚至更多。當然了,有許多方法可以解決流量過多產生的問題,如網站可以成立自己的數據中心,或租用大型數據中心的一些機架服務器,或使用如亞馬遜或微軟提供的云儲存等。

真實的范例

世界第二大色情網站YouPorn給我們提供了一些一手的數據,看完你就會發現,事實上,谷歌的Doubleclick廣告服務商低估了色情網站的吸引力。

YouPorn有超過100TB的色情資料,每天的頁面訪問量超過1億,這就意味著它每天的數據傳輸量有950TB之多,大多數的數據傳送用在了加載視頻上。按照上面的數據計算,YouPorn每月的數據處理量有28PB,因此,排名第一的Xvideos的數據傳送肯定不止29PB,它每月的數據傳送量估計在35到40PB之間。在高峰時間段,YouPorn每秒需要處理100GB(每秒800Gb)的數據量,這個數據量等于YouPorn每秒傳送了10多張雙層的DVD。

在軟件方面,YouPorn完全使用Redis進行數據存儲,并使用MySQL小型數據庫管理系統對Redis進行添加或管理。網頁的HTTP服務器是Nginx,負載均衡則使用的是HAProxy和Varnish。Redis服務器每秒需要處理30萬個頁面請求,每小時會記錄下8到15GB的數據(包括用戶登錄、觀看記錄等),YouPorn認為Redis處理每天2億的訪問量不成問題。

互聯網只能處理50Tb每秒的數據,換而言之,單單一個YouPorn的流量就占了整個互聯網的2%。類似YouPorn這樣的色情網站有數十個之多,因此,認為色情網站的數據傳送量占據整個互聯網的30%就不算夸張了。

關鍵字:大數據

本文摘自:新浪博客

電子周刊
回到頂部

關于我們聯系我們版權聲明隱私條款廣告服務友情鏈接投稿中心招賢納士

企業網版權所有 ©2010-2024 京ICP備09108050號-6 京公網安備 11010502049343號

^
  • <menuitem id="jw4sk"></menuitem>

    1. <form id="jw4sk"><tbody id="jw4sk"><dfn id="jw4sk"></dfn></tbody></form>
      主站蜘蛛池模板: 清丰县| 通道| 鹤岗市| 布拖县| 汉寿县| 密山市| 佛冈县| 太保市| 新晃| 武隆县| 黑龙江省| 开远市| 驻马店市| 东源县| 清镇市| 永泰县| 长宁区| 伊通| 绥宁县| 涞源县| 西畴县| 常山县| 齐河县| 庆阳市| 扎鲁特旗| 洛川县| 汽车| 孟津县| 宁国市| 利辛县| 太仆寺旗| 宣汉县| 凉山| 香港| 二连浩特市| 和政县| 文成县| 柯坪县| 临夏市| 托克逊县| 潮安县|