在這個信息爆炸的時代里，人們在交互過程中所產生的海量數據正在成為新的寶藏。電子商務、互聯網、制造業……越來越多的行業希望借助大數據技術對不同來源的數據進行深度分析，獲知客戶使用習慣、產品應用情況等等，進而制定更為有效的產品研發、市場推廣策略。
如果想要在海量數據里發掘出新的價值與商機，那么除了要擁有足夠數量的有效數據外，還要有能夠對數據進行存儲、分析、計算的硬件、軟件體系平臺，以及相應的安全保障措施。而早在兩年前，惠普AppSystem整合計算平臺產品線就推出了Hadoop專用計算平臺HP AppSystem for Apache Hadoop。HP AppSystem For Hadoop全面采用了英特爾的至強E5硬件平臺與CDH軟件平臺，將惠普旗下的服務器、存儲、網絡設備等硬件以及管理軟件進行優化整合，為企業提供了一個可以快速部署的分布式數據處理平臺，實現對大數據的有效挖掘分析。
Hadoop是一個能夠對大量數據進行分布式處理的軟件框架，屬于MPP（Massive Parallel Processing）分布式并行計算架構，其技術復雜，往往需要通過專家協助部署，如此高的技術門坎使得目前能夠利用Hadoop來處理大數據的企業并不多。而用戶借助HP AppSystem for Apache Hadoop平臺在30分鐘內就可部署完成規模為800個節點的Hadoop平臺。
下面就讓我們一起來認識一下HP AppSystem for Apache Hadoop平臺的組成。
惠普HP AppSystem for Apache Hadoop平臺的硬件包括第八代服務器ProLiant DL380和HP Networking 5830交換機。ProLiant DL380配備2個10GbE網絡控制器，以及大容量的內存。比如，惠普ProLiant DL388p Gen8就標配了兩顆頻率為2GHz的Xeon E5-2650處理器，八核共享20MB的三級緩存，支持十六線程傳輸，采用的32nm制作工藝，內存大小為32GB，硬盤支持熱插拔擴展。
實際上大數據分析的背后是大量的數據實時交換，這意味著Hadoop環境里的網絡流量負載將會很高。HP Networking 5830交換機能夠支持超過1GB的數據報文緩存，其所獨有的IRF網絡虛擬化技術，還可確保Hadoop環境后備系統的高可用性。
在軟件方面惠普Hadoop平臺采用了HP Insight Cluster Manager，這套軟件能夠幫助企業用戶輕松跨過Hadoop的技術門坎，只要按幾個鍵即可完成Hadoop集群的部署工作。而且其延展性可達1,000個節點，并在管理功能上提供了性能監控與可視化管理工具。
另外，惠普Hadoop平臺還可與Vertica實時分析工具一起使用，通過Hadoop平臺先將數據處理成結構化數據與半結構化數據，再由Vertica進行實時數據分析。
這里要提到一點的是，HP Autonomy所推出的新版HP IDOL for Hadoop把Hadoop從某種程度上較窄的傳統數據存儲倉庫變成強大的智能分析平臺，能夠從PB級的數據中獲得洞察。通過把情感分析、集群和實體抽取等強大的HP IDOL功能嵌入Hadoop節點，企業可以進行先進的客戶、安全、運營分析等等。
以業界標準的Hadoop性能測試工具Apache Hadoop Terasoft Bechmark來比較，在一個由18臺DL 380服務器與惠普網絡設備組成的HP AppSystem for Apache Hadoop平臺，可在約1.5小時內處理10TB的數據。
據了解，惠普Hadoop產品支持開放標準，對于目前主要的Hadoop分支版本皆可支持。而且惠普還推出兩項與Hadoop相關的顧問服務：HP Big Data Strategy Workshop服務和HP Roadmap Service for Apache Hadoop顧問服務，前者為企業提供大數據策略教育培訓，后者可以協助企業規劃Hadoop策略與部署計劃。
京公網安備 11010502049343號