當前位置:首頁 » 雲伺服器 » 什麼伺服器適合搭建大數據集群

什麼伺服器適合搭建大數據集群

發布時間: 2022-10-08 05:20:01

『壹』 阿里雲的學生伺服器可以搭建大數據cdh集群嗎

不建議用學生伺服器來搭建CDH集群,跑不起來。買這個還不如去華為雲買個搞活動的2C4G,一百出頭搞定

『貳』 做一個信息平台 然後並發性要求5000戶 做一個 資料庫集群 咨詢一下需要多少伺服器 和什麼配置

這樣的話,對伺服器性能要求非常高了。推薦你看看國產品牌正睿的這款雙路四核伺服器。標配一顆至強E5645六核十二線程處理器(2.4GHz/5.86GT/12M緩存),英特爾5500伺服器晶元組主板,4G DDR3 REG ECC 1333MHz內存,SAS 300G企業級硬碟,4個熱插拔盤位,雙千兆網卡,性能可以說是非常不錯。如果以後隨著業務量的增長,覺得性能不夠用了,還可以擴展到兩顆處理器,達成12顆處理核心,24條處理線程(在任務管理器處能看到24個處理核心的格子- -~很NB),最大支持96GB內存。
產品型號:I2696184S-E
產品類型:雙路六核機架式伺服器
處 理 器:Xeon E5645
內 存:4G DDR3 REG ECC
硬 盤:SAS 300G
機 構:1U機架式
價 格:¥14990
銀牌服務
重慶五年免費上門服務,全國三年免費上門服務,關鍵部件三年以上免費質保。

建議把處理器擴展到2個,達成物理12核心,24條計算線程,跑資料庫非常快,然後把內存升級到12G DDR3 REG ECC,總價也就在22000不到。性能就非常強悍了。。。如果需要做集群,就再增加這種伺服器就可以了。支持5000並發信息系統,沒問題。

給你推薦的是國產品牌正睿的伺服器產品,他們的產品性價比很高,做工很專業,兼容性,質量之類的都有保障,售後也很完善,3年免費質保,3年免費上門服務,在業界口碑很不錯。

『叄』 求伺服器集群方案

大多數模式下,集群中所有的計算機擁有一個共同的名稱,集群內任一系統上運行的服務可被所有的網路客戶所使用。Cluster必須可以協調管理各分離的組件的錯誤和失敗,並可透明地向Cluster中加入組件。

一個Cluster包含多台(至少二台)擁有共享數據存儲空間的伺服器。任何一台伺服器運行一個應用時,應用數據被存儲在共享的數據空間內。每台伺服器的操作系統和應用程序文件存儲在其各自的本地儲存空間上。

Cluster內各節點伺服器通過一內部區域網相互通訊。當一台節點伺服器發生故障時,這台伺服器上所運行的應用程序將在另一節點伺服器上被自動接管。當一個應用服務發生故障時,應用服務將被重新啟動或被另一台伺服器接管。當以上任一故障發生時,客戶將能很快連接到新的應用服務上。

集群的硬體配置

鏡像伺服器雙機

集群中鏡像伺服器雙機系統是硬體配置最簡單和價格最低廉的解決方案,通常鏡像服務的硬體配置需要兩台伺服器,在每台伺服器有獨立操作系統硬碟和數據存貯硬碟,每台伺服器有與客戶端相連的網卡,另有一對鏡像卡或完成鏡像功能的網卡。

鏡像伺服器具有配置簡單,使用方便,價格低廉諸多優點,但由於鏡像伺服器需要採用網路方式鏡像數據,通過鏡像軟體實現數據的同步,因此需要佔用網路伺服器的CPU及內存資源,鏡像伺服器的性能比單一伺服器的性能要低一些。

有一些鏡像伺服器集群系統採用內存鏡像的技術,這個技術的優點是所有的應用程序和網路操作系統在兩台伺服器上鏡像同步,當主機出現故障時,備份機可以在幾乎沒有感覺的情況下接管所有應用程序。因為兩個伺服器的內存完全一致,但當系統應用程序帶有缺陷從而導致系統宕機時,兩台伺服器會同步宕機。這也是內存鏡像卡或網卡實現數據同步,在大數據量讀寫過程中兩台伺服器在某些狀態下會產生數據不同步,因此鏡像伺服器適合那些預算較少、對集群系統要求不高的用戶。

硬體配置範例:

網路伺服器 兩台

伺服器操作系統硬碟 兩塊

伺服器數據存貯硬碟 視用戶需要確定

伺服器鏡像卡(部分軟體可使用標准網卡) 兩塊

網路服務網卡 兩塊三、雙機與磁碟陣列櫃

與鏡像伺服器雙機系統相比,雙機與磁碟陣列櫃互聯結構多出了第三方生產的磁碟陣列櫃,目前,豪威公司、精業公司等許多公司都生產有磁碟陣列櫃,在磁碟陣列櫃中安裝有磁碟陣列控制卡,陣列櫃可以直接將櫃中的硬碟配置成為邏輯盤陣。磁碟陣列櫃通過SCSI電纜與伺服器上普通SCSI卡相連,系統管理員需直接在磁碟櫃上配置磁碟陣列。

雙機與磁碟陣列櫃互聯結構不採用內存鏡像技術,因此需要有一定的切換時間(通常為60?D?D180秒),它可以有郊的避免由於應用程序自身的缺陷導致系統全部宕機,同時由於所有的數據全部存貯在中置的磁碟陣列櫃中,當工作機出現故障時,備份機接替工作機,從磁碟陣列中讀取數據,所以不會產生數據不同步的問題,由於這種方案不需要網路鏡像同步,因此這種集群方案伺服器的性能要比鏡像伺服器結構高出很多。

雙機與磁碟陣列櫃互聯結構的缺點是在系統當中存在單點錯的缺陷,所謂單點錯是指當系統中某個部件或某個應用程序出現故障時,導致所有系統全部宕機。在這個系統中磁碟陣列櫃是會導致單點錯,當磁碟陣列櫃出現邏輯或物理故障時,所有存貯的數據會全部丟失,因此,在選配這種方案時,需要選用一個品質與售後服務較好的產品。

硬體配置範例:

網路伺服器 兩台

伺服器操作系統硬碟 兩塊

第三方生產的磁碟陣列櫃 一台

磁碟櫃專用SCSI電線 兩根

磁碟陣列櫃數據存貯硬碟 視用戶需求確定

網路服務網卡 兩塊

除此之外,一些廠商還有更優秀的技術的解決方案,比如 HP.

HP雙機雙控容錯系統

HP NetServer為雙機雙控容錯系統提供了高品質和高可靠的硬體基礎……

HP雙機雙控容錯系統結合了HP伺服器產品的安全可靠性與Cluster技術的優點,相互配合二者的優勢。

硬體配置範例:

HP L系統的網路伺服器 兩台

伺服器操作系統硬碟 兩塊

HP硬碟存貯櫃(SS/6,RS/8,RS/12) 一台

磁碟櫃專用SCSI集群適配電纜 兩根

磁碟櫃數據存貯硬碟 視用戶需求確定

HP集群專用陣列卡 兩塊

網路服務網卡 兩塊五、HP光纖通道雙機雙控集群系統

光纖通道是一種連接標准,可以作為SCSI的一種替代解決方案,光纖技術具有高帶寬、抗電磁干擾、傳輸距離遠、質量高、擴展能力強等特性,目前在FC-AL仲裁環路上可接入126個設備。

光纖設備提供了多種增強的連接技術,大大方便了用戶使用。伺服器系統可以通過光纜遠程連接,最大可跨越10公里的距離。它允許鏡像配置,這樣可以改善系統的容錯能力。伺服器系統的規模將更加靈活多變。SCSI每條通道最多可連接15個設備,而光纖仲裁環路最多可以連接126個設備。

光纖集群系統組成:

HP光纖集群系統硬體設備包括有兩台HP伺服器(需支持光纖卡,目前有LC2000、LH3000、LH4、 LH6000、LT6000、LXr8000、LXR8500)及光纖適配卡,可以使用RS/12FC光纖磁碟陣列櫃,需另加一對或兩對網卡用於心跳檢測和與客戶端連接。在配置過程中還需另外選配光纖卡到光纖存貯設備的光纖電纜。

硬體配置:

HPL系統的網路伺服器 兩台

伺服器操作系統硬碟 兩塊

HP光纖陣列存貯櫃(RS/12FC) 一台

光纖磁碟櫃專用光纖電纜 兩根

光纖磁碟櫃數據存貯硬碟 視用戶需求確定

HP光纖適配卡 兩塊

網路服務網卡 兩塊

集群的軟體配置

基於NT平台的集群軟體

Microsoft的MSCS,也有許多第三方的專業軟體公司開發的集群軟體,如豪威的DATAWARE,VIN CA公司的STANDBY SERVER,NSI公司的DOUBLE-TAKE.

MS WolfPack的特點

MS WolfPack是MS Cluster server的別稱,是 微軟針對Cluster技術研製開發的雙機軟體。它集成在NT SERVER上,支持由二台機器組成的雙機系統,提供一種高可用且易管理的應用環境。

主要特點:

自動檢測和修復伺服器或應用程序的錯誤

可實現對伺服器中應用程序的切換

可通過TCP/IP連接各種客戶端,如MS-DOS、WINDOWS 3.X/9X/NT,Apple Macintosh、UNIX等

生產主機無需人工干涉即可自動恢復數據並接管任務

易管理性:

可自動審核伺服器和應用程序的工作狀態

可建立高可用性的應用程序、文件共享、列印請求等

可靈活設置應用程序和數據的恢復策略

簡單操作即可進行應用程序的離線,重新再線,伺服器間的遷移。

目前,WINDOWS 2000 Advanced Server與WINDOWS 2000 DataCenter Server都集成有更先進集群技術。

其它的網路操作系統平台上也有許多集群軟體,比如:

基於novell平台的集群軟體有Novell HA Server、Novell SFT III

基於sco UNIX平台的集群軟體有Sentinel集群軟體

基於Linux平台的集群軟體有TurboCluster

集群技術的發展趨勢

集群技術隨著伺服器硬體系統與網路操作系統的發展將會在可用性、高可靠性、系統冗餘等方面逐步提高。未來的集群可以依靠集群文件系統實現對系統中的所有文件、設備和網路資源的全局訪問,並且生成一個完整的系統映像。這樣,無論應用程序在集群中的哪台伺服器上,集群文件系統允許任何用戶(遠程或本地)都可以對這個軟體進行訪問。任何應用程序都可以訪問這個集群任何文件。甚至在應用程序從一個節點轉移到另一個節點的情況下,無需任何改動,應用程序就可以訪問系統上的文件。

『肆』 大數據一定要用伺服器集群嗎

大數據一定要用伺服器集群,因為大數據是對海量數據進行合法收集後進行使用。海量的數據需要龐大的存儲設備來存儲,所以必須要用伺服器集群。

『伍』 如何搭建伺服器集群

可以通過兩種方法創建集群:1.創建一個集群,並同時創建若干個雲伺服器。可以通過容器服務直接創建一個包含若干個新雲伺服器的集群。2.創建一個零節點的集群並添加已有的雲伺服器。創建一個零節點的集群。如果您已經在雲伺服器 ECS 上購買了若干個雲伺服器,可以在容器服務上創建一個零節點的集群。

『陸』 支持大型資料庫的伺服器需要什麼配置

選擇資料庫伺服器的原則:

1、高性能原則:保證所選購的伺服器,不僅能夠滿足運營系統的運行和業務處理的需要,而且能夠滿足一定時期業務量的增長。一般可以根據經驗公式計算出所需的伺服器TpmC值(Tpmc是衡量計算機系統的事務處理能力的程序)。

後比較各伺服器廠商和TPC組織公布的TpmC值,選擇相應的機型。同時,用伺服器的市場價/報價除去計算出來的TpmC值得出單位TpmC值的價格,進而選擇高性能價格比的伺服器。

2、可靠性原則:可靠性原則是所有選擇設備和系統中首要考慮的,尤其是在大型的、有大量處理要求的、需要長期運行的系統上。考慮伺服器系統的可靠性,不僅要考慮伺服器單個節點的可靠性或穩定性,而且要考慮伺服器與相關輔助系統之間連接的整體可靠性。

(6)什麼伺服器適合搭建大數據集群擴展閱讀:

優點:

1、編程量減少

資料庫伺服器提供了用於數據操縱的標准介面API(Application Programming Interface,應用程序編程接 口)。

2、資料庫安全高

資料庫伺服器提供監控性能、並發控制等工具。由DBA(Database Administrator,資料庫管理員)統一負 責授權訪問資料庫及網路管理。

3、數據可靠性管理

資料庫伺服器提供統一的資料庫備份/恢復、啟動/停止資料庫的管理工具。

4、計算機資源利用充分

資料庫伺服器把數據管理及處理工作從客戶機上分離出來,使網路中各計算機資源能靈活分配、各盡其用。

『柒』 什麼伺服器好

華碩伺服器和網新易得伺服器。
堅若磐石。這是華碩品牌的產品特點,耐用實用好用是特點,國際化大品牌,性價比非常高;
網新易得伺服器或許不那麼有名,但他是屬於國內十大伺服器品牌之一,並且是最具性價比的品牌之一。之所以推薦這個品牌給你,是因為你在華東地區,而網新易得的公司全稱叫上海浙大網新易得科技發展有限公司,對於未來的售後服務方面,你完全可以放心。
另外,網新易得還同時是華碩伺服器的華東總代理,如果你選擇的是華碩伺服器,找他們也是沒錯的。
上海浙大網新易得科技發展有限公司是一家專注於IA構架伺服器研發、生產、銷售和服務的專業公司,是英特爾在中國地區三家伺服器組裝中心(SAC)之一,其
「易得」品牌伺服器在廣大終端用戶和代理商中廣受好評。2002年,國內著名的IT上市公司浙大網新參股並控股。新公司依託浙江大學一流的計算機應用技術和研發力量,加上雄厚的資本保證,並結合英特爾最新的領先技術,在教育行業、電信應用、中小企業信息化建設、電子政務、游戲網站等行業都深受歡迎,贏得了大量的客戶。網新易得致力於成為國內領先的IA架構的品牌伺服器廠商及應用解決方案供應商,將成為國內最著名的伺服器品牌和網路創新應用的引領者。
·

『捌』 大數據平檯布局,應該選什麼樣的伺服器浪潮伺服器怎麼樣

大數據平檯布局,一方面是選擇伺服器,二是選擇機房。對於伺服器來說,其實同等配置下性能相差不是很大。浪潮、華為、聯想、DELL都可以,IBM的價格要略高一些。對於機房來說,要選擇穩定性高,安全性高的機房。中關村軟體園機房和銅牛機房都是不錯的機房,裡面有很多大數據、金融等用戶,可以考慮。

熱點內容
監控腳本實用 發布:2022-11-30 14:14:28 瀏覽:376
九陰真經顯血腳本 發布:2022-11-30 14:14:22 瀏覽:195
浪潮伺服器mgn口地址 發布:2022-11-30 14:13:41 瀏覽:817
linux鎖屏設置 發布:2022-11-30 14:08:20 瀏覽:894
演算法轉讓 發布:2022-11-30 14:07:24 瀏覽:22
我的世界為什麼從伺服器斷開連接 發布:2022-11-30 14:07:04 瀏覽:425
怎麼擠出母乳存儲袋中的空氣 發布:2022-11-30 14:05:32 瀏覽:31
linuxbin文件 發布:2022-11-30 14:01:19 瀏覽:478
購物網站源碼php 發布:2022-11-30 13:58:15 瀏覽:472
python執行java 發布:2022-11-30 13:56:23 瀏覽:940