技術(shù)革新大趨勢!一文帶你讀懂大數(shù)據(jù)分布式存儲

黑馬程序員視頻庫
大型網(wǎng)站常常需要處理海量數(shù)據(jù),單臺計算機往往無法提供足夠的內(nèi)存空間,可以對這些數(shù)據(jù)進(jìn)行分布式存儲。比如Apache HadoopHDFS。

隨著信息時代的發(fā)展,大數(shù)據(jù)已經(jīng)成為當(dāng)今技術(shù)革新的一大發(fā)展趨勢。在大數(shù)據(jù)時代,數(shù)據(jù)呈指數(shù)級增長,催生了多種分布式存儲工具,并在組織中承擔(dān)了愈發(fā)重要的職責(zé)。

分布式系統(tǒng)就是為了處理更多數(shù)據(jù)而存在的,本文為大家總結(jié)整理了一篇關(guān)于分布式系統(tǒng)的學(xué)習(xí)筆記,超多干貨,下面一起來看看吧~

常用分布式方案

1.分布式應(yīng)用和服務(wù)

將應(yīng)用和服務(wù)進(jìn)行分層和分割,然后將應(yīng)用和服務(wù)模塊進(jìn)行分布式部署。這樣做不僅可以提高并發(fā)訪問能力、減少數(shù)據(jù)庫連接和資源消耗,還能使不同應(yīng)用復(fù)用共同的服務(wù),使業(yè)務(wù)易于擴(kuò)展。比如:分布式服務(wù)框架Dubbo。

2.分布式靜態(tài)資源

對網(wǎng)站的靜態(tài)資源如JS、CSS、圖片等資源進(jìn)行分布式部署可以減輕應(yīng)用服務(wù)器的負(fù)載壓力,提高訪問速度。比如:CDN。

3.分布式數(shù)據(jù)和存儲

大型網(wǎng)站常常需要處理海量數(shù)據(jù),單臺計算機往往無法提供足夠的內(nèi)存空間,可以對這些數(shù)據(jù)進(jìn)行分布式存儲。比如Apache HadoopHDFS。

4.分布式計算

隨著計算技術(shù)的發(fā)展,有些應(yīng)用需要非常巨大的計算能力才能完成,如果采用集中式計算,需要耗費相當(dāng)長的時間來完成。分布式計算將該應(yīng)用分解成許多小的部分,分配給多臺計算機進(jìn)行處理。這樣可以節(jié)約整體計算時間,大大提高計算效率。比如Apache HadoopMapReduce。

分布式和集群的對比

1.分布式:

是指在多臺不同的服務(wù)器中部署不同的服務(wù)模塊,通過遠(yuǎn)程調(diào)用協(xié)同工作,對外提供服務(wù)。

2.集群:

是指在多臺不同的服務(wù)器中部署相同應(yīng)用或服務(wù)模塊,構(gòu)成一個集群,通過負(fù)載均衡設(shè)備對外提供服務(wù)。

以上就是分布式系統(tǒng)的學(xué)習(xí)筆記,大家都看懂了嗎?如果還沒有過癮,想要了解更多,今晚來聽黑馬程序員《大數(shù)據(jù)時代的分布式存儲》呀!

THEEND

最新評論(評論僅代表用戶觀點)

更多
暫無評論