建站
咨詢
售后
建站咨詢
新聞中心
MPP與Hadoop是什么關(guān)系？
先從NUMA說(shuō)起吧，NUMA全稱為Non-Uniform Memory Access，是主流服務(wù)服務(wù)器為了提高SMP的可擴(kuò)展性而采用的一種體系結(jié)構(gòu)。主流服務(wù)器一般由多個(gè)NUMA節(jié)點(diǎn)組成，每個(gè)NUMA節(jié)點(diǎn)是一個(gè)SMP結(jié)構(gòu)，一般由多個(gè)CPU組成，并且具有本地內(nèi)存和IO設(shè)備。NUMA節(jié)點(diǎn)可以直接訪問(wèn)本地內(nèi)存，也可以通過(guò)NUMA互聯(lián)模塊訪問(wèn)其他NUMA節(jié)點(diǎn)的內(nèi)存，但是訪問(wèn)本地內(nèi)存的速度遠(yuǎn)遠(yuǎn)高于遠(yuǎn)程訪問(wèn)速度，因此，開(kāi)發(fā)程序要盡量減少不同NUMA節(jié)點(diǎn)之間的信息交互。
創(chuàng)新互聯(lián)專注為客戶提供全方位的互聯(lián)網(wǎng)綜合服務(wù)，包含不限于網(wǎng)站設(shè)計(jì)、成都網(wǎng)站設(shè)計(jì)、沿河網(wǎng)絡(luò)推廣、小程序制作、沿河網(wǎng)絡(luò)營(yíng)銷、沿河企業(yè)策劃、沿河品牌公關(guān)、搜索引擎seo、人物專訪、企業(yè)宣傳片、企業(yè)代運(yùn)營(yíng)等，從售前售中售后，我們都將竭誠(chéng)為您服務(wù)，您的肯定，是我們最大的嘉獎(jiǎng)；創(chuàng)新互聯(lián)為所有大學(xué)生創(chuàng)業(yè)者提供沿河建站搭建服務(wù)，24小時(shí)服務(wù)熱線：13518219792，官方網(wǎng)址：www.cdcxhl.com
MPP是一種海量數(shù)據(jù)實(shí)時(shí)分析架構(gòu)。MPP作為一種不共享架構(gòu)，每個(gè)節(jié)點(diǎn)運(yùn)行自己的操作系統(tǒng)和數(shù)據(jù)庫(kù)等，節(jié)點(diǎn)之間信息交互只能通過(guò)網(wǎng)絡(luò)連接實(shí)現(xiàn)。MPP架構(gòu)目前被并行數(shù)據(jù)庫(kù)廣泛采用，一般通過(guò)scan、sort和merge等操作符實(shí)時(shí)返回查詢結(jié)果。目前采用MPP架構(gòu)的實(shí)時(shí)查詢系統(tǒng)有EMC Greenplum、HP Vertica和Google Dremel，這些都是實(shí)時(shí)數(shù)據(jù)處理領(lǐng)域非常有特點(diǎn)的系統(tǒng)，尤其是Dremel可以輕松擴(kuò)展到上千臺(tái)服務(wù)器，并在數(shù)秒內(nèi)完成TB級(jí)數(shù)據(jù)的分析。
Hadoop作為一個(gè)開(kāi)源項(xiàng)目群本身和MPP并沒(méi)有什么直接關(guān)系，Hadoop中的子項(xiàng)目MapReduce雖然也是做數(shù)據(jù)分析處理的，但是一般只適用于離線數(shù)據(jù)分析，區(qū)別與MPP較為明顯。因?yàn)镸ap和Reduce兩個(gè)過(guò)程涉及到輸出文件的存取和大量網(wǎng)絡(luò)傳輸，因此往往達(dá)不到實(shí)時(shí)處理的要求。與MapReduce相似的系統(tǒng)還有Microsoft Dryad和Google pregel。
綜上所述，NUMA是一種體系結(jié)構(gòu)，MPP是一種實(shí)時(shí)海量數(shù)據(jù)分析架構(gòu)，而Hadoop是一個(gè)關(guān)于數(shù)據(jù)存儲(chǔ)處理的項(xiàng)目群，其中的MapReduce是一種離線海量數(shù)據(jù)分析架構(gòu)。
到此，以上就是小編對(duì)于服務(wù)器smp技術(shù)的問(wèn)題就介紹到這了，希望這1點(diǎn)解答對(duì)大家有用。
網(wǎng)頁(yè)名稱：服務(wù)器三大體系SMP、NUMA、MPP介紹
標(biāo)題網(wǎng)址：http://www.5511xx.com/article/cceihie.html
