Hadoop集群資源管理器是什么？它是如何為上層應用提供資源管理和調(diào)度的呢？我們一起來看Apache Hadoop YARN的引入，為集群在利用率、資源統(tǒng)一管理和數(shù)據(jù)共享等方面帶來的巨大好處。

讓客戶滿意是我們工作的目標，不斷超越客戶的期望值來自于我們對這個行業(yè)的熱愛。我們立志把好的技術通過有效、簡單的方式提供給客戶，將通過不懈努力成為客戶在信息化領域值得信任、有價值的長期合作伙伴，公司提供的服務項目有：申請域名、雅安服務器托管、營銷軟件、網(wǎng)站建設、桃源網(wǎng)站維護、網(wǎng)站推廣。

從開發(fā)人員來講提交作業(yè)（應用）到YARN集群，通過YARN的UI來監(jiān)控和管理作業(yè)。Hadoop給開發(fā)員提供了三種主要YARN工具：（1）Hue Job Browser；（2）YARN Web UI；（3）YARN命令。YARN管理員可以使用Cloudera Manager，包含在Cloudera Express和ClouderaEnterprise中，對開發(fā)人員也有一些幫助。下面我們一起來看具體組件的作用：

（1）Hue Job Browser：可以監(jiān)控作業(yè)狀態(tài)、查看日志、殺掉作業(yè)

（2）YARN Web UI：Resource Manager UI是主要的入口點，運行在RM主機的8088端口，相比Hue，提供了更多明細視圖（可以查看每一個應用下面的任務，任務里面有多少attempt，以及一些日志情況），但是它不提供任何控制或者配置。在這里我們看一下YARN Web UI的類別：

1)Resource Manager UI：Nodes

2)Resource Manager UI：Applications

3)ResourceManager UI：Application Detail

（3）YARN命令行

1）通過命令配置和查看關于YARN集群的信息

a)yarn <command>

2）大多數(shù)YARN命令行工具是為管理員而不是開發(fā)員準備的

3）一些對開發(fā)員有用的命令

b)yarn application,使用-list來查看運行的應用,使用-kill來殺掉運行的應用.

c)yarn logs –applicationId<app-id>,查看特定應用的日志

（4）Cloudera Manager

Cloudera Manager提供了強大地從單個節(jié)點監(jiān)控和配置集群的能力

YARN作為Hadoop的資源管理器，給集群的資源管理與共享帶來了便捷，但是我們必須明確YARN 在實際應用中的特點，才能夠更好的掌握和應用。大數(shù)據(jù)由于當下發(fā)展的需要，給每一位想要從事或者已經(jīng)從事大數(shù)據(jù)的人員提供了機遇和挑戰(zhàn)，我們不僅要多方位思考總結，還要借鑒和學習別人的經(jīng)驗，不斷地改善自己的知識架構，才會取得更大的進步。平時可以關注“大數(shù)據(jù)cn”這樣的微信資訊平臺，上面分享的大數(shù)據(jù)相關知識對于我們從業(yè)者來說，很新穎獨特，對開闊我們的視野，拓展我們的知識面，激發(fā)我們的思維都有著很好地幫助作用！

另外有需要云服務器可以了解下創(chuàng)新互聯(lián)scvps.cn，海內(nèi)外云服務器15元起步，三天無理由+7*72小時售后在線，公司持有idc許可證，提供“云服務器、裸金屬服務器、高防服務器、香港服務器、美國服務器、虛擬主機、免備案服務器”等云主機租用服務以及企業(yè)上云的綜合解決方案，具有“安全穩(wěn)定、簡單易用、服務可用性高、性價比高”等特點與優(yōu)勢，專為企業(yè)上云打造定制，能夠滿足用戶豐富、多元化的應用場景需求。

分享題目：大數(shù)據(jù)資源如何管理-創(chuàng)新互聯(lián)
網(wǎng)頁網(wǎng)址：http://vcdvsql.cn/article20/csegjo.html

成都網(wǎng)站建設公司_創(chuàng)新互聯(lián)，為您提供小程序開發(fā)、搜索引擎優(yōu)化、建站公司、企業(yè)網(wǎng)站制作、網(wǎng)站策劃、關鍵詞優(yōu)化

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉載內(nèi)容為主，如果涉及侵權請盡快告知，我們將會在第一時間刪除。文章觀點不代表本網(wǎng)站立場，如需處理請聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉載，或轉載時需注明來源： 創(chuàng)新互聯(lián)