這篇文章主要講解了“hive與hadoop有什么聯系”,文中的講解內容簡單清晰,易于學習與理解,下面請大家跟著小編的思路慢慢深入,一起來研究和學習“hive與hadoop有什么聯系”吧!
這篇文章主要講解了“hive與hadoop有什么聯系”,文中的講解內容簡單清晰,易于學習與理解,下面請大家跟著小編的思路慢慢深入,一起來研究和學習“hive與hadoop有什么聯系”吧!
創新互聯公司主要從事成都網站設計、網站建設、網頁設計、企業做網站、公司建網站等業務。立足成都服務安溪,十載網站建設經驗,價格優惠、服務專業,歡迎來電咨詢建站服務:028-86922220
解析:
1、提交sql 交給驅動
2、驅動編譯:解析相關的字段表信息
3、去metastore查詢相關的信息 返回字段表信息
4、編譯返回信息 發給驅動
5、驅動發送一個執行計劃 交給執行引擎
6、執行計劃 (三種形式: metastore、namenode、metastore+namenode+mapreduce)
形式一 > DDL 對數據庫表的操作的 直接和metastore交互 。 比如:create table t1(name string);
形式二 > dfs ops 直接和namenode取數據 。 比如: select * from t1;
形式三 > 把job交給job tracker,讓task tracker執行 返回執行信息 + 完成job返回數據信息、找namenode查數據 。
比如:select * from t1 where col=X ;
7、返回結果信息集
總結: hive 運行在 hadoop 之上, 某些操作需要調用 hdfs 中的 mapreduce 。 hive 元數據存儲在 matestore 中, 而非元數據(如 table 里的數據)存儲在hdfs之上。
本文標題:hive與hadoop有什么聯系
當前URL:http://vcdvsql.cn/article30/ddjiso.html
成都網站建設公司_創新互聯,為您提供品牌網站建設、動態網站、標簽優化、響應式網站、全網營銷推廣、網站內鏈
聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯