這篇文章主要介紹Hadoop怎么設置HDFS的塊大小,文中介紹的非常詳細,具有一定的參考價值,感興趣的小伙伴們一定要看完!
創新互聯是專業的昭化網站建設公司,昭化接單;提供成都網站建設、網站建設,網頁設計,網站設計,建網站,PHP網站建設等專業做網站服務;采用PHP框架,可快速的進行昭化網站開發網頁制作和功能擴展;專業做搜索引擎喜愛的網站,專業的做網站團隊,希望更多企業前來合作!
HDFS是設計來存儲和管理大數據的,因此典型的HDFS塊大小明顯比平時我們看到的傳統文件系統塊大得多,塊大小的設置用來將大文件切割成一個數據塊,再將這些數據塊分發到集群上,例如集群的塊大小設置為64MB,一個128MB的文件上傳到HDFS上,HDFS會將這個文件切分成2(128/64)個數據塊,再將這兩塊數據分發到集群的數據節點上。
設置塊大小:
打開hdfs-site.xml,(在hadoop安裝目錄下的conf文件夾里)
操作步驟:
設置hdfs-site.xml下面的屬性值:
<property>
<name>dfs.block.size</name>
<value>134217728</value> --修改為128M
<description>Block size</description>
</property>
修改說明:
hdfs-site.xml是HDFS的配置文件,修改hdfs-site.xml配置文件的dfs.block.size屬性值就會改變上傳到HDFS所有文件的默認塊大小。修改這個值并不會對HDFS上現存的任何文件的塊大小產生影響,只會改變新上傳文件的塊大小。
以上是“Hadoop怎么設置HDFS的塊大小”這篇文章的所有內容,感謝各位的閱讀!希望分享的內容對大家有幫助,更多相關知識,歡迎關注創新互聯行業資訊頻道!
當前文章:Hadoop怎么設置HDFS的塊大小
標題URL:http://vcdvsql.cn/article12/pegodc.html
成都網站建設公司_創新互聯,為您提供動態網站、服務器托管、外貿網站建設、商城網站、、做網站
聲明:本網站發布的內容(圖片、視頻和文字)以用戶投稿、用戶轉載內容為主,如果涉及侵權請盡快告知,我們將會在第一時間刪除。文章觀點不代表本網站立場,如需處理請聯系客服。電話:028-86922220;郵箱:631063699@qq.com。內容未經允許不得轉載,或轉載時需注明來源: 創新互聯