麻豆小视频在线观看_中文黄色一级片_久久久成人精品_成片免费观看视频大全_午夜精品久久久久久久99热浪潮_成人一区二区三区四区

首頁 > 應用 > 軟件技巧 > 正文

hadoop入門之namenode工作特點介紹

2024-07-16 17:45:46
字體:
來源:轉載
供稿:網友

namenode始終在內存中保存metedata(整個文件系統的目錄結構,每個目錄有哪些文件,每個文件有哪些分塊及每個分塊保存在哪個DataNode上),用于處理“讀請求”(不需要修改內容)
到有“寫請求”到來時,namenode會首先對metedata修改的內容寫editlog到磁盤(每一次改變都會同步到磁盤。),成功返回后,才會修改內存,并且向客戶端返回。客戶端在寫數據到每個datanode中。namenode在將metadata寫到editlog的時候會同步到磁盤。

Hadoop會維護一個fsimage文件,也就是namenode中metedata的鏡像,但是fsimage不會隨時與namenode內存中的metedata保持一致(因為非常大),而是每隔一段時間通過合并editlog來更新內容。Secondary namenode就是用來更新fsimage的 

secondary namenode的工作流程

1.Secondary通知primary切換editlog(目的合并editlog)
2.Secondary從primary獲得fsimage和editlog(通過http)
3.Secondary將fsimage載入內存,然后開始合并editlog
4.Secondary將新的fsimage發回給primary
5.Primary用新的fsimage替換舊的fsimage

什么時候checkpiont?
fs.checkpoint.period 指定兩次checkpoint的最大時間間隔,默認3600秒。
fs.checkpoint.size 規定edits文件的最大值,一旦超過這個值則強制checkpoint,不管是否到達最大時間間隔。默認大小是64M。

發表評論 共有條評論
用戶名: 密碼:
驗證碼: 匿名發表
主站蜘蛛池模板: av电影手机在线看 | 桥本有菜免费av一区二区三区 | 国产成人精品区一区二区不卡 | 手机视频在线播放 | 日韩在线毛片 | 97青青 | 999久久国精品免费观看网站 | 午夜爱爱福利 | 一级毛片在线观看视频 | av手机免费在线观看 | 五月天影院,久久综合, | 亚洲婷婷日日综合婷婷噜噜噜 | www69xxxxx| 中韩毛片 | 国产乱淫av片免费观看 | 毛片在线播放视频 | 免费激情视频网站 | 亚洲第一页在线观看 | 毛片视频网址 | 极品xxxx欧美一区二区 | 国产精品一品二区三区四区18 | 久久不雅视频 | 亚洲国产精品一区二区三区 | 日本欧美一区二区三区视频麻豆 | 激情小说区 | 小视频免费在线观看 | 国产毛片在线看 | 欧美zoofilia杂交videos | 91专区在线观看 | 亚洲精品一区二区三区大胸 | 欧美成人小视频 | av在线免费观看网 | 毛片118极品美女写真 | 亚洲三区精品 | 久久免费观看一级毛片 | 国产成人精品一区二区视频免费 | av电影手机在线看 | 久久久久久艹 | 久久久成人精品视频 | 精品国产一区二区在线 | 91成人一区 |