<output id="qn6qe"></output>

    1. <output id="qn6qe"><tt id="qn6qe"></tt></output>
    2. <strike id="qn6qe"></strike>

      亚洲 日本 欧洲 欧美 视频,日韩中文字幕有码av,一本一道av中文字幕无码,国产线播放免费人成视频播放,人妻少妇偷人无码视频,日夜啪啪一区二区三区,国产尤物精品自在拍视频首页,久热这里只有精品12

      1.用圖與自己的話,簡要描述Hadoop起源與發展階段。

       

       

       

       

       1)Lucene 是 Doug Cutting 開創的開源軟件,實現與 Google 類似的全文搜索功能,它提供了全文檢索引擎的架構,包括完整的查詢引擎和索引引擎

      2)2001 年年底成為 Apache 基金會的一個子項目

      3)Google的三篇論文是 hadoop 的思想之源(Google 在大數據方面的三篇論文)

      GFS --->HDFS

      Map-Reduce --->MR

      BigTable --->Hbase

      4)2003-2004 年,Google 公開了部分 GFS 和 Mapreduce 思想的細節,以此為基礎 Doug Cutting等人用了 2 年業余時間實現了 DFS 和 Mapreduce 機制

      5)2006 年3 月份,Map-Reduce 和 Nutch Distributed File System (NDFS) 分別被納入稱為 Hadoop 的項目中

      6)名字來源于 Doug Cutting 兒子的玩具大象,Hadoop由此誕生

       

       

      2.用圖與自己的話,簡要描述名稱節點、第二名稱節點、數據節點的主要功能及相互關系

       

       

       

       

       

       

         在HDFS中,名稱節點(NameNode)負責管理分布式文件系統的命名空間(Namespace),保存了兩個核心的數據結構,即FsImage和EditLog

       

       

         第二名稱節點(SecondaryNameNode)

      :是HDFS架構中的一個組成部分,它是用來保存名稱節點中對HDFS 元數據信息的備份,并減少名稱節點重啟的時間。
      SecondaryNameNode一般是單獨運行在一臺機器上

      SecondaryNameNode讓EditLog變小的工作流程:
      (1)SecondaryNameNode會定期和NameNode通信,請求其停止使用EditLog文件,暫時將新的寫操作寫到一個新的文件edit.new上來,這個操作是瞬間完成,上層寫日志的函數完全感覺不到差別;
      (2)SecondaryNameNode通過HTTP GET方式從NameNode上獲取到FsImage和EditLog文件,并下載到本地的相應目錄下;
      (3)SecondaryNameNode將下載下來的FsImage載入到內存,然后一條一條地執行EditLog文件中的各項更新操作,使得內存中的FsImage保持最新;這個過程就是EditLog和FsImage文件合并;
      (4)SecondaryNameNode執行完(3)操作之后,會通過post方式將新的FsImage文件發送到NameNode節點上

       

       


       

         數據節點是分布式文件系統HDFS的工作節點,負責數據的存儲和讀取,會根據客戶端或者是名稱節點的調度來進行數據的存儲和檢索,并且向名稱節點定期發送自己所存儲的塊的列表

      3.分別從以下這些方面,梳理清楚HDFS的 結構與運行流程,以圖的形式描述。

      • 客戶端與HDFS
      • 客戶端讀
      • 客戶端寫
      • 數據結點與集群
      • 數據結點與名稱結點
      • 名稱結點與第二名稱結點
      • 數據結點與數據結點
      • 數據冗余
      • 數據存取策略
      • 數據錯誤與恢復

       

       

       

       
       
      posted on 2021-11-16 12:44  wujiayan1  閱讀(100)  評論(0)    收藏  舉報
      主站蜘蛛池模板: 欧洲性开放老太大| 国产日产欧产美韩系列麻豆| 免费大黄网站在线观看| 亚洲中文字幕日韩精品| 久操热在线视频免费观看| 国产无遮挡真人免费视频| 亚洲成人www| 黑人异族巨大巨大巨粗| 精品自拍偷拍一区二区三区 | 亚洲日本欧美日韩中文字幕 | 中文字幕日韩一区二区不卡| 亚洲av成人无码精品电影在线| 97在线碰| 亚洲精品国偷自产在线| 久久人搡人人玩人妻精品| 成人自拍小视频在线观看| 亚洲成人av一区免费看| 亚洲国产美女精品久久久| 国产精品无码a∨麻豆| 亚洲欧洲日产国产 最新| 少妇仑乱a毛片无码| 免费人成在线观看网站| 国产色悠悠综合在线观看| 中文字幕乱码无码人妻系列蜜桃| 中文字幕结果国产精品| 天堂中文8资源在线8| 九九热在线视频免费观看| 久久亚洲精品国产精品婷婷| 欧美国产日产一区二区| 国产台湾黄色av一区二区| 国内在线视频一区二区三区| 尤物国精品午夜福利视频| 国产一区在线播放av| 亚洲国产av无码综合原创国产| 色狠狠综合天天综合综合| 男女激情一区二区三区| 麻豆妓女爽爽一区二区三| 特级毛片a片久久久久久| 欧美成人一卡二卡三卡四卡| 国产草草影院ccyycom| 精品无码国产一区二区三区av|