您現在的位置是:首頁 > 標簽 > HDFS首頁標簽

  • 大資料之HDFS小檔案處理

    大資料之HDFS小檔案處理

    HDFS小檔案處理小檔案過多會導致速度變慢,由於檔案的索引是建立在NameNode中,小檔案過多會導致索引過多,從而佔用了NameNode的記憶體,然後索引檔案過大也會導致索引速度下降解決方案在資料採集的時候,就將小檔案或小批資料合成大檔案...