运维网's Archiver
论坛
›
Hadoop
› hadoop上最多到底能放多少个文件?
youngfan007
发表于 2016-12-13 07:30:52
hadoop上最多到底能放多少个文件?
这主要取决于NameNode的内存。因为DFS集群运行时,文件结构会保存在NameNode的内存当中。DFS每个文件信息和 块信息大约都要占150字节。所以如果复制因子为1,每个文件占一个block, 那么16G内存可以存 16 * (2^30) / 300 = 57 m , 即5.7 千万 个文件。
页:
[1]
查看完整版本:
hadoop上最多到底能放多少个文件?