热线电话:13121318867

登录
2019-01-28 阅读量: 775
HDFS中的块是如何设置的?

HDFS中的块如何设置?

答:

块的大小可以通过配置参数( dfs.blocksize)来规定,默认大小在hadoop2.x版本中是128M,老版本中是64M 。如果块设置得足够大,从磁盘传输数据的时间会明显大于定位这个块开始位置所需的时间。因而,传输一个由多个块组成的文件的时间取决于磁盘传输速率。

如果寻址时间约为10ms,而传输速率为100MB/s,为了使寻址时间仅占传输时间的1%,我们要将块大小设置约为100MB。默认的块大小128MB。块的大小:10ms*100*100M/s = 100M 最合理

0.0000
1
关注作者
收藏
评论(0)

发表评论

暂无数据
推荐帖子