HDFS 的 RAM DISK 和普通 HDD 上传速度经测试区别不大，是哪环节做错了吗？
cernard · 2020-04-14 19:32:16 +08:00 · 1024 次点击这是一个创建于 1684 天前的主题，其中的信息可能已经有所发展或是发生改变。
测试环境：
- 1 个 namenode，2 个 datanode （其中一个 datanode 和 namenode 一台机器）
- RAM DISK 最大大小理论上配置的是 20G
测试方法:
- Python 生成 1K~10G 的若干个 CSV 文件，每个文件上传 10 次，每次上传完毕后删除。
- 统计每个大小文件的 10 次上传平均时间
测试结果： RAM DISK 和 HDD 几乎没有速度上的区别，只有几秒的差异。
请问下造成这个结果的可能性有哪些？
 |
1
cernard OP 忘了说了，是写入速度
|
 |
2
OSDI 2020-04-14 20:48:59 +08:00
网络带宽多少呢
|
 |
3
Aruforce 2020-04-14 21:06:15 +08:00 via Android
带宽小于硬盘的读写速度…？
|
Select Language