V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
• 请不要在回答技术问题时复制粘贴 AI 生成的内容
wangxiaolin
V2EX  ›  程序员

问一个/dev/shm 的问题

  •  
  •   wangxiaolin · 2018-10-12 14:57:48 +08:00 · 1890 次点击
    这是一个创建于 2265 天前的主题,其中的信息可能已经有所发展或是发生改变。

    1.txt 中有 30000000 条数据,其中每行一个数字。

    1.py 如下:

    import sys
    import time
    count = 0
    begin = time.time()
    for line in sys.stdin:
    	count = count + 1
    print time.time() - begin
    

    在本地磁盘上运行 python 1.py < 1.txt 2.40708708763

    python 1.py < /dev/shm/1.txt 2.37829995155

    2 个时间相差不大,是我用错了嘛?

    4 条回复    2018-10-12 17:16:05 +08:00
    iwtbauh
        1
    iwtbauh  
       2018-10-12 15:12:04 +08:00 via Android   ❤️ 1
    文件系统通常具有页面缓存,你访问文件系统上的文件实际上是直接命中在内存中的
    iwtbauh
        2
    iwtbauh  
       2018-10-12 15:13:55 +08:00 via Android
    要想测试真实的访问硬盘读取文件的速度,你可以

    sudo su
    sync
    echo 3 > /proc/sys/vm/drop_caches

    然后再读取测试
    wangxiaolin
        3
    wangxiaolin  
    OP
       2018-10-12 17:10:06 +08:00
    @iwtbauh 好的,多谢,我试试
    0ZXYDDu796nVCFxq
        4
    0ZXYDDu796nVCFxq  
       2018-10-12 17:16:05 +08:00 via Android
    除了#2 说的,还有就是
    建议用 dd 来测试磁盘性能,而不是 Python

    time dd if=1.txt bs=1024k of=/dev/null
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3197 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 12:30 · PVG 20:30 · LAX 04:30 · JFK 07:30
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.