V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Recommended Services
Amazon Web Services
LeanCloud
New Relic
ClearDB
Symars
V2EX  ›  云计算

如何提高局域网数据传输速度?

  •  
  •   Symars · 2016-07-22 16:23:27 +08:00 · 9745 次点击
    这是一个创建于 3075 天前的主题,其中的信息可能已经有所发展或是发生改变。

    越快越好

    48 条回复    2016-09-19 07:15:45 +08:00
    16500682
        1
    16500682  
       2016-07-22 16:32:56 +08:00
    提高网络设备性能
    edw1n
        2
    edw1n  
       2016-07-22 16:34:41 +08:00
    万兆网,端口汇聚等等。
    Symars
        3
    Symars  
    OP
       2016-07-22 16:55:44 +08:00
    @16500682 目前硬件设备都是好的 可是速度还是上不去
    icaca
        4
    icaca  
       2016-07-22 17:04:40 +08:00
    如果文件多且又很小,可以用 FastCopy
    Love4Taylor
        5
    Love4Taylor  
       2016-07-22 17:06:18 +08:00   ❤️ 1
    参考 http://www.bilibili.com/video/av4281908/ 试试 我记得是讲了为什么速度不满载的
    former
        6
    former  
       2016-07-22 17:17:19 +08:00
    记得飞鸽传书局域网很快的
    goodryb
        7
    goodryb  
       2016-07-22 17:18:52 +08:00
    看下源和目的是不是磁盘跑满了,不光是带宽的问题
    smileawei
        8
    smileawei  
       2016-07-22 17:23:47 +08:00
    主干设备之间光口互联或者双千 M 汇聚。千 M 到机器。或者双网卡汇聚。
    Symars
        9
    Symars  
    OP
       2016-07-22 17:43:25 +08:00
    @goodryb 磁盘现在没有满
    @icaca 是图片类文件,做图片分析检索用
    @smileawei Ok 我试试 谢啦
    Symars
        10
    Symars  
    OP
       2016-07-22 17:44:02 +08:00
    @Love4Taylor 分享
    znoodl
        11
    znoodl  
       2016-07-22 17:45:23 +08:00 via iPhone
    这个问题都没说清楚

    是传什么数据?数据块多大?发到云计算节点应该不是普通的电脑传输。
    如果是从硬盘读写数据肯定和磁盘性能有关,如果想要低延时肯定是万兆交换机了,延时比千兆低,小数据块很明显;如果是传输大量数据那就多万兆绑定,首先你得硬盘读写跟上;传输协议也有影响。
    goodryb
        12
    goodryb  
       2016-07-22 17:48:05 +08:00
    @Symars 磁盘 IO 都没问题吗, SSD 基本可以满足
    yexm0
        13
    yexm0  
       2016-07-22 17:49:27 +08:00
    巨帧
    Symars
        14
    Symars  
    OP
       2016-07-22 17:49:57 +08:00
    @goodryb 磁盘方面现在没问题 磁盘的读写目前是快于传输一截的
    chairuosen
        15
    chairuosen  
       2016-07-22 18:28:56 +08:00
    问题都没说清楚 +1

    起码要把环境所有硬件详细列出,软件测速截图列出
    DearTanker
        16
    DearTanker  
       2016-07-22 18:36:58 +08:00
    问题都没说清楚 +1
    davidyin
        17
    davidyin  
       2016-07-22 19:18:15 +08:00
    至少要列出下面这些并不只限于这些的资料:
    网络设备型号,网线,局域网用什麽系统,数据用何种方式传输, windows 共享,还是 ftp ,客户端是什麽系统,用了什麽测速工具,现在速度多少,期望多少?
    chintj
        18
    chintj  
       2016-07-22 20:45:54 +08:00 via iPad
    加钱
    brando
        19
    brando  
       2016-07-22 20:52:04 +08:00
    局域网的拓扑图,硬件和环境都不贴上来,别人没法帮您啊~
    sbbeta
        20
    sbbeta  
       2016-07-22 20:54:21 +08:00 via Android
    图片多大啊,小文件传输达不到峰值的吖,是不是 SSD ?
    snsd
        21
    snsd  
       2016-07-22 23:03:04 +08:00
    @Symars 你想要达到多快的速度?这个你总得说说吧
    tobyxdd
        22
    tobyxdd  
       2016-07-22 23:06:03 +08:00
    设备好是有多好 速度不够快是有多快......
    dream7758521
        23
    dream7758521  
       2016-07-22 23:14:25 +08:00 via Android
    网线上缠绕两根电池
    jhaohai
        24
    jhaohai  
       2016-07-22 23:16:22 +08:00 via iPhone
    开巨帧,或者直接块复制
    likuku
        25
    likuku  
       2016-07-22 23:17:57 +08:00
    磁盘还得看是 I/O 跟不上,还是吞吐量跟不上,传输是否是加密的,大量小文件(看起来是穿很多图片)/少量大文件
    zywx
        26
    zywx  
       2016-07-23 00:27:24 +08:00 via Android
    你说的磁盘的读写目前是快于传输一截中的读写速度是指的连续还是 4k
    你做的图片检索基本都是随机读取
    Silicon
        27
    Silicon  
       2016-07-23 00:34:35 +08:00   ❤️ 1
    大量小文件就先打包再传输
    lisztli
        28
    lisztli  
       2016-07-23 01:16:04 +08:00
    nc

    我是说那个 linux 命令。
    xian
        29
    xian  
       2016-07-23 02:29:33 +08:00
    越快越好??黑人问号……
    来,我教你:
    局域网核心交换机要求 2T 背板转发能力,推荐思科 N7K ,华为 CE12800
    鉴于服务器少有 40G 网卡接口,推荐交换机板卡端口用全 10G 就行了, 4 条+链路捆绑到服务器
    服务器高密硬盘做 raid0 ,
    10G 到桌面
    尽情并发!!
    jyf007
        30
    jyf007  
       2016-07-23 05:29:50 +08:00 via Android
    @xian 顺便带个 tftp
    just4fan
        31
    just4fan  
       2016-07-23 07:37:58 +08:00 via Android
    千兆网卡 千兆交换机 千兆网线
    压缩再传输
    终极:拆硬盘复制
    crazycen
        32
    crazycen  
       2016-07-23 08:25:41 +08:00 via iPhone
    1.万兆以太网!
    2.买个全全闪存的存储, 16G fc 口的!
    4.主机间互联全部 infinband
    liuxu
        33
    liuxu  
       2016-07-23 08:42:58 +08:00
    修改 mtu
    liyvhg
        34
    liyvhg  
       2016-07-23 09:59:05 +08:00 via Android
    @xian 我也来凑热闹不嫌事大
    还可以上光纤,上 20 条,再来个单纤多波,加载波聚合,参考海底光缆的做法,应该上 50Tbps 没问题。
    clorts
        35
    clorts  
       2016-07-23 09:59:34 +08:00
    @Symars 做图片分析检索,有多少图片?一个图片文件多大?一般传数据多大?
    caola
        36
    caola  
       2016-07-23 10:11:22 +08:00
    100G 以上的光模块加交换机或路由器等光设备,速度应该是蛮理想了的。

    如果你还在用千兆网卡,依然跑不满速的话,有两大主要原因:路由垃圾,硬盘 I/O 不行,

    建议是:换换换,买买买。
    BetaLe
        37
    BetaLe  
       2016-07-23 10:54:44 +08:00 via Android
    问题都没说清楚 +1

    有些人连问问题都不会还想得到答案。
    根本就没办法分析瓶颈在哪里
    BetaLe
        38
    BetaLe  
       2016-07-23 10:58:01 +08:00 via Android
    目测可能是医疗系统映像分析 500MB 小图合大图
    BetaLe
        39
    BetaLe  
       2016-07-23 11:00:07 +08:00 via Android
    根据你问问题的能力,推测你应该不是这个学科的,请交给专业人士解决吧
    webjin1
        40
    webjin1  
       2016-07-23 11:39:41 +08:00
    磁盘可以用内存虚拟化磁盘。但是重启数据就没有了
    gzelvis
        41
    gzelvis  
       2016-07-23 12:36:14 +08:00 via iPhone
    全部机器上 SSD ,最好还是 m2 读取过千兆那种,你的问题不是网络不够快,而是电脑硬盘不够快
    dndx
        42
    dndx  
       2016-07-23 15:21:02 +08:00
    LZ 的问题很好解决,局域网传文件瓶颈无非就两种:

    硬盘 I/O ,只求速度不求冗余,直接上 RAID 0 + M.2 SSD ,性能只取决于总线带宽。
    网络 I/O ,买全光网卡,比如 https://www-ssl.intel.com/content/www/us/en/ethernet-products/converged-network-adapters/ethernet-x520.html
    交换机上 Nexus ,再加上端口聚合。

    只要钱够,想要多快都行。
    VmuTargh
        43
    VmuTargh  
       2016-07-23 15:37:11 +08:00
    在可预见的未来,光纤传输的平均速率仍然比不过载着一车硬盘在公路上跑的小货车。
    snopy
        44
    snopy  
       2016-07-23 16:32:36 +08:00
    万兆交换机+光纤连接,每天 TB 级数据传输
    petelin
        45
    petelin  
       2016-07-23 16:37:39 +08:00 via Android
    @dream7758521 这个真管用?之前看过。
    kisinfo
        46
    kisinfo  
       2016-07-24 11:23:00 +08:00
    一般局域网速度最快也就 100MB/s,除非做链路聚合或者上万兆接入.
    要做到 100MB/s 连接,确保电脑的网卡是 1000m 的,线最次也得是超五的,然后你得有一个千兆交换机.如果电脑硬盘还是 5k 的,赶紧换 SSD.如果电脑不是 I7 的 u 赶紧换 CPU.这些基本上能保证你能把 1000m 跑满.
    Symars
        47
    Symars  
    OP
       2016-07-24 14:21:07 +08:00 via Android
    @kisinfo 是目前就是 100mb 但是还跟不上需求 所以想要更好的解决办法
    主要是做图片的检索 线缆算是市场上最好的 硬盘也是 ssd u 也是最好的 u 我这边需要对大量的图片数据做分布式计算 所以需求比较高
    kisinfo
        48
    kisinfo  
       2016-09-19 07:15:45 +08:00   ❤️ 1
    @Symars 这个情况下,如果要做到高于 100MB,只有两个办法了.做链路聚合(一个主机多个网卡连接多条链路实现链路倍增),还有就是使用万兆网卡(单个网卡直接提速),这些都是需要服务器级别的主机,普通的家用电脑不行.
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1100 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 35ms · UTC 23:34 · PVG 07:34 · LAX 15:34 · JFK 18:34
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.