V2EX › AX5N 的所有回复 › 第 54 页 / 共 57 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 46 47 48 49 50 51 52 53 54 55 ... 57

❮

❯

2018-05-15 16:20:28 +08:00

回复了 panpanpan 创建的主题 › Java › 你们都是怎么读 SLF4J 的？

艾斯艾路艾弗四节

2018-05-14 03:19:45 +08:00

回复了 hing 创建的主题 › 奇思妙想 › 那么，你会打响指吗？我找了教程也打不出清脆的响指...

要点在于拇指放在中指上的位置和发力方式，多试试

2018-05-14 03:15:42 +08:00

回复了 Doodlister 创建的主题 › 全球工单系统 › 1.表扬腾讯 2.批评百度

企鹅的邮箱非常好用

2018-05-10 07:23:14 +08:00

回复了 kavana 创建的主题 › Python › 有个处理 csv 的问题，想了好几个晚上，都没有办法解决，请教各位

能预处理转换成别的数据结构的话，那倒是有很多办法。不过估计跟直接导入数据库也差不多。

2018-05-05 19:48:54 +08:00

回复了 sjmcefc2 创建的主题 › Python › 读取大文件，最快的方式是什么？

@sjmcefc2
100G 的文本有点夸张。

先说读取
假如你的硬盘是 HDD，按照 120M/s 来算的话，读取 10G 需要 850s ；
如果你的硬盘是 SSD，按照 450M/s 来算的话，需要 230s ；
无论你怎么来，无论你用什么办法，应该是不会慢过这个速度多少的，也不会快过这个速度多少。

再说处理
100G 的文本估计 10 亿行应该是有的吧，这个数量真的是太大了，单线程处理的话，python 速度慢的缺点会被暴露无遗。
所以建议你多进程、多线程来处理。

你这个每行之间没有联系，可以靠多线程来提高性能。如果碰上那种每行之间互有联系的，只能换 c++慢慢跑，python 绝对不行。

2018-05-05 19:33:10 +08:00

回复了 sjmcefc2 创建的主题 › Python › 读取大文件，最快的方式是什么？

@sjmcefc2 你这个文本有多少行？

2018-05-05 19:16:26 +08:00

回复了 sjmcefc2 创建的主题 › Python › 读取大文件，最快的方式是什么？

@AX5N 按我经验
如果瓶颈在 IO 上的话，一次直接把所有内容都读进内存是最快的。
如果瓶颈在对内容细致地分析 /计算上的话，例如你要遍历 10G 文本里每个字节的话，那就必须得换语言才行。
如果瓶颈在于整体的处理速度的话，例如你要压缩一段文件。那这个就随便了，随便读取一部分处理完再继续读取就好。

2018-05-05 19:07:49 +08:00

回复了 sjmcefc2 创建的主题 › Python › 读取大文件，最快的方式是什么？

把需求讲具体，不同需求下做法必定不同。有时候是直接把全部文件直接载入内存最快，但有时候不是。甚至有时候不能使用 python，python 一定会成为瓶颈

2018-05-05 17:08:45 +08:00

回复了 131 创建的主题 › JavaScript › PageGuard.js 防复制 + 检测开发者工具

@131 我想听下你的脑洞

2018-05-05 16:53:59 +08:00

回复了 131 创建的主题 › JavaScript › PageGuard.js 防复制 + 检测开发者工具

@131 用防复制来防作弊，确实能算得上是一件有意义的事情。但不管怎么看，这个手段都是一个错误的方向，就像你下面所说的。

那么，除了防止作弊以外，还有什么其他用途吗。

2018-05-05 15:48:53 +08:00

回复了 131 创建的主题 › JavaScript › PageGuard.js 防复制 + 检测开发者工具

@icy37785 那你就直接说下哪些场景很有用，我就想不出来限制普通人复制到底有什么意义。