首页   注册   登录
 letking 最近的时间轴更新

letking

V2EX 第 133225 号会员,加入于 2015-08-16 20:27:33 +08:00
今日活跃度排名 24257
letking 最近回复了
@cmdOptionKana 键盘侠真是站着说话不腰疼啊,站在道德高地上指责别人是最简单的,漂亮话谁不会说?
试想你的父母跟你没有任何沟通的情况下,就通知你说他们有二胎了,你能接受?
冠冕堂皇地说父母的决定和自己没有关系,显得自己好像很独立,但只要是血亲,怎么可能没关系?父母后半生的赡养,未来这个孩子的抚养,都是和你的关系。
你说没关系,那你自己的娶妻生子、在哪定居买房等人生大事,也都不用和父母商量吗?你看看父母会同意吗?那时候你再去和父母讲讲你这些大道理?
23 天前
回复了 pcbl 创建的主题 推广 踢楼抽奖给大家稍微回点血,送 50X5 京东 E 卡
这个抽奖够透明公开👍
linux 没有统一的文件管理器,每种文件管理器添加 context menu 的方法都不一样,还是别折腾了…
总结:您配吗?
94 天前
回复了 allenloong 创建的主题 Python 新人提问:快速 merge 大量 csv 文件
@corefx 好好看看楼主的问题?
94 天前
回复了 allenloong 创建的主题 Python 新人提问:快速 merge 大量 csv 文件
@allenloong mysql 应该就可以。
spark 之所以这么搞不行是因为 spark 是把所有数据都加载的内存里处理的,而数据库是把数据存磁盘的。
如果你有 hadoop 集群的话可以用 spark 这么做。
94 天前
回复了 allenloong 创建的主题 Python 新人提问:快速 merge 大量 csv 文件
@allenloong 依次导入每个文件为一张表,然后 join 导入的表,保存成中间表。跟你现在的流程一样。
94 天前
回复了 allenloong 创建的主题 Python 新人提问:快速 merge 大量 csv 文件
@allenloong spark 惰性运行的,合并操作可能没有立即执行而是在写结果的时候才执行。
你这问题可能是合并时内存就不够。
关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   979 人在线   最高记录 5043   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.3 · 12ms · UTC 22:00 · PVG 06:00 · LAX 14:00 · JFK 17:00
♥ Do have faith in what you're doing.