V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  Zioyi  ›  全部回复第 1 页 / 共 2 页
回复总数  22
1  2  
最终发现回退到老版本:2020.3.4 版本 就好很多 : )
券券 APP
@kkjj 你的路由怎么写的
看你代码,加了什么装饰器
2017-09-07 15:31:05 +08:00
回复了 Zioyi 创建的主题 Elasticsearch 关于 ElasticSearch 和 Mysql 数据同步的问题
主要是 ip 类型和 ipa 类型之间有父子关系,这样写 ipa 表中的数据会找不到它的父
2017-09-07 14:51:57 +08:00
回复了 Zioyi 创建的主题 Elasticsearch 关于 ElasticSearch 和 Mysql 数据同步的问题
更正:
我的问题是,如何通过 logstash 将 Mysql 数据的两张表直接同步 ES 中的索引(索引中有两个 types,为父子关系),或者有没有其他的方法达到此目的
2017-09-03 16:11:31 +08:00
回复了 yunyao222 创建的主题 Python 找爬虫外包!最近有时间接单的请进~
楼主,求联系方式
2017-08-28 10:41:58 +08:00
回复了 mortonnex 创建的主题 程序员 elasticsearch 的 date histogram 出现数据遗漏?
楼主,请问你有数据库同步到 ES 的操作么,使用的是啥插件? logstash-input-jdbc 吗?
2017-08-28 10:19:15 +08:00
回复了 mortonnex 创建的主题 程序员 elasticsearch 的 date histogram 出现数据遗漏?
楼主也在做 ES 啊,在下小白
2017-08-24 11:05:10 +08:00
回复了 fearme 创建的主题 Python PyCharm 怎么优化?太占内存了,太慢了
加个内存条就行,我的 pycharm 日常 600MB 内存
2017-08-21 12:33:51 +08:00
回复了 Zioyi 创建的主题 Python 各位老师傅们, python2 支持异步 I/O 编程吗?
@NoAnyLove 感谢。没错,我的线程中还存在从文件中读取记录的 I/O 操作,基本代码如下:
```
...
with open(records1.txt', 'rb') as rf:
record = rf.readline()
while record:
records.append(record)
if len(records) == 500:
currenct_insert_sql = function1(records) # records 列表存五百条 record 后做一次数据库 I/O
if self.mysql_lock.acquire():
cursor.execute(current_insert_sql)
connection.commit()
self.mysql_lock.release()
records = []
record = rf.readline()
...
```
现在准备参考你的建议,尝试协程和更换 mysql 库,等测试出结果后会反馈出来。
2017-08-21 12:22:57 +08:00
回复了 Zioyi 创建的主题 Python 各位老师傅们, python2 支持异步 I/O 编程吗?
没错,我的线程中还存在从文件中读取记录的 I/O 操作,基本代码如下:
```
with open('recors.txt', 'rb') as rf:
2017-08-20 11:31:37 +08:00
回复了 Zioyi 创建的主题 Python 各位老师傅们, python2 支持异步 I/O 编程吗?
抱歉没有说明清楚,我使用的是 mysql 数据库,使用的 python 库是 pymysq。我使这里设置锁的原因是:我每一个线程都有一个连接数据库的链接(或者说是保持连接的句柄),如果我不加锁地去跑 50 个线程,会出现(Lock wait timeout exceeded; try restarting transaction)的报错,所以我在这里设置锁去保证同时只有一个线程去对数据库操作:
```
if self.mysql_lock.acquire():
cursor.execute(current_insert_sql)
connection.commit()
self.mysql_lock.release()
```
不知我这种设计是否合理?
2017-08-19 10:56:50 +08:00
回复了 Zioyi 创建的主题 Python 各位老师傅们, python2 支持异步 I/O 编程吗?
windows? 难道说 linux 的 python2 支持?
2017-08-15 19:47:53 +08:00
回复了 Zioyi 创建的主题 问与答 Celery 小白遇坑请教:
问题解决,celery -A tasks worker --loglevel=info --pool=solo (添加参数 --pool=solo )
https://cn.v2ex.com/t/177589
2017-08-12 19:19:17 +08:00
回复了 zixie1991 创建的主题 分享创造 悟空视频-电影推荐网站上线
楼主厉害了,需要小弟打杂么
2017-08-02 17:18:01 +08:00
回复了 Zioyi 创建的主题 Python 关于正则的问题
感谢各位大神给的思路
2017-07-26 19:32:55 +08:00
回复了 huangzitao 创建的主题 分享创造 第一次玩爬虫有点上瘾啊,写了个百度云资源搜索。。
大佬 你是怎么爬下来的?百度云盘有 api ?
2017-07-26 17:06:42 +08:00
回复了 huangzitao 创建的主题 分享创造 第一次玩爬虫有点上瘾啊,写了个百度云资源搜索。。
楼主后台用什么写的
1  2  
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   2230 人在线   最高记录 6543   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 30ms · UTC 05:29 · PVG 13:29 · LAX 22:29 · JFK 01:29
Developed with CodeLauncher
♥ Do have faith in what you're doing.