求推荐 python 的任务管理的方法

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

推荐学习书目

› Learn Python the Hard Way

Python Sites

› PyPI - Python Package Index

› http://diveintopython.org/toc/index.html

› Pocoo

值得关注的项目

› PyPy

› Celery

› Jinja2

› Read the Docs

› gevent

› pyenv

› virtualenv

› Stackless Python

› Beautiful Soup

› 结巴中文分词

› Green Unicorn

› Sentry

› Shovel

› Pyflakes

› pytest

Python 编程

› pep8 Checker

Styles

› PEP 8

› Google Python Style Guide

› Code Style from The Hitchhiker's Guide

这是一个创建于 2940 天前的主题，其中的信息可能已经有所发展或是发生改变。

比如，有 3 个 py 文件： a.py, b.py, c.py

希望：
1. 17 ： 00 执行 a.py
2. 每隔 5 分钟执行 b.py
3. 每隔 1 天执行 c.py

通过什么包来管理这些任务比较好？

环境： python 2.7, linux/windows

Python

执行

Linux

任务

24 条回复 • 2017-06-07 22:55:03 +08:00

DozySun

2016-12-07 17:06:06 +08:00

apscheduler

tonghuashuai

2016-12-07 17:08:16 +08:00

这样的情况一般用 crontab 最简单把，其他的包什么的估计还得写代码去调度。

sinux

2016-12-07 17:08:27 +08:00

native cron

SlipStupig

2016-12-07 17:26:01 +08:00

@tonghuashuai 我也是用 crontab ，但是不知道为什么任务根本没执行

sevncz

2016-12-07 17:28:06 +08:00

crontab +1

sunwei0325

2016-12-07 17:28:07 +08:00

airflow

tonghuashuai

2016-12-07 17:31:28 +08:00

@SlipStupig print 下 log 看看

smartdie

2016-12-07 17:41:20 +08:00

一般用 crontab ，
如果你的项目里用 celery 了，可以考虑 celery beat

glasslion

2016-12-07 17:42:56 +08:00

这种简单情况， crontab 最合适,

windfarer

2016-12-07 17:50:13 +08:00

crontab 用用就行了

cdwyd

2016-12-07 17:53:50 +08:00 via Android

@SlipStupig
我也遇到了手动运行正常 crontab 不执行的问题，后面发现是路径问题，加一个 os.chdir 到工作目录就可以了

qweweretrt515

2016-12-07 19:50:13 +08:00

celery

brucedone

2016-12-07 20:01:26 +08:00

https://github.com/BruceDone/dagobah 简单，好用

clino

2016-12-07 20:03:57 +08:00 via Android

buildbot

lunaticus7

2016-12-07 20:59:29 +08:00

celery

FiveDDD

2016-12-07 21:33:44 +08:00

不想添加依赖，就 crontab ；另外项目的话，可以试试 celery ， apscheduler 。

Contextualist

2016-12-07 21:39:53 +08:00 via iPad

个人比较喜欢 https://github.com/dbader/schedule ，适合简单的任务，比 apscheduler 更轻

SlipStupig

2016-12-07 21:48:29 +08:00

@cdwyd 手动我也不执行
这个是我的配置文件

30 23 * * * /home/ubuntu/drogen/starup.sh > /dev/null 2>&1
10 1 * * 6,0 python ~/jdspier/spidermain.py > /dev/null 2>&1
*/1 * * * * /bin/bash /home/cron.sh > /dev/null 2>&1Ø

clino

2016-12-07 21:59:51 +08:00 via Android

buildbot 这种自动构建软件有个好处是能在 web 上看所有 stdio 输出

Lycnir

2016-12-07 22:42:00 +08:00

crontab 尽量用全路径

Chyroc

2016-12-08 05:36:21 +08:00

luigi?

zhuf

2016-12-08 10:40:37 +08:00

apscheduler 比较方便

glogo

2016-12-08 13:07:49 +08:00

celery beat 可以，不过比较重型了

heraldboy

2017-06-07 22:55:03 +08:00

linux 好处理，关键是 windows 下大家有什么好建议