文章详情

短信预约-IT技能 免费直播动态提醒

请输入下面的图形验证码

提交验证

短信预约提醒成功

Python任务调度之sched

2023-01-31 06:19

关注

这次我们主要讲解下Python自带模块当中的sched,不但小巧,也很强大,在实际应用中,某些场合还是可以用到的。作为一名Linux的SA,我们已经习惯了用crontab,而sched提供了一种延迟处理机制,也可以理解为任务调度的另一种方式的实现。

    scheduler.enter(delay, priority, action, argument)

    ● delay:延迟时间

    ● priority:优先级(数越大,优先越低)

    ● action:回调函数

    ● argument:回调函数的参数

    我们来写一个非常简单的例子:

#!/usr/bin/env python

# -*- coding: utf-8 -*-

import sched 

import time 

 

scheduler = sched.scheduler(time.time, time.sleep) 

 

def func(name): 

    print 'action: %s' % name , time.time() 


print 'START:', time.time() 

scheduler.enter(3, 2, func, ('fight',))

print 'Middle'  

scheduler.enter(3, 1, func, ('make peace',)) 

 

scheduler.run() 

print 'END:', time.time() 

time.sleep(5)


 运行结果如下:

START: 1453357480.74

Middle

action: make peace 1453357483.74

action: fight 1453357483.74

END: 1453357483.74


我们再举一个简单的例子说明下sched的其它特性:


#!/usr/bin/env python

# -*- coding: utf-8 -*-

import sched 

import time 

  

scheduler = sched.scheduler(time.time, time.sleep) 

  

def func(name): 

    print 'BEGIN: %s:' % name, time.time() 

    time.sleep(2) 

    print 'FINISH %s:' % name, time.time() 

  

print 'START:', time.time() 

scheduler.enter(2, 1, func, ('fight',)) 

scheduler.enter(3, 1, func, ('make peace',)) 

  

scheduler.run() 

print 'END:', time.time() 

time.sleep(20)


运行结果如下:

START: 1339665268.12
BEGIN: fight: 1339665270.12
FINISH fight: 1339665272.12
BEGIN: make peace: 1339665272.12
FINISH make peace: 1339665274.12
END: 1339665274.12


我们仔细观察下两次任务调度的时间间隔,发现是同时运行的?那又是为什么呢?run()一直被阻塞,直到所有事件被全部执行完. 每个事件在同一线程中运行,所以如果一个事件的执行时间大于其他事件的延迟时间,那么,就会产生重叠。重叠的解决方法是推迟后来事件的执行时间。这样保证 没有丢失任何事件,但这些事件的调用时刻会比原先设定的迟。

    上面的例子第二个事件在第一个事件运行结束后立即运行,因为第一个事件的执行时间足够长,已经超过第二个事件的预期开始时刻。(本来应该1339660903秒运行)

    我们再介绍另外一个保证action在同一时刻执行的函数:

 scheduler.enterabs(time, priority, action, argument)


#!/usr/bin/env python

# -*- coding: utf-8 -*-

import sched 

import time 

 

scheduler = sched.scheduler(time.time, time.sleep) 

now = time.time() 

 

def func(name): 

    print 'action:', time.time(), name 

 

print 'START:', now 

scheduler.enterabs(now + 2, 2, func, ('make peace',)) 

scheduler.enterabs(now + 2, 1, func, ('fight',)) 

scheduler.run() 

print 'END:', now 

time.sleep(20)


 运行结果如下:

    START: 1339666232.38
    action: 1339666234.38 fight
    action: 1339666234.38 make peace
    END: 1339666232.38

    因为优先级的关系,所以先fight,然后再make peace,打架是如此重要....总体来讲,如果想单纯的替换crontab的话,Scheduler框架更加适合,做延迟任务的调度处理的话sched还是可以考虑的。

    如果我们想要取消任务调度,可以使用cancel()函数。在上面的例子中出现了阻塞延迟的现象,如果引用线程机制就会避免这种情况的发生,我们简单举个例子:


#!/usr/bin/env python

# -*- coding: utf-8 -*-

import sched 

import threading 

import time 

 

scheduler = sched.scheduler(time.time, time.sleep) 

 

counter = 0 

 

def increment_counter(name): 

 

    global counter 

    print 'action: %s' % name , time.time() 

    counter += 1 

    print 'counter: ', counter 

 

print 'START:', time.time() 

action1 = scheduler.enter(2, 1, increment_counter, ('action1',)) 

action2 = scheduler.enter(3, 1, increment_counter, ('action2',)) 

 

t = threading.Thread(target=scheduler.run) 

t.start() 

scheduler.cancel(action1) 

t.join() 

print 'counter:', counter 

print 'END:', time.time() 

time.sleep(20)



  运行结果如下:

    START: 1339666987.27
    action: action2 1339666990.27
    counter:  1
    counter: 1
    END: 1339666990.27

    因为run()函数会引起阻塞,所以我们需要采用线程机制的方法在另一个线程中通过对象的引用取消任务调度,这里只调度了action2方法。

本文出自 “放飞翅膀,追求梦想” 博客,请务必保留此出处http://flykite.blog.51cto.com/4721239/898649


python使用sched模块周期性抓取网页内容

1.使用sched模块可以周期性地执行指定函数

2.在周期性执行指定函数中抓取指定网页,并解析出想要的网页内容,代码中是六维论坛的在线人数


论坛在线人数统计


#coding=utf-8

import time,sched,os,urllib2,re,string


#初始化sched模块的scheduler类

#第一个参数是一个可以返回时间戳的函数,第二个参数可以在定时未到达之前阻塞。

s = sched.scheduler(time.time,time.sleep)


#被周期性调度触发的函数

def event_func():

    req = urllib2.Request('http://bt.neu6.edu.cn/')

    response = urllib2.urlopen(req)

    rawdata = response.read()

    response.close()


    usernump = re.compile(r'总计 <em>.*?</em> 人在线')

    usernummatch = usernump.findall(rawdata)

    if usernummatch:

        currentnum=usernummatch[0]

        currentnum=currentnum[string.index(currentnum,'>')+1:string.rindex(currentnum,'<')]

        print "Current Time:",time.strftime('%Y,%m,%d,%H,%M',time.localtime(time.time())),'User num:',currentnum


        # 保存结果,供图表工具amcharts使用

        result=open('liuvUserNUm','a')

        result.write('{year: new Date('+time.strftime('%Y,%m,%d,%H,%M',time.localtime(time.time()))+'),value:'+currentnum+'},\n')

        result.close()


#enter四个参数分别为:间隔事件、优先级(用于同时间到达的两个事件同时执行时定序)、被调用触发的函数,给他的参数(注意:一定要以tuple给如,如果只有一个参数就(xx,))

def perform(inc):

    s.enter(inc,0,perform,(inc,))

    event_func()


def mymain(inc=900):

    s.enter(0,0,perform,(inc,))

    s.run()


if __name__ == "__main__":

    mymain()


本文出自别人博客,请务必保留此出处http://outofmemory.cn/code-snippet/3199/python-usage-sched-module-period-xing-zhuaqu-wangye-content

阅读原文内容投诉

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

软考中级精品资料免费领

  • 历年真题答案解析
  • 备考技巧名师总结
  • 高频考点精准押题
  • 2024年上半年信息系统项目管理师第二批次真题及答案解析(完整版)

    难度     813人已做
    查看
  • 【考后总结】2024年5月26日信息系统项目管理师第2批次考情分析

    难度     354人已做
    查看
  • 【考后总结】2024年5月25日信息系统项目管理师第1批次考情分析

    难度     318人已做
    查看
  • 2024年上半年软考高项第一、二批次真题考点汇总(完整版)

    难度     435人已做
    查看
  • 2024年上半年系统架构设计师考试综合知识真题

    难度     224人已做
    查看

相关文章

发现更多好内容

猜你喜欢

AI推送时光机
位置:首页-资讯-后端开发
咦!没有更多了?去看看其它编程学习网 内容吧
首页课程
资料下载
问答资讯