我有一个简单的python脚本,用于获取推文并将其缓存到配置为通过cron每两分钟运行一次的磁盘上。
*/2 * * * * (date ; /usr/bin/python /path/get_tweets.py) >> /path/log/get_tweets.log 2>&1
该脚本大部分时间成功运行。但是,脚本经常不执行。除了其他日志记录之外,我还在脚本的内容上方添加了一个简单的print语句,除了初始date命令的输出将其添加到日志之外,什么也没有。
#!/usr/bin/python
# Script for Fetching Tweets and then storing them as an HTML snippet for inclusion using SSI
print "Starting get_tweets.py"
import simplejson as json
import urllib2
import httplib
import re
import calendar
import codecs
import os
import rfc822
from datetime import datetime
import time
import sys
import pprint
debug = True
now = datetime.today()
template = u'<p class="tweet">%s <span class="date">on %s</span></p>'
html_snippet = u''
timelineUrl = 'http://api.twitter.com/1/statuses/user_timeline.json?screen_name=gcorne&count=7'
tweetFilePath = '/path/server-generated-includes/tweets.html'
if(debug): print "[%s] Fetching tweets from %s." % (now, timelineUrl)
def getTweets():
request = urllib2.Request(timelineUrl)
opener = urllib2.build_opener()
try:
tweets = opener.open(request)
except:
print "[%s] HTTP Request %s failed." % (now, timelineUrl)
exitScript()
tweets = tweets.read()
return tweets
def exitScript():
print "[%s] Script failed." % (now)
sys.exit(0)
tweets = getTweets()
now = datetime.today()
if(debug): print "[%s] Tweets retrieved." % (now)
tweets = json.loads(tweets)
for tweet in tweets:
text = tweet['text'] + ' '
when = tweet['created_at']
when = re.match(r'(\w+\s){3}', when).group(0).rstrip()
# print GetRelativeCreatedAt(when)
# convert links
text = re.sub(r'(http://.*?)\s', r'<a href="\1">\1</a>', text).rstrip()
#convert hashtags
text = re.sub(r'#(\w+)', r'<a href="http://www.twitter.com/search/?q=%23\1">#\1</a>', text)
# convert @ replies
text = re.sub(r'@(\w+)', r'@<a href="http://www.twitter.com/\1">\1</a>', text)
html_snippet += template % (text, when) + "\n"
#print html_snippet
now = datetime.today()
if(debug): print "[%s] Opening file %s." % (now, tweetFilePath)
try:
file = codecs.open(tweetFilePath, 'w', 'utf_8')
except:
print "[%s] File %s cound not be opened." % (now, tweetFilePath)
exitScript()
now = datetime.today()
if(debug): print "[%s] Writing %s to disk." % (now, tweetFilePath)
file.write(html_snippet)
now = datetime.today()
if(debug): print "[%s] Finished writing %s to disk." % (now, tweetFilePath)
file.close()
sys.exit(0)
有任何想法吗?该系统是运行Centos 5.3和python 2.4的VPS。
更新:我已经添加了整个脚本以避免任何混乱。
最佳答案
最可能的解释是,脚本有时会花费两分钟以上的时间(也许系统有时很忙,或者脚本可能不得不等待某些偶尔很忙的外部站点,等等),而您的cron是一个明智的跳过重复尚未终止的事件。通过记录脚本的开始和结束时间,您将可以仔细检查是否是这种情况。在这种情况下,您要做什么取决于您(我建议您考虑跳过偶尔的运行,以避免进一步增加非常繁忙的系统(您自己的系统或从中获取数据的远程系统)的负担。
关于python - 通过cron运行的Python脚本偶尔不会执行,我们在Stack Overflow上找到一个类似的问题:https://stackoverflow.com/questions/2778105/