Использование python3 в скрипте оболочки в crontab
Я пытаюсь запустить сценарий оболочки с crontab, который запускает скрипты python3. Файл crontab для группы пользователей. Теперь он запускает скрипт, но не Скрипты python3 внутри него. Я пытаюсь отладить его, но не могу понять, что происходит. Это может быть проблема с разрешением или проблема пути, но я не могу выяснить. Это строка crontab
*/5 * * * * /home/group_name/path/to/script/run.sh
как я сказал, задание cron выполняется или, по крайней мере, это то, что я думаю, так как я бегу sudo grep CRON /var/log/syslog
Я получаю строки как
Feb 16 20:35:01 ip-**-**-*-*** CRON[4947]: (group_name) CMD (/home/group_name/path/to/script/run.sh)
прямо ниже я также получаю строку, которая может иметь какое-то отношение к проблеме
Feb 16 20:35:01 ip-**-**-*-*** CRON[4946]: (CRON) info (No MTA installed, discarding output)
и наконец run.sh
выглядит так
#!/bin/bash
# get path to script and path to script directory
SCRIPT=$(readlink -f "")
SCRIPTPATH=$(dirname "$SCRIPT")
echo "set directory"
cd "$SCRIPTPATH"
echo "run first script"
/usr/bin/python3 ./first_script.py > ./log1.txt
однако, когда задание cron выполняется, ничего не происходит, когда я запускаю его вручную, cahnges в базу данных происходит так, как ожидалось. Группа имеет те же права, что и я. Файл оболочки может быть выполнен мной, а группа и файлы python не могут быть выполнены мной, поэтому я не знаю, почему группа понадобится вот это.
PS: Я хочу выполнить скрипт python в оболочке, так как у нас много скриптов с несколькими временами много аргументов, и, следовательно, crontab станет перенаселенным, и некоторые скрипты должны быть выполнены в определенном порядке.
изменить:
Добавление exec >> /tmp/output 2>&1
сразу после #! /bin.bash
пишет Эхо в /tmp/output
всякий раз, когда я запускаю его вручную, но не когда я запускаю его в cron, даже не перед запуском любого скрипта python.
запуск одного из скрипты python непосредственно из cron работают, однако даже если я скопирую вставить ту же строку, что и в cron, в файл оболочки ничего не происходит.
6 ответов
существует много компонентов для этой проблемы. Я игнорирую ошибку MTA, потому что это просто уведомление по электронной почте, когда ваша работа cron заканчивается. Я также предполагаю, что у вас правильно установлены разрешения и что ваш скрипт работает нормально при запуске вручную в оболочке.
самая большая проблема заключается в том, что команда CRON не совпадает с запуском команды из терминала "shell". Вы должны указать, что ваш скрипт запускается с помощью bash. Измените задание cron от:
*/5 * * * * /home/group_name/path/to/script/run.sh
в:
*/5 * * * * bash /home/group_name/path/to/script/run.sh
этот вопрос более подробную информацию и дополнительные варианты для решения проблемы.
измените эту строку:
*/5 * * * * /home/group_name/path/to/script/run.sh
в:
*/5 * * * * cd /home/group_name/path/to/script && /home/group_name/path/to/script/run.sh
что касается /var/log/syslog, когда вы смотрите в /var/log/syslog, посмотрите на временные метки, чтобы выяснить, выполняется ли задание cron.
что касается задания cron, которое не может быть записано в журнал.тхт, это может быть связано с разрешениями. Попробуйте изменить эту строку:
/usr/bin/python3 ./first_script.py > ./log1.txt
в:
/usr/bin/python3 /full/path/to/first_script.py > /tmp/log1.txt
посмотреть есть ли разница. cron должен иметь возможность записывать в /tmp.
1) сообщение "Нет установленного MTA" не означает никакой ошибки, оно только указывает, что без почтового сервера cron не может сообщить никаких деталей.
изменить задание cron для регистрации его вывода в системный журнал:
*/5 * * * * /home/group_name/path/to/script/run.sh 2>&1 | /usr/bin/logger -t run.sh
затем проверьте результаты через sudo tail -f /var/log/syslog
(или sudo tail -f /var/log/messages
на RedHat и SuSE)
кроме того, установить Postfix и настройте его для" только локальной " доставки:
sudo apt-get install postfix
затем проверьте почту как group_name
пользователь.
2) перенаправление > ./log1.txt
на run.sh
перезаписать файл журнала при каждом выполнении. Если скрипт Python С то log1.txt
останется усекается до нулевой длины. В этом случае измените последнюю строку run.sh
:
/usr/bin/python3 ./first_script.py 2>&1 > ./log1.txt
и проверить результаты.
если log1.txt
не усекается и не содержит свежих выходных данных, тогда скрипт python вообще не запускается. См. Шаг 1) для отладки run.sh
.
в настоящее время существует много догадок о проблеме, и это потому, что ваша система не может отправить вам сообщение об ошибке, чтобы точно объяснить, в чем проблема. Я столкнулся с подобной проблемой некоторое время назад, был перегружен, пытаясь настроить реальную почтовую систему, поэтому написал короткую пересылку почты sendmail в: pygeon_mail
:
#!/usr/bin/python
from __future__ import with_statement
from email.mime.text import MIMEText
import email
import os
import pwd
import smtplib
import stat
import sys
import syslog
import traceback
CONFIG = '/etc/pygeon_mail.rc'
# example config file
#
# server=mail.example.com
# port=25
# domain=example.com
# host=this_pc_host_name
# root=me@example.com,you@example.com
# ethan=me@example.com
# debug=debug@example.com
def check_dangerously_writable(filename):
"return the bits of group/other that are writable"
mode = stat.S_IMODE(os.stat(filename)[0]) # get the mode bits
if mode & (stat.S_IWGRP | stat.S_IWOTH): # zero means not set
syslog.syslog("%s must only be writable by root, aborting" % (filename, ))
sys.exit(1)
def get_config(filename, config=None):
"return settings from config file"
check_dangerously_writable(filename)
if config is None:
config = {}
with open(filename) as settings:
for line in settings:
line = line.strip()
if line and line[:1] != '#':
key, value = line.split('=')
key, value = key.strip(), value.strip()
config[key] = value
return config
def mail(server, port, sender, receiver, subject, message):
"""sends email.message to server:port
receiver is a list of addresses
"""
msg = MIMEText(message.get_payload())
for address in receiver:
msg['To'] = address
msg['From'] = sender
msg['Subject'] = subject
for header, value in message.items():
if header in ('To','From', 'Subject'):
continue
msg[header] = value
smtp = smtplib.SMTP(server, port)
try:
send_errs = smtp.sendmail(msg['From'], receiver, msg.as_string())
except smtplib.SMTPRecipientsRefused as exc:
send_errs = exc.recipients
smtp.quit()
if send_errs:
errs = {}
for user in send_errs:
if '@' not in user:
errs[user] = [send_errs[user]]
continue
server = 'mail.' + user.split('@')[1]
smtp = smtplib.SMTP(server, 25)
try:
smtp.sendmail(msg['From'], [user], msg.as_string())
except smtplib.SMTPRecipientsRefused as exc:
if send_errs[user] != exc.recipients[user]:
errs[user] = [send_errs[user], exc.recipients[user]]
else:
errs[user] = [send_errs[user]]
smtp.quit()
for user, errors in errs.items():
for code, response in errors:
syslog.syslog('%s --> %s: %s' % (user, code, response))
return errs
if __name__ == '__main__':
syslog.openlog('pygeon', syslog.LOG_PID)
try:
config = get_config(CONFIG)
root = config.get('root')
domain = config.get('domain', '')
if domain:
domain = '@' + domain
sender = None
receiver = []
dot_equals_blank = False
ignore_rest = False
next_arg_is_subject = False
redirect = False
subject = ''
for i, arg in enumerate(sys.argv[1:]):
if next_arg_is_subject:
subject = arg
next_arg_is_subject = False
sys.argv[i] = '"%s"' % (arg, )
elif arg == '-s':
next_arg_is_subject = True
elif arg == '-i':
dot_equals_blank = True
elif arg[:2] == '-F':
sender = arg[2:]
elif arg[0] != '-':
receiver.append(arg)
else:
pass
command_line = ' '.join(sys.argv)
if sender is None:
sender = pwd.getpwuid(os.getuid()).pw_name
sender = '%s@%s' % (sender, config['host'])
if not receiver:
receiver.append(pwd.getpwuid(os.getuid()).pw_name)
limit = len(receiver)
for i, target in enumerate(receiver):
if i == limit:
break
if '@' not in target:
receiver[i] = ''
receiver.extend(config.get(target, target+domain).split(','))
receiver = [r for r in receiver if r]
server = config['server']
port = int(config['port'])
all_data = []
text = []
while True:
data = sys.stdin.read()
if not data:
break
all_data.append(data)
if ignore_rest:
continue
for line in data.split('\n'):
if line == '.':
if dot_equals_blank:
line = ''
else:
ignore_rest = True
break
text.append(line)
text = '\n'.join(text)
message = email.message_from_string(text)
errs = mail(server, port, sender, receiver, subject, message)
except Exception:
exc, err, tb = sys.exc_info()
lines = traceback.format_list(traceback.extract_tb(tb))
syslog.syslog('Traceback (most recent call last):')
for line in lines:
for ln in line.rstrip().split('\n'):
syslog.syslog(ln)
syslog.syslog('%s: %s' % (exc.__name__, err))
sys.exit(1)
else:
receiver = []
debug_email = config.get('debug', None)
if debug_email:
receiver.append(debug_email)
if errs and root not in receiver:
receiver.append(root)
if receiver:
debug = [
'command line:',
'-------------',
repr(command_line),
'-' * 79,
'',
'sent email:',
'-----------',
text,
'-' * 79,
'',
'raw data:',
'---------',
''
]
all_data = ''.join(all_data)
while all_data:
debug_text, all_data = repr(all_data[:79]), all_data[79:]
debug.append(debug_text)
debug.append('-' * 79)
if errs:
debug.extend([
'',
'errors:',
'-------',
])
for address, error in sorted(errs.items()):
debug.append('%r: %r' % (address, error))
debug.append('-' * 79)
text = '\n'.join(debug)
message = email.message_from_string(text)
mail(server, port, 'debug@%s' % config['host'], receiver, subject+' [pygeon_mail debugging info]', message)
if errs:
sys.exit(1)
Он был написан для Python 2.5 и должны работать с 2.6 и 2.7.
его нужно скопировать в /usr/sbin/sendmail
с разрешениями 0755 и принадлежит root:
sudo cp pygeon_mail/usr/sbin / sendmail
судо Чаун корня:корневой каталог /usr на/sbin/sendmail-а
sudo chmod 0755 /usr/sbin/sendmail
вам нужно создать /etc/pygeon_mail.rc
файл конфигурации (см. Пример кода).
затем вы можете проверить его с чем-то вроде:
$ echo некоторая полезная информация / sendmail себя-s " некоторые важные тема"
и вы, надеюсь, увидите это письмо в своей обычной учетной записи электронной почты (которую вы настроили в ).
после этого вы сможете получить фактическую ошибку, и мы действительно можем вам помочь
Если вы регистрируете вывод сценария, который вы вызываете с помощью cron, вы можете найти ошибку довольно легко. Попробуйте что-то вроде этого:
*/10 * * * * sh /bin/execute/this/script.sh >> /var/log/script_output.log 2>&1