/DataScheduler

简单的数据调度脚本

Primary LanguagePythonMIT LicenseMIT

运行方式

  • 运行某一天
bash /data/DataScheduler/scheduler/scheduler.sh 2019-12-26
  • 运行某一段时间
bash /data/DataScheduler/scheduler/set_days_run.sh 2019-10-01 2019-12-26
  • 日常调度
bash /data/DataScheduler/scheduler/scheduler.sh $(date -d '-1 days' +%Y-%m-%d)
  • 日志

日志打印在logs下，格式为run_运行时间，如run_2019-12-26.log

注释

1、明确从shell进入hive环境的命令，如h2cmd进入hive

默认为，h2cmd,若不是，请修改scheduler.py的第112行：_prefix = "h2cmd --verbose" ，修改h2cmd为对应的命令即可。

版本要求

python2环境，python3的调度方式待更新