crontab定时执行datax

记录下使用crontab,datax定时同步数据遇到的问题。

1.开始使用如下配置，死活不执行。网上说crontab环境便利的问题，设置了也没反应。

[root@hxjk_test_mysql_redis_file test]# crontab -l
SHELL=/bin/bash
* 1 * * * sh /test/test.sh
*/3 * * * * python /data/datax/bin/datax.py /data/datax/job/job.json

　crontab中的环境变量默认不会将我们自行定义的环境变量载入进来，所以执行脚本的时候，需要执行source命令

修改如下执行成功：

[root@hxjk_test_mysql_redis_file test]# crontab -l
SHELL=/bin/bash
*  * * * sh /test/test.sh
*/ * * * * sh /data/crontab/mysqltomysql1.sh

[root@hxjk_test_mysql_redis_file crontab]# more mysqltomysql1.sh
#!/bin/sh
source /etc/profile
python /data/datax/bin/datax.py /data/datax/job/job.json

定时执行成功。

Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (-- ::13.509 [job-] INFO  JobContainer - PerfTrace not enable!)
Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (-- ::13.509 [job-] INFO  StandAloneJobContainerCommunicator - Total  records,  b
ytes | Speed 439B/s,  records/s | Error  records,  bytes |  All Task WaitWriterTime .000s |  All Task WaitReaderTime .030s | Percentage 100.00%)
Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (-- ::13.510 [job-] INFO  JobContainer - )
Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务启动时刻                    : -- ::)
Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务结束时刻                    : -- ::)
Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务总计耗时                    :                 10s)
Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (任务平均流量                    :              439B/s)
Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (记录写入速度                    :              5rec/s)
Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (读出记录总数                    :                  )
Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT (读写失败总数                    :                   )
Sep   :: hxjk_test_mysql_redis_file CROND[]: (root) CMDOUT ()
[root@hxjk_test_mysql_redis_file crontab]#