PM2 部署项目,内存满了重启,项目内定时任务被中断的问题

查看 153|回复 10
作者:Dnlyao   
想请教一下,这种怎么避免定时任务被中断。现在限制 512MB ,4 个进程,然后只在第一个进程跑定时任务。是使用 node-schedule 跑的。现在问题是不稳定,一个月有一两天会被打断,比如 2 点 0 分 0 秒的任务,刚进去任务,内存满载重启,重启后,定时任务不会继续。定时任务时汇总数据的。
目前想到的 一,就是定时任务开启时,先数据库插入记录,如果状态未改变的,重启后,跑方法继续运行。现在怕的是插入数据库的时候被中断,导致还是不会继续任务。
先不打算设置大一点的限制内存,因为服务器 4g ,有 docker 在上面跑着。
creazyrabbit   
在某个时间段多次检查状态呢
Dnlyao
OP
  
@creazyrabbit 那这个检查的也靠定时器来运作吗?如果少数应该可以,但是这个 sass 系统,生成报表记录有点多,也怕影响系统白天的使用。现在生成报表的全是挤在凌晨的时间。
securityCoding   
做个重试策略,redis 写个 key
Dnlyao
OP
  
@securityCoding 谢谢,我查一下这个怎么弄
crysislinux   
机器不会重启就用 crontab ,机器也不可靠就用外部的 cron 服务区去 call 你的服务。
coolcoffee   
机器应该不止 512MB 吧,这种情况适合用 MQ 消息队列来完成。
比如定时任务产生消息到 RabbitMQ ,这个基本上是毫秒级别的不会被打断。然后有对应消费者开始处理任务,关掉自动 ack ,只有任务成功或者失败才去确认。这样消费者哪怕被杀死,下次重启还会拿到没有 ack 的消息继续跑。
Dnlyao
OP
  
@crysislinux 但是机器的 crontab 或者外部 cron 执行了,项目重启了,不是会一样结果吗?定时任务执行了,但是项目重启了被中断,中断后不会继续执行。
Dnlyao
OP
  
@coolcoffee 机器 4g ,pm2 分配每个进程限制内存 512MB ,开启了 4 个进程,负载均衡,定时器只在一个进程内运行。
catinsides   
pm2 里的程序只用来分配任务,费内存的任务换到 child_process 执行
要不直接把 node-schedule 换成 bull
您需要登录后才可以回帖 登录 | 立即注册

返回顶部