任务调度导致cpu占用过高

问答 / 27 / 48 / 创建于 1年前

1). 当前使用的 Laravel 版本？

9.52.16

2). 当前使用的 php/php-fpm 版本？

PHP 版本：8.0

3). 当前系统

centos7.9
cpu:6核
内存：16G

4). 业务环境

生产环境
无负载均衡

2. 问题描述？

任务调度导致cpu占用过高，虽然有两个站点，但是实际上只有总共只有五个任务，而且还是错开执行的(两分钟一次，半小时一次的，一个月一次的)。
但是我看基本上每分钟都会去执行这个 command，占用突然爆满，可能也就几秒钟的时间
对于任务也是有加 withoutOverlapping 避免任务重复，但是实际上业务场景任务一般两分钟左右就能执行完，任务基本上不会有重复

任务调度导致cpu占用过高

3. 您期望得到的结果？

请问各位有遇到过相关问题嘛，有没有什么解决方案

任务调度 CPU

Ancient

5 声望

暂无个人描述~

1 人点赞

从小程序个人账户申请开始，带你一步步进行开发一个微信小程序，直到提交微信控制台上线发布。

你将学到如 RESTFul 设计风格、PostMan 的使用、OAuth 流程，JWT 概念及使用和 API 开发相关的进阶知识。

推荐文章：

更多推荐...

博客

冯老师的困惑 —— 一个跑了两年的 BUG 21 / 17 |

博客

[网安]二：记录一下，服务器又又被黑的一次。 34 / 33 |

博客

Laravel Schedule(任务调度)源码分析 15 / 3 |

博客

失业两个月找存在感系列——几行代码轻松实现laravel链式追踪，一分钟快速排查系统问题 26 / 19 |

博客

一个延时任务问题引发的思考 29 / 16 |

博客

别让这样的定时任务拖垮你的网站 24 / 30 |

讨论数量: 48

meows

课程读者 18 声望

首先不确定是不是laravel bug 所致，其次定时任务框架一大堆。
webman workerman crontab ，安装一下laravel eloquent 业务都不需要改变。www.workerman.net/doc/webman/compo...
Hyperf Swoole, 连接池本身使用的laravel eloquent，也是不需要改变业务。
https://hyperf.wiki/3.0/#/zh-cn/crontab?id=%e5%ae%9a%e6%97%b6%e4%bb%bb%e5%8a%a1

所以你在纠结什么呢？要不就追踪下laravel 任务调度的原理，看看能否找到原因。

第三方框架性能更好，我看你这种调用我都觉得打脑壳。
每次fork一个进程去运行，然后这个进程就退出了，看着就觉得性能差。
每次都要加载laravel console/kernel到内存，定时任务换别的框架来做吧！（其它框架常驻内存，不用你每次fork进程，会一直常驻，只会每次运行你的业务）

1年前评论

GeorgeKing

确实，Laravel 实现的 Schedule 调度支持 command 这本身就是一种为了方便而妥协的胶水代码！一步到位可以考虑这种常驻进程的 Schedule 实现，当然也可以基于 Laravel 的 Schedule 做优化，比如将执行的任务放入队列！那么 Scheduler 的任务就只是一个简单的 Producer。

meows （作者）

@GeorgeKing 几分钟那种就不应该用定时任务，就应该延时队列。定时任务至少也得半小时及以上，间隔许久那种。

haircutlj

好的

小李世界

Laravel 8.x 译者 2.0k 声望 / Doge 先锋 @ dogeow.com

加下调试看看，比如时间。另外 PHP 日志，数据库日志也观察看看。

1年前评论

Ancient （楼主）

这跟我的自定义代码没有关系，因为即使我把Kernel.php的所有任务都注释掉了，只去执行的空任务。它依旧会短时间导致占用cpu90~100

徵羽宫

@Ancient 每分钟都会去执行这个 command 我感觉是不是你的任务调度频率写的有问题，就好像 for 循环查数据库 cpu 占用也会满。我个人感觉应该是你的业务逻辑有问题

徵羽宫

课程读者 300 声望

我搞得贼复杂，用广播发送消息到本地处理了。

1年前评论

Ancient （楼主）

是什么广播 mq嘛？

徵羽宫（作者）

@Ancient laravel 消息通知里面那个广播通知。消息通知《Laravel 10 中文文档》

Ancient （楼主）

@徵羽宫目前没用过这个功能，我研究一下看看能不能优化一下，谢谢推荐

徵羽宫（作者）

@Ancient 我内个是真的特别耗CPU的操作这么搞。我感觉你这个问题的出现还是因为你不会用。

❤seven

课程读者 80 声望

我得也是

1年前评论

❤seven （作者）

@Ancient golang重写一下

Ancient （楼主）

你有解决嘛？

lovewei

182 声望

CPU负载高，具体要看业务，你的业务代码不贴出来或者业务处理流程逻辑不讲清除，没办法帮你分析问题。

1年前评论

Ancient （楼主）

我想这跟我的自定义代码没有关系，因为即使我把Kernel.php的所有任务都注释掉了，只去执行的空任务。它也依旧会短时间导致占用cpu90~100

小学毕业生

课程读者 177 声望

同样的问题飘过，就是执行这个脚本的一瞬间那cpu上去了

1年前评论

Ancient （楼主）

确实，执行command 命令就会飙上去，就算是空任务也一样的。这肯定跟自己的自定义代码没关系，应该是框架原因加载的库他太多导致的

meows

很正常，因为要加载文件到内存

haircutlj

课程读者 0 声望

我以为只有我有这个问题，laravel10也是，测试的空任务，执行的时候cpu爆满，后经过测试是任务调度用command命令才会如此，还不知道如何解决

1年前评论

haircutlj

课程读者 0 声望

手动执行command命令也会cpu突然升高，任务调度只要不使用command就正常，整个程序只要有php artist 命令就会cpu升高，求大神解答！

1年前评论

Ancient （楼主）

是的，只要执行command命令就会飙高，我的服务器实在也是6核都能一瞬间飙满。个人感觉是框架原因，执行的时候需要加载的库太多了。我想我去试试把任务换成原生的或者改用python脚本来执行吧

haircutlj （作者）

@Ancient 我还在外网有没有解决方案？我都怀疑是不是我哪里没对？实在不行，我就用linux的cron

❤seven

其实用golang 照着chatgpt翻译一下php代码编译成一个可执行文件就行了这种性能代码还是换种语言实现一下如果需要和php交互 golang还可以同时起个web服务或者队列传递信息就行了

cccdz

课程读者 492 声望

2核4G的每秒中去執行平均1-2次 command命令平均最最高好像也才55%

1年前评论

haircutlj

你试下加上runinbackground，后台那个东西，如果不加还好一点，加了之后，空任务，一个command暂用20%左右的cpu，2个command暂用40%，我应用有6个command，瞬间挂掉。

cccdz （作者）

@haircutlj 後台運行是啟動一個進程如果多個就會啟動多個進程這樣我覺得肯定會增加cpu調度的

lijizheng

课程读者 102 声望

想看看你任务调度中的代码

1年前评论

Ancient （楼主）

任务调度没有代码，就是执行空的任务也会这样

GeorgeKing

L5.7 译者 761 声望

如果是没有任何调度任务的话，CPU 占用还那么高，可能是框架初始化的过程中有一些其他逻辑，例如是否在 ServiceProvider 中为 Web 服务查询全局数据这种操作。

为了更好的验证是否是框架问题，建议可以创建一个新的项目，什么都不做，直接运行 php artisan schedule:run 看下 CPU 占用率！

如果依然排查不出问题，可以开启 xdebug 的 profiling，导出 profiling 文件，然后用可视化工具分析性能问题！

1年前评论

haircutlj

直接运行 php artisan schedule:run，任务中使用command，command里面空任务，也如此。新安装的框架。

GeorgeKing （作者）

@haircutlj 如果是新装的框架没有其他任何操作，CPU 占用也是 100%，就很奇怪了，容器出问题的地方也就：

加载 App\Console\Commands 下所有的文件
EventMutex

执行任务前执行 schedule:clear cache 再试试呢！

GeorgeKing （作者）

@haircutlj 另外，执行 php artisan schedule:run 后会卡住，然后 CPU 一直处于 100% 还是说 php 进程会正常结束，然后 CPU 使用率就降下来了？

haircutlj

@GeorgeKing 是的，就执行那一下cpu涨了，然后cpu恢复正常，只有command任务调度才会如此，其他正常。

haircutlj

@GeorgeKing 你可以试试新安装一个框架，使用Artisan 命令调度，流程按手册的来，里面可以空代码，同样会占用很高的cpu

GeorgeKing （作者）

@haircutlj 我测下来 CPU 使用率有小幅波动，都不超过 10%

cccdz

@GeorgeKing 他是用了runinbackground 後台運行如果同一時間有6個任務需要運行那就會創建6個後台進程去處理任務創建進程這個操作應該是會耗費cpu的

haircutlj

就按他这个来，任务调度他应该只有一个任务吧，没有加runinbackground，一个任务占用10%左右，5个就是50%，还不涉及业务，io什么的，光执行任务调度，就占用服务器一半的cpu，我加上业务代码后，不就是cpu爆满了嘛~，一个空任务调用都能占用10%，有点夸张了吧

MR_NOBODY

21 声望

拿台服务器出来单独跑任务吧

1年前评论

haircutlj

那还不如用linux自带的定时任务呢~

MR_NOBODY （作者）

@haircutlj 这样不会影响接口的访问

GeorgeKing

L5.7 译者 761 声望

Laravel

@haircutlj

1年前评论

haircutlj

就按你这个来，任务调度你应该只有一个任务吧，一个任务占用10%左右，5个就是50%，还不涉及业务，io什么的，光执行任务调度，就占用服务器一半的cpu，我加上业务代码后，不就是cpu爆满了嘛~，一个空任务调用都能占用10%，有点夸张了吧

meows

@haircutlj 他这飙升太正常了，在调度进程启动时候回加载console/kernel,自然就是突然飙升。

GeorgeKing （作者）

@haircutlj 任务调度的 CPU 占用理论上不会虽则任务的多少而增长（也就是说这部分性能大多是在处理进程的创建和销毁工作），因为默认情况下，定义的任务不是并发执行的，所以不能照你这么计算，除非你的所有任务都是 runInBackground 的！另外还有一个认知误区就是 CPU 占用 100%，并不是整个 CPU 的所有核心都 100%，而是单个核心，例如 OP 的截图中，103%！如果业务中真的有一些任务就是比较耗时，也比较耗资源可以单独一台服务器部署，避免影响 Web 服务！

Robi

0 声望

我在 mac 也遇到过一次，大致是更新了 php 然后 cpu 的进程很多，导致cpu温度 90 度，一直降不下来。我无意查了下进程，发现 php 进程数很多，关闭全部php进程，重新启动电脑，解决。

1年前评论

Get_old

19 声望

使用swoole，cpu立马就降下去了

9个月前评论

讨论应以学习和精进为目的。请勿发布不友善或者负能量的内容，与人为善，比聪明更重要！

帮助

任务调度导致cpu占用过高

1). 当前使用的 Laravel 版本？

2). 当前使用的 php/php-fpm 版本？

3). 当前系统

4). 业务环境

2. 问题描述？

3. 您期望得到的结果？

推荐文章：

社区赞助商

关于 LearnKu

资源推荐

服务提供商

其他信息

任务调度导致cpu占用过高

1). 当前使用的 Laravel 版本？

2). 当前使用的 php/php-fpm 版本？

3). 当前系统

4). 业务环境

2. 问题描述？

3. 您期望得到的结果？

推荐文章：

社区赞助商

关于 LearnKu

资源推荐

服务提供商

其他信息

请登录