进程占用内存太多
开启多个进程，每个进程内能过定时来执行任务。
项目描述：相于当爬虫，只是调用的是平台提供的API，抓去产品列表、对手价格，然后实现自动改价格（大部分都是平台提供的API）。
目前账号已经在达到150个。有的账号下的产品有2-3千。服务器配置还是最近才升到8核16G。CPU和内存使用率特别高。最近我发现有进程占用的内存超过1G（SHR）了，有的才几十。我猜测是某些账号下产品太多导致内存占用过高。根据文档查找进程ID，基本都是IO等待。
我准备使用memory_get_usage/memory_get_peak_usage记录每次运行的内存使用情况（记录账号ID），但观察一段时间，相减的结果只有30M以内（大部分在几M），这与top看到的相差太大。我怎么计算一次任务的内存占用情况呢？
我想找到是哪个账号，然后单独测试看是程序哪里的问题。
2868 3 0
3个回答
相似问题
年代过于久远，无法发表回答
月贡献榜
赞助商
热门问答
workerman 里面的redis 队列是基于redis的什么特性实现的？
webman有没有可能考虑内置Macro宏功能呢？
webman移植到linux报错Cannot redeclare……
workerman/http-client 是否需要手动关闭连接
关于webman使用fastcgi_finish_request函数的类似效果的方案
workerman/workerman (v4.2.0 => v4.2.1)后webman报错
webman不错，但不建议官方做webman-admin
Webman AI 发布5.2版本，支持画廊功能，支持史上最强gpt-4o模型
wokerman think-worker 内存一直增长
【文档优化】希望文档增加一个深色主题
SHR 不是实际占用内存，RES 才是
看错了，是RES
curl会内存泄露。你需要访问一定数量后重启进程
如果都是调用 API 的，肯定得使用 Workerman 的异步 HTTP 组件啊，否则你一个请求就阻塞了整个进程。