linux shell 脚本 限速核心是控频、控资源、控 并发:用 sleep+ 计数器或date+%s.%N 实现节流;timeout/ulimit 防单命令失控;parallel/xargs - P 限并发;ionice/nice 降优先级。

Linux Shell 脚本限速的核心思路是控制执行频率、资源占用和并发量,而不是单纯“慢下来”。关键在于识别瓶颈(CPU、内存、IO、网络),再用轻量、可靠、可监控的方式干预。
用 sleep + 计数器做基础节流
适合批量处理文件、调用 API 或轮询场景。避免密集 循环 打满 CPU。
- 每处理 10 条记录暂停 0.5 秒:for i in {1..100}; do echo “item $i”; ((i % 10 == 0)) && sleep 0.5; done
- 更稳妥写法:用 rate limit 变量控制间隔,配合 date +%s.%N 实现毫秒级精度(需 bash 4.2+)
- 注意:sleep 不解决 IO 阻塞,仅降低调度频率;若命令本身耗时长,优先优化命令而非加 sleep
用 timeout 和 ulimit 控制单次资源上限
防止某条命令失控(如 curl 卡住、find 扫描过深、正则回溯爆炸)。
- 限制单次执行时长:timeout 30s curl -s http://api.example.com/data
- 限制内存使用(如禁止超过 200MB):ulimit -v 209715 # 单位 KB;再运行你的脚本或命令
- 组合使用更安全:(ulimit -v 209715; timeout 20s python3 process.py) 2>/dev/NULL
用 parallel 或 xargs -P 控制并发数
批量任务最易打满 CPU 或压垮服务。硬 编码 并发数比默认全开更可控。
- 用 gnu parallel 限 4 个并发,自动排队:cat urls.txt | parallel -j 4 curl -s {}> {}.html
- 用 xargs(无 parallel 时):cat files.txt | xargs -P 2 -I{} cp {} /backup/
- 注意:-P 值不宜设为 CPU 核心数,建议设为 核心数 × 0.5~0.7,留出系统余量
用 ionice 和 nice 降低非关键任务优先级
不影响用户交互和其他关键服务,特别适合后台备份、日志归档类脚本。