一、并发的核心定义
1.1 两个层级的概念
代理IP的并发分为两个层级，二者概念不同，不能混淆：
- 连接并发：同一时刻，客户端与代理、代理与目标之间保持活跃状态的TCP连接总数。受服务器端口、文件描述符、内存等硬件资源限制，服务商宣传的“并发数”通常指连接并发。
- 请求并发：单位时间内同时处理的HTTP请求数量。单条TCP连接可串行发送多个请求，HTTP/2协议还可多路复用并行发送，因此请求并发通常高于连接并发。
1.2 合理规划的必要性
并发设置过高或过低都会直接影响业务效果：
- 并发过高：单个IP请求频率超过目标平台风控阈值，触发验证码、限流甚至IP封禁；严重时会导致整个IP段被标记，影响范围扩大。
- 并发过低：IP池与带宽资源闲置，采集效率低下，任务周期拉长，综合使用成本上升。
合理规划的核心目标，是让单IP并发处于目标平台的安全区间内，同时总并发能力匹配业务峰值需求。
二、并发规划的核心约束因素
2.1 目标平台的单IP容忍度
这是并发规划的核心约束。不同平台的风控策略差异显著：
- 公开信息核验类平台：单IP每秒3-5次请求通常处于安全区间；
- 电商平台商品页：单IP每秒10-15次短期可承受；
- 社交媒体平台：单IP每秒1-2次，且对行为模式敏感度高。
需通过小规模测试实测，确定目标平台的安全请求速率与封禁触发阈值。
2.2 业务峰值请求量
根据业务目标计算峰值每秒请求数。例如每日采集100万条数据，8小时工作时长，平均每秒约35次，峰值通常按翻倍估算，即每秒70次设计。 需预留20%-50%的冗余量，应对突发高峰与业务波动。
2.3 单IP并发连接上限
住宅IP受运营商NAT设备与家庭路由器性能限制，单IP并发连接数不宜过高，过高容易出现连接超时、运营商断流。通常单IP并发控制在5-10条TCP连接为稳定区间。
2.4 IP池规模与调度能力
总并发能力与IP池规模直接相关。隧道代理模式下，并发压力会分散到整个IP池，但单IP依然受频率限制。IP池越丰富、调度算法越智能，整体并发承载能力越强。
三、量化规划方法
3.1 基础测算公式
- 总请求并发需求 = 单IP安全请求速率 × IP数量
- 总连接并发需求 = 单IP并发连接数 × IP数量
两者需同时满足，取约束更强的一方作为规划依据。
3.2 落地实施步骤
- 小规模基线测试：使用10-20个IP，逐步提升请求频率，记录验证码率与封禁率，确定单IP安全速率；
- 峰值需求测算：根据业务量与周期，计算峰值每秒请求数；
- 基础IP数量计算：峰值RPS ÷ 单IP安全速率 = 最小所需IP数；
- 连接并发校验：确认单IP连接数不超过稳定上限，异步场景需单独评估；
- 冗余预留：IP数量上浮20%-50%，应对瞬时高峰与IP偶发失效；
- 动态调优：上线后持续监控成功率、验证码率、响应时间，动态调整参数。
四、优化最佳实践
- 优先选择支持智能调度的代理服务，自动均衡单IP负载，实时剔除失效IP；
- 启用HTTP/2连接复用，在单条TCP连接上并行处理多个请求，降低连接并发压力；
- 结合请求间隔抖动、随机化等策略，避免机械固定频率请求，降低被识别概率；
- 建立监控体系，实时跟踪成功率、封禁率、延迟，动态调整并发策略，而非设置后一成不变。
