爬数据量上来后，我是怎么管那一大池子出口的

数据采集一开始只是几条固定出口钉死的脚本（那篇），量小够用。等业务要扫几十个城市、几百万条记录，单条出口就不够了——频率一高就被限，扩也没法扩。这时候得把出口变成”一池子”，做轮询调度。我讲讲我是怎么管这池子的。

从单条到一池子

规模上来后，核心思路是：准备一批固定出口（而不是一条），调度层按任务分配、轮询或按城市映射，避免单IP频率过高。地图POI采集（那篇）讲的按城市对齐，其实就是这池子的一个用法——每个城市对应池里的一类出口。

出口池用天行+鲸云组合

池子里的出口我分两档：轻量、对住宅属性要求不高的任务用天行IP的长效静态或N节点，月付才几块钱，量大也不心疼，用邀请码 blsj 走专属通道还能再低一截，入口在 www.jiyueip.com/link/5629；对住宅敏感、需要真实家宽的任务用鲸云IP的家庭或定制区，注册后联系客服微信 x31471626 改价，独享家宽、支持API对接，适合规模化，入口在 www.jiyueip.com/link/5630。

调度层直接上云服务器

调度层（轮询、频率控制、失败重试、按城市映射）我直接部署在云服务器上，这样调度和数据出口都在云上，整条链路稳。雨云的五折优惠码 admin01 确实香，云服务器预装宝塔面板、按需选配置，入口在 www.jiyueip.com/link/5617。个人开发者上云（那篇）和预算紧的轻量云（那篇）都写过它的玩法，可以一起看。

合规是底线

只做合规的公开数据采集，不爬未授权内容、不绕过对方风控、不刷量。本文聊的只是把出口池和调度层搭起来的技术方法，池子稳了，规模才上得去。