分页将长列表(产品、搜索结果)分成多个页面——?page=2、offset=50或无尽滚动的AJAX调用。抓取器必须检测下一页模式并迭代直到没有更多结果。 使用Proxied的提示: 通过我们的4G/5G代理网关在每个页面请求时轮换IP以避免每IP页面深度限制。 尊重每页延迟以模拟人类浏览。 同时处理服务器端(?page=)和客户端无限滚动(JSON“光标”令牌)。