2022-06-05
途家Scraping Api

搜索api 先通过fetch的api获得不同的限制条件

从0开始 最多58页 每页30个 相同条件最多爬1740个 可以倒序排序来翻倍 可合并其他排序来收集更多

用地区做限制 加上价格限制 或者加更多限制 使得总数少于1740*2=3480 用启发式策略 如果实在超过了预设限制不管了直接开始爬 这种策略可能没法暂停继续爬取

Read More