a12908 在电商购物排重有无解决方案？大量相同商品挑起来太难受了用ai写个插件自己一页一页翻只抓页面缓存爬下来然后做图片去重结果爬了没多少就被逮住了中发帖有没有好用爬取方案或者去重方案可以用？我只想在关键词搜索后把搜索结果抓下来然后去重

a12908 在电商购物排重有无解决方案？大量相同商品挑起来太难受了用ai写个插件自己一页一页翻只抓页面缓存爬下来然后做图片去重结果爬了没多少就被逮住了中发帖

有没有好用爬取方案或者去重方案可以用？我只想在关键词搜索后把搜索结果抓下来然后去重