如题，目前正在做一个基于大模型的文档核验系统，老板希望我加上网络搜索功能，但是测试了一下博查搜索发现并不能满足现在的需求，它的部分网页内容比较过时，AI搜索相较网页搜索稍好一些，但是会把58同城之类的网页也加入参考列表，导致搜索结果质量同样很差。 
我自己也测试过写搜索引擎爬虫，但是bing的反爬我绕不过去，duckduckgo倒是有api可以用，但是很容易被临时封ip，满足不了搜索需求，各位佬友有什么推荐的api厂商或者别的实现方法吗