周 (@yoyo)经济学人等报纸的聚合的想法和实现思路 中发帖

好的想法才有好的产品。受到下面的帖子启发 # 费阅读经济学人类网站的五种方法  
对于一个喜欢研究的人来说 决定做一个聚合新闻的工具 ,由于技术佬的英文水平不好,市面上的AI翻译又很多,于是设想用AI来翻译文章 ,来阅读。
[image]
实现思路:
通过 bypass-paywalls-chrome-clean是可以阅读完整的付费内容的 研究了下
觉得也挺奇怪的,这个东西的原理是啥。等着抓包的时候,看到了一些猫腻。

纽约时报:

[image]
嘿嘿 原来UA是用的搜索引擎的UA
Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
彭博社:
是返回了所有的内容,前端做了一些操作隐藏了。所谓防君子的反爬措施
经济学人:
这个bypass插件是不支持的,也建议使用网页缓存...