我目前是开发包含前端客户端的应用程序的团队的一员。
通过这个客户端，我们发送用户数据，每个用户都有一个用户 ID，客户端通过 RESTful API 与我们的服务器对话，向服务器询问数据。
例如，假设我们有一个书籍数据库，用户可以获得作者最近写的 3 本书。我们重视用户的时间，我们希望用户无需明确注册即可开始使用该产品。
我们重视我们的数据库，我们使用我们自己的专有软件来填充它，并希望尽可能地保护它。
所以基本上问题是：
我们可以做些什么来保护自己免受网络抓取？
我非常想了解一些保护我们数据的技术，我们希望防止用户在作者搜索面板中输入每个作者的姓名，并获取每个作者写的前三本书。
任何建议的阅读将不胜感激。
我只想提一下我们知道验证码，并希望尽可能避免它们
防止这种情况的主要策略是：
请注意，您可以非常灵活地使用验证码。
例如：每天每个 IP 的第一本书不受验证码保护。但是为了访问第二本书，需要解决验证码。
由于您发现 Anony-Mousse 列出的许多项目都不能解决您的问题，所以我想进来并提出替代方案。您是否探索过将网页抓取保护作为服务提供的第三方平台？我将列出市场上可用的一些解决方案，并尝试将它们放在一起。为了充分披露，我是Distil Networks的联合创始人之一，这是我要上市的公司之一。
网页抓取保护作为核心竞争力：
Web Scraping 保护作为更大产品套件中的一项功能：
我的观点是，试图将机器人问题作为一项功能来解决的公司并没有有效地做好。只是不是他们的核心竞争力，存在很多漏洞
谈谈上述几点的一些陷阱也可能会有所帮助：