YQL黑名单

Question

我正在开发一个在线套牌编辑器Proxymang，YQL无法处理每秒的请求数。每张魔术卡的请求是一张，它们被缓存，并且它们是间隔开的。我该怎么办？

GitHub

Answer 1

我从未解决过这个问题;我最终决定使用Gatherer的meager API。

问题似乎是以下之一：

• 在太多请求/秒后，YQL将YelloSoft列入黑名单
• MagicCards.info在太多请求/秒后将YQL列入黑名单
• MagicCards.info有一个严格的robots.txt，它可以阻止HTML抓取，但并不总是