是否有一种方法可以从页面源中不可用的网站上抓取数据?

时间:2018-06-20 16:36:49

标签: json xml-parsing jsoup html-parsing

我必须在代码中包含哪些要指出正确方向的东西?

For Example this website

1 个答案:

答案 0 :(得分:0)

在“网络”选项卡上打开浏览器的调试器,并观察网站加载动态内容(单击时)的要求。您会看到它正在使用某些API获取所有数据,例如:https://www.bestfightodds.com/api?f=ggd&b=3&m=16001&p=2 您可以通过更改此URL中的参数来下载所有数据。 通常这足够了,但是在这里更加棘手,因为服务器返回的数据以某种方式进行了编码并且不容易读取。您必须调试其javascript才能找到用于解码此数据的函数,然后才能对其进行解析。