使用curl从asp.net页面获取数据

时间:2013-12-30 08:27:48

标签: php asp.net curl web-scraping

我尝试file_get_content和curl来获取页面数据,该数据显示我何时在浏览器中打开它但什么都没有。

URL在浏览器中打开但是当我使用curl时,我重定向到主页,我使用什么方法来完成抓取页面,其中包含我的响应中的所有数据。

    function curl($url)
    {
      $agent = "Mozilla/5.0 (Macintosh; Intel Mac OS X 10.9; rv:26.0) Gecko/20100101 Firefox/26.0";
      $ch = curl_init();
      curl_setopt($ch, CURLOPT_URL, $url);
      curl_setopt($ch, CURLOPT_RETURNTRANSFER,1);
      curl_setopt($ch, CURLOPT_USERAGENT, $agent);
      curl_setopt($ch, CURLOPT_FOLLOWLOCATION, 1);
      curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, FALSE);
      $data = curl_exec($ch);
      $info = curl_getinfo($ch);  
      print_r($info);
      echo "curl error".curl_error($ch);
      curl_close($ch);
      echo $data;
      return $data;
    }

    $secState = '70';
    $rankYear = 2013;
    $url = 'https://tennislink.usta.com/tournaments/rankings/rankinghome.aspx#Action=1&SectionDistrict='.$secState.'&Year='.$rankYear.'&Division=G8&ListType=0';
    echo $url;
    $html=curl($url);
    echo $html;

1 个答案:

答案 0 :(得分:2)

您确定,您的网址是否正确?在&SectionDistrict

之间有一个空白字符

您可以使用以下

重试
    $url = 'https://tennislink.usta.com/tournaments/rankings/rankinghome.aspx#Action=1&SectionDistrict='.$secState.'&Year='.$rankYear.'&Division=G8&ListType=0';

此网址也适用于file_get_contents

相关问题