php curl 模拟搜索引擎爬虫实例 360Spider

PHP 使用Curl函数模拟搜索引擎蜘蛛爬虫,我们这里以so.com (360Spider)为例:

<?php	      print_r(_GetContent('http://www.laoji.org'));      /**       * cURL获取网页内容       */      function _GetContent( $url )    {          $curl = curl_init();//初始化一个curl会话;          curl_setopt($curl,CURLOPT_URL,$url);//指定访问的url          curl_setopt($curl,CURLOPT_USERAGENT,"Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0); 360Spider");          curl_setopt($curl,CURLOPT_POST,$data);//post请求的参数,          curl_setopt($curl,CURLOPT_RETURNTRANSFER,1);//获取的信息以文件流的方式返回            $data = curl_exec($curl);//执行curl;          curl_close($curl); // 关闭CURL会话          return $data;      }  

 

腾讯云限时秒杀【点击购买】

搬瓦工,CN2高速线路,1GB带宽,电信联通优化KVM,延迟低,速度快,建站稳定,搬瓦工BandwagonHost VPS优惠码BWH26FXH3HIQ,支持<支付宝> 【点击购买】!

Vultr$3.5日本节点,512M内存/500G流量/1G带宽,电信联通优化,延迟低,速度快【点击购买】!

阿里云香港、新加坡VPS/1核/1G/25G SSD/1T流量/30M带宽/年付¥288【点击购买】

php curl 模拟搜索引擎爬虫实例 360Spider

`微信`扫码 加好友

链接到文章: https://www.gkxyz.com/php-curl-monisousuoyinqingpachongshili-360spider.html

推荐站点

  • 阿里云-为了无法计算的价值

    阿里云——阿里巴巴集团旗下公司,是全球领先的云计算及人工智能科技公司之一。提供免费试用、云服务器、云数据库、云 […]

  • RAKsmart

    主机商介绍:RAKsmart是知名的美国服务器租用商,包括美国站群服务器、美国cn2服务器、香港服务器等热门产 […]

  • Akamai(Linode)

    Deploy more with Linux virtual machines, global infrast […]

  • Vultr

    Vultr Global Cloud Hosting – Brilliantly Fast SSD […]

评论已关闭