PHP使用代理访问外部网站的方法

亦凉 2022-09-19 10:48 178阅读 0赞

从新浪网站抓取页面,周末连续抓了两天,结果被发现.IP被封.  
  
只好研究了一下代理的方法.成功.  
  
方法如下:  
  
    private $proxy\_host='119.70.40.101';  
    private $proxy\_port='8080';  
  
    //对获得内容进行处理,去掉头部信息  
    private function   trimHeader($content)\{  
        $array=split("\\n\\r",$content,"2");  
        return   trim($array\["1"\]);  
    \}  
  
    //使用代理抓取  
    private function http\_fopen($url)\{  
        $conn\_host   =   $this->proxy\_host;  
        $conn\_port   =   $this->proxy\_port;  
        $abs\_url   =   $url;  
        $query   =   "GET   $abs\_url   HTTP/1.0\\r\\n".  
        "User-agent:PHP/class   http   0.1\\r\\n".  
        "\\r\\n";  
        $fp   =   fsockopen($conn\_host,$conn\_port);  
        if(!$fp)\{  
            return   false;  
        \}else\{  
            fputs($fp,$query);  
            while(!feof($fp))   \{  
                $cc   .=   fgets($fp);  
            \}  
            fclose($fp);  
            $content=$this->trimHeader($cc);  
            return   $content;  
        \}  
    \}  
  
    public function \*\*\*\*()\{  
        $html = @$this->http\_fopen($url);  
    \}

阅读(896) | 评论(0) | 转发(0) |

上一篇：为我的女儿小雪写的小学二年级数学练习程序

下一篇：JS代码压缩方法

相关热门文章

*  [红石榴鲜活亮白面贴膜...][...]
 *  [红石榴鲜活亮白面贴膜...][... 1]
 *  [红石榴鲜活亮白面贴膜...][... 2]
 *  [红石榴鲜活亮白面贴膜...][... 3]
 *  [红石榴鲜活亮白面贴膜...][... 4]

*  承接自动化测试培训、外包、实...
 *  Solaris PowerTOP 1.0 发布
 *  For STKMonitor
 *  busybox的httpd使用CGI脚本(Bu...
 *  项目小体会

*  [LNMP 老是会出现502？][LNMP _502]
 *  [suse 运用一个shell获取本机和...][suse _shell_...]
 *  [虚拟机 unix 配置ip ][unix _ip]
 *  [hp-un 主机新系统读不到磁盘阵...][hp-un _...]
 *  [mysql出现问题：Starting MySQ...][mysql_Starting MySQ...]

给主人留下些什么吧！~~

评论热议

[...]: http://blog.chinaunix.net/uid-29384045-id-4048002.html
[... 1]: http://blog.chinaunix.net/uid-29386137-id-4048001.html
[... 2]: http://blog.chinaunix.net/uid-29391377-id-4048000.html
[... 3]: http://blog.chinaunix.net/uid-29393985-id-4047999.html
[... 4]: http://blog.chinaunix.net/uid-29396271-id-4047998.html
[LNMP _502]: http://ask.chinaunix.net/question/785370
[suse _shell_...]: http://ask.chinaunix.net/question/785369
[unix _ip]: http://ask.chinaunix.net/question/292361
[hp-un _...]: http://ask.chinaunix.net/question/37122
[mysql_Starting MySQ...]: http://ask.chinaunix.net/question/4616