java 爬取网页代码

客官°小女子只卖身不卖艺 2022-12-22 00:56 189阅读 0赞

package text;
    
    import java.io.BufferedReader;
    import java.io.IOException;
    import java.io.InputStreamReader;
    import java.net.URL;
    import java.net.URLConnection;
    import java.nio.charset.MalformedInputException;
    
    public class GetHtml {
    	
    	/**java项目源www.fhadmin.org
    	 * @param url 网址
    	 * @param encoding 编码
    	 * @return 返回string
    	 */
    	public static String getHtmlResouceUrl(String url,String encoding){
    		StringBuffer buffer= new StringBuffer();
    		URL urlObj=null;
    		URLConnection uc=null;
    		InputStreamReader isr=null;
    		BufferedReader reader=null;
    		String line=null;
    		try {
    			urlObj=new URL(url);
    			uc = urlObj.openConnection();
    			isr=new InputStreamReader(uc.getInputStream(), encoding);
    			reader=new BufferedReader(isr);
    			while((line=reader.readLine())!=null){
    				buffer.append(line+"\n");
    			}
    		}catch (MalformedInputException e) {
    			// TODO Auto-generated catch block
    			e.printStackTrace();
    			System.out.println("网络打开失败");
    		}catch (IOException e) {
    			// TODO Auto-generated catch block
    			e.printStackTrace();
    			System.out.println("网络连接失败");
    			 }finally{
    				 if(isr!=null){
    					 try {
    						isr.close();
    					} catch (IOException e) {
    						// TODO Auto-generated catch block
    						e.printStackTrace();
    					}
    				 }
    			 }
    		return buffer.toString();
    		
    	}
    	public static void main(String[] args) {
    		
    		String url="http://www.1b23.com";
    		String econding="utf-8";
    		String html=getHtmlResouceUrl(url,econding);
    		System.out.println(html);
    	}
    
    }

发表评论取消回复

表情：

评论列表（有 0 条评论，189人围观）

还没有评论，来说两句吧...

相关阅读

相关一段爬取网页图片的代码

我可以给你提供一个简单的爬取网页图片的代码例子：import urllib.requesturl = '[http://www.example.com/image.jpg'ur

喜欢ヅ旅行/ 2024年03月25日 18:50/ 0 赞/ 76 阅读

相关 Java 爬取网页

我们使用 net.URL 类的 URL() 构造函数来抓取网页代码如下 import java.io.BufferedReader; import j

Dear 丶/ 2023年05月21日 11:47/ 0 赞/ 241 阅读

相关 Java爬取网页数据

文章目录 1、导入依赖 2、源代码 1、导入依赖  <dependency>

灰太狼/ 2023年01月17日 03:27/ 0 赞/ 216 阅读

相关 java 爬取网页代码

package text; import java.io.BufferedReader; import java.io.IOException

客官°小女子只卖身不卖艺/ 2022年12月22日 00:56/ 0 赞/ 190 阅读

相关 Java代码实现网页数据爬取-HttpClient

一、环境准备软件准备： Idea ， maven 二、创建SpringBoot项目（创建过程略）三、编写pom文件，导入相关依赖 <

悠悠/ 2022年12月21日 02:25/ 0 赞/ 165 阅读

相关学习python爬取网页

新手学习python爬取网页先用下面4个库就够了：（第4个是实在搞不定用的，当然某些特殊情况它也可能搞不定） 1. 打开网页，下载文件：urllib 2

柔情只为你懂/ 2022年07月14日 09:21/ 0 赞/ 301 阅读

相关 Python网页爬取的通用代码框架

Goals: 有效处理和避免访问和爬取网页过程中可能出现的错误 Details： import requests def getHTMLText(url

傷城~/ 2022年06月12日 04:51/ 0 赞/ 201 阅读

相关 python爬取网页的通用代码框架

代码如下: import requests def getHTMLText(url): try: r = r

刺骨的言语ヽ痛彻心扉/ 2022年02月14日 06:45/ 0 赞/ 207 阅读

相关网页源码爬取

java实现网络爬虫爬取单一页面 package liuwenwu.test; import java.io.; import java

「爱情、让人受尽委屈。」/ 2021年10月20日 00:56/ 0 赞/ 395 阅读

相关爬取网页图片

下载表情包吧指定网页的所有图片 #coding:utf-8 import urllib.request import urllib.parse import urlli...

系统管理员/ 2021年05月03日 05:44/ 0 赞/ 657 阅读