用JAVA写一个超级简单的爬虫例子

谁借莪１个温暖的怀抱￠ 2023-06-29 15:58 22阅读 0赞

1.  用的是Jsoup，这个工具可以解析指定URL文档的内容。
2.  如果是普通的工程则需要导入相应jar包，如果是Maven工程则需要引入坐标，坐标如下：

<dependency>
                <groupId>org.jsoup</groupId>
                <artifactId>jsoup</artifactId>
                <version>1.7.2</version>
            </dependency>

当然，也可以选择其他版本。如果需要导入jar包的话，可以自己下载。  
3. 这里爬取的是淮河水利委员会水文局网站上的实时水情数据。  
4. 代码如下：

package pachong;
    
    import org.jsoup.Jsoup;
    import org.jsoup.nodes.Document;
    import org.jsoup.nodes.Element;
    import org.jsoup.select.Elements;
    
    import java.net.URL;
    import java.util.Arrays;
    
    public class JsoupDemo1
    {
        
        public static void main(String[] args) throws Exception
        {
        
            Document document = Jsoup.parse(new URL("http://www.hrc.gov.cn/swj/"), 5000);
            Elements elements = document.select("[class=shuiqing_table] tr");
            for (Element element : elements)
            {
        
                String text = element.text();
                String[] s = text.split(" ");//字符串切割
                System.out.println(Arrays.toString(s));
    
            }
    
        }
    }

1.  运行结果如下图：  
    ![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RlZXBfcm9vdGVk_size_16_color_FFFFFF_t_70]

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RlZXBfcm9vdGVk_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20200113140735556.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L0RlZXBfcm9vdGVk,size_16,color_FFFFFF,t_70