web scraper浏览器插件，比爬虫好使亿点...

蔚落 2022-12-24 10:59 137阅读 0赞

长话短说。  
安装插件后import sitement

{
        "_id":"auhhua","startUrl":["https://m.weibo.cn/2175434057/4575191730753625"],"selectors":[{
        "id":"评论滚动","type":"SelectorElementScroll","selector":"div.card-main > div.m-box","parentSelectors":["_root"],"multiple":true,"delay":"2000"},{
        "id":"评论内容","type":"SelectorText","selector":"div.m-box h3","parentSelectors":["评论滚动"],"multiple":true,"regex":"","delay":0},{
        "id":"点赞量","type":"SelectorText","selector":"aside:nth-of-type(2) em","parentSelectors":["评论滚动"],"multiple":false,"regex":"","delay":0}]}

将url替换成微博链接，可自动滑动并且爬取评论，但是不知道数据的排序依据。  
![是我在微博爬的评论][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzY0MzkwMA_size_16_color_FFFFFF_t_70]  
具体教程请参考知乎田老师大神：  
[zhuanlan.zhihu.com/p/89551741?from\_voters\_page=true][zhuanlan.zhihu.com_p_89551741_from_voters_page_true]  
over

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L3dlaXhpbl80MzY0MzkwMA_size_16_color_FFFFFF_t_70]: /images/20221120/c8f5941547354f5bb2bee688f28bac48.png
[zhuanlan.zhihu.com_p_89551741_from_voters_page_true]: https://zhuanlan.zhihu.com/p/89551741?from_voters_page=true

发表评论取消回复

表情：

评论列表（有 0 条评论，137人围观）

还没有评论，来说两句吧...

相关阅读

相关一个 println 竟然比 volatile 还好使？

Effective JAVA 里的并发章节里，有一段关于可见性的描述。下面这段代码会出现死循环，这个我能理解，JMM 内存模型嘛，JMM 不保证 stopRequeste...

朴灿烈づ我的快乐病毒、/ 2024年05月23日 22:28/ 0 赞/ 68 阅读

相关浏览器插件安装

![watermark_type_d3F5LXplbmhlaQ_shadow_50_text_Q1NETiBA546L5a625LqU5ZOl_size_20_color_FF

￡神魔★判官ぃ/ 2023年10月01日 11:17/ 0 赞/ 41 阅读

相关 web scraper浏览器插件，比爬虫好使亿点...

长话短说。安装插件后import sitement { "_id":"auhhua","startUrl":["https://m.weibo.

蔚落/ 2022年12月24日 10:59/ 0 赞/ 138 阅读

相关浏览器--插件

原文网址：[浏览器--插件\_IT利刃出鞘的博客-CSDN博客][--_IT_-CSDN] 查看插件源码其他网址 > [Chrome 技巧篇-已安装的crx插件源码

分手后的思念是犯贱/ 2022年12月16日 10:54/ 0 赞/ 266 阅读

相关前端开始（浏览器介绍、web标准、VSCode插件篇）

文章目录 1 网页 1.1 什么是网页 1.2 什么是html 1.3 网页的形成 2 常用浏览器 3 Web标

桃扇骨/ 2022年11月17日 14:55/ 0 赞/ 96 阅读

相关一个 println 竟然比 volatile 还好使？

前两天一个小伙伴突然找我求助，说准备换个坑，最近在系统学习多线程知识，但遇到了一个刷新认知的问题…… > 小伙伴：Effective JAVA 里的并发章节里，有一段关于可见

素颜马尾好姑娘i/ 2022年10月05日 11:56/ 0 赞/ 190 阅读

相关浏览器插件

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2hyYnNm

曾经终败给现在/ 2022年02月27日 13:06/ 0 赞/ 306 阅读

相关浏览器插件 -css-dom

DebugBar v5.2.2 Internet Explorer Developer Toolbar 1.00.2188.0 \---------------------

痛定思痛。/ 2021年12月11日 12:21/ 0 赞/ 305 阅读

相关 web scraper 谷歌浏览器插件入门到精通之路【批量爬虫网站地图，比火车头采集更好用的软件】

参考：[https://zhuanlan.zhihu.com/p/89551741?from\_voters\_page=true][https_zhuanlan.zhihu.

梦里梦外;/ 2021年08月31日 23:22/ 0 赞/ 206 阅读

相关 Xpath helper Python爬虫工具谷歌浏览器插件

介绍：一款很实用的谷歌浏览器Xpath 解析工具，通过浏览器在线解析工具可以省去很多重复运行，等待的时间。总之，就是能够很直观的查看你要解析到的结果工具截图

布满荆棘的人生/ 2021年06月11日 15:11/ 0 赞/ 524 阅读