python爬虫之快速对js内容进行破解

た入场券 2023-05-28 08:22 2阅读 0赞

这篇文章主要介绍了python爬虫之快速对js内容进行破解，到一般js破解有两种方法，一种是用Python重写js逻辑，一种是利用第三方库来调用js内容获取结果，这次我们就用第三方库来进行js破解,需要的朋友可以参考下  
前言

一般js破解有两种方法，一种是用Python重写js逻辑，一种是利用第三方库来调用js内容获取结果。这两种方法各有利弊，第一种方法性能好，但对js和Python要求掌握比较高；第二种方法快捷便利，对一些复杂js加密很有效。这次我们就用第三方库来进行js破解。

目标网站  
本次网站是\[企名片\]，网站对展示的数据进行了加密，所以直接找根本找不到。

目标url：https://www.qimingpian.com/finosda/project/pinvestment

js分析调试工具  
对js进行分析调试的浏览器一定要用谷歌浏览器，用这个来调试测试真的很方便。首先我们按F12打开开发者工具，选到network选项并勾选preserve log 选项，然后输入网址url来抓包。此时你会发现网页源码里没有展示内容，在搜索也找不到我们看到的内容，那说明网页内容是被加密处理了。

此时你可以一个个看每个包找找有什么可疑的内容，当然我们一般会先看xhr里的内容，一眼我们就发现里面都有encrypt\_data这个数据，看着很像。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2hhb3h1bjEy_size_16_color_FFFFFF_t_70]  
我们ctrl加shift加f键搜索encrypt\_data，找到第一个js里的encrypt\_data内容，然后翻到下面return e.encrypt\_data这一行来，打上断点看看这会是什么内容。（一般我们搜索到return我们搜索的内容都要打上断点来看看，八九不离十的）

打好断点后我们刷新页面来观察，选中e.encrypt\_data右键有个什么什么in console的，点这个会在下面出现我们选中的内容是什么。然后把后面的Object(d.a)(e.encrypt\_data)用同样的方法来试下，发现没有网页的内容啊。

这里一定要注意我们打的断点，在按一次，重复上面的步骤会发现，Object(d.a)(e.encrypt\_data)这不就是我们要的内容吗！e.encrypt\_data这个就是我们xhr里面的那个encrypt\_data，Object(d.a)是一个函数，就是这个函数对内容进行了加密，我们只要破解这个函数就OK了。![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2hhb3h1bjEy_size_16_color_FFFFFF_t_70 1]  
选中Object(d.a)上面会出现它在哪里，点击下跳转过去。可以发现函数返回了一个json对象。这个返回结果包括1个s函数，参数里只有a.a.decode(t)这一个变量，其余都是常量。![在这里插入图片描述][20200328160024186.png]  
所有我们用同样的方法找到s函数的具体内容和a.a.decode()这个函数的具体内容。方法就是我们在return JSON.parse这里重新打断点，点击断点的那个下一步，然后找上述函数的内容。  
![在这里插入图片描述][2020032816011139.png]  
s函数  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2hhb3h1bjEy_size_16_color_FFFFFF_t_70 2]  
a.a.decode()  
![在这里插入图片描述][2020032816013435.png]  
利用webstorm编辑器来运行上述函数进行调试

1 首先我们安装Nodejs，去官网下载安装，这是js环境。这个自己搜索个安装教程吧，这里不过多介绍了。

2 WebStorm 安装后激活，教程网上很多，大家自行搜索。它使用方式与 PyCharm 很类似。

我们把上述所需要的函数全部扣下来放到webstorm中，然后运行。注意有的函数里面会有没有定义的参数，遇到这些我们几句在谷歌浏览器里一个个找就可以了，一般会有很多常量，直接替换掉。

然后我们调用上述方法可以看到能够正常获取数据了，这里js里的部分方法我重新命名了，注意下，下面是部分代码片段。  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2hhb3h1bjEy_size_16_color_FFFFFF_t_70 3]  
最后用 Python 去调用解密函数就行了，这里出于对网站保护就不直接贴完整代码了。![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2hhb3h1bjEy_size_16_color_FFFFFF_t_70 4]  
最后给大家推荐一个口碑不错的python聚集地【[点击进入][Link 1]】，这里有很多的老前辈学习技巧，学习心得

，面试技巧，职场经历等分享，更为大家精心准备了零基础入门资料，实战项目资料，每天都有程序员

定时讲解Python技术，分享一些学习的方法和需要留意的小细节

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2hhb3h1bjEy_size_16_color_FFFFFF_t_70]: /images/20230528/fc0e77911fb549ac91dd789045100511.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2hhb3h1bjEy_size_16_color_FFFFFF_t_70 1]: /images/20230528/3527a913086c4357b9f9b74a9ef96f0a.png
[20200328160024186.png]: /images/20230528/07aa7207f15e4fa7bb373273f62d901c.png
[2020032816011139.png]: /images/20230528/d0cade9da5d543ba829c712f3a00c95e.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2hhb3h1bjEy_size_16_color_FFFFFF_t_70 2]: /images/20230528/213fdbb4444c485c84c05d5b063b0f39.png
[2020032816013435.png]: /images/20230528/30f716f5220c436aa1d2e99b2defd458.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2hhb3h1bjEy_size_16_color_FFFFFF_t_70 3]: /images/20230528/6eb72fefb0564463aa1860ca6192ecf6.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2hhb3h1bjEy_size_16_color_FFFFFF_t_70 4]: /images/20230528/2f5b7cd03f9a4098b93595abfb9c5949.png
[Link 1]: https://jq.qq.com/?_wv=1027&k=5cb1kUZ