python 爬虫 1-1（ requests.session()会话保持/模拟登录状态）

古城微笑少年丶 2023-10-08 12:13 58阅读 0赞

#### 文章目录 ####

*   *  写在前面
     *   *  1、requests.session简单例子
         *  2、模拟百度登录

### 写在前面 ###

在某些网站抓取，或者app抓取时，有的时强制登陆，有的是不登陆返回的数据就是假的或者说是不完整的数据，这时就需要用到保持会话的功能

#### 1、requests.session简单例子 ####

> 参考源：https://www.cnblogs.com/qican/p/11153824.html

requests库的session对象能够帮我们跨请求保持某些参数，也会在同一个session实例发出的所有请求之间保持cookies  
![在这里插入图片描述][20200416230241129.png]  
代码

import requests
    s = requests.Session()
    s.get('https://httpbin.org/get')

requests.Session().get()和requests.get(),除了前者能传递cookie参数以外，其他的一致

#### 2、模拟百度登录 ####

首先我们打开百度，查看登录后百度账号的cookies值，经过观察发现是由”BAIDUID“和"BDUSS"记录登录状态  
![在这里插入图片描述][20200416231216147.png]  
![在这里插入图片描述][2020041623124982.png]  
在网页里面登录后，复制”BAIDUID“和"BDUSS"这两个参数的值

# coding:utf-8
    import requests
    # 保持登录状态
    s = requests.session()
    url = 'https://www.baidu.com/'
    # 请求头
    headers = {
        
         "User-Agent":"Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.81 Safari/537.36"
    }
    r = s.post(url,headers=headers)
    # 查看的cookies值
    cooks = {
        
        "BDUSS":"xxxxxxx",
        "BAIDUID":"XXXXXXXX"
    }
    # 添加登录所携带的cookies
    c = requests.cookies.RequestsCookieJar()
    c.set("BDUSS",cooks["BDUSS"])
    c.set("BAIDUID",cooks["BAIDUID"])
    s.cookies.update(c)
    # 判断是否登录成功
    r2 = s.get(url,headers=headers)
    if '换肤' in r2.text:
        print('登录成功')
    else:
        print("登录失败")
    
    
    
    ### 运行结果：登录成功

这里为什么要if ‘换肤’在r2里，因为登录前页面代码里是没有这个词的，登录后才有

登录前：  
![在这里插入图片描述][watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FfX2ludF9f_size_16_color_FFFFFF_t_70]  
登陆后：  
![在这里插入图片描述][20200416234040187.png]  
![在这里插入图片描述][20200416234115254.png]

[20200416230241129.png]: https://img-blog.csdnimg.cn/20200416230241129.png
[20200416231216147.png]: https://img-blog.csdnimg.cn/20200416231216147.png
[2020041623124982.png]: https://img-blog.csdnimg.cn/2020041623124982.png
[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FfX2ludF9f_size_16_color_FFFFFF_t_70]: https://img-blog.csdnimg.cn/20200416233835643.png?x-oss-process=image/watermark,type_ZmFuZ3poZW5naGVpdGk,shadow_10,text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L2FfX2ludF9f,size_16,color_FFFFFF,t_70
[20200416234040187.png]: https://img-blog.csdnimg.cn/20200416234040187.png
[20200416234115254.png]: https://img-blog.csdnimg.cn/20200416234115254.png