什么，3行Python代码就能获取海量数据？

╰+攻爆jí腚メ 2022-10-21 12:53 88阅读 0赞

本文转载自公众号【法纳斯特】，详情可以点击上方卡片，关注该公众号，获取更多好文推荐。

一谈起数据分析，首先想到的就是数据，没有数据，谈何分析。

毕竟好的菜肴，没有好的原材料，是很难做的～

所以本期小F就给大家分享一个获取数据的方法，只需三行代码就能搞定。

「GoPUP」，大佬造的轮子，大概有100+的免费数据接口。

![dbb493e5e6e9f3f0f73ec6b4d8f9a06d.png][]

GitHub：*https://github.com/justinzm/gopup*

使用文档：*http://doc.gopup.cn/\#/README*

主要有指数数据、宏观经济数据、新经济数据、微博KOL数据、信息数据、生活数据、疫情数据等。

# 安装gopup
    pip install gopup  --upgrade

安装成功后，就能使用了。

**01 微博指数**

获取指定关键词的微博指数。

# 微博指数
    import gopup as gp
    df_index = gp.weibo_index(word="马保国", time_type="1month")
    print(df_index)

time\_type="1month"; 1hour, 1day, 1month, 3month 选其一。

![631d7d00da944ed1a652e42c774b2627.png][]

三行Python代码实现数据获取。

**02 百度指数**

获取指定关键词的百度搜索指数。

# 百度指数
    import gopup as gp
    cookie = "此处输入您在网页端登录百度指数后的 cookie 数据"
    index_df = gp.baidu_search_index(word="马保国", start_date='2020-11-15', end_date='2020-11-25', cookie=cookie)
    print(index_df)

需要登陆百度指数，获取你的Cookie。

![4c83f18404216802fb90d305c3e6942f.png][]

设置关键词，时间起始，就能获取到马保国老师的热度数据了。

![dfaa3463d8de03697982a7ce77b80980.png][]

后面还有百度资讯、媒体、需求图谱、人群年龄、性别、兴趣分布数据接口，就不一一介绍了。

感兴趣的同学可以自行去查看文档。

**03 头条指数**

![458b5851b59b84daab8b31c7c8443ecb.png][]

获取指定关键词的头条指数。

# 头条指数
    import gopup as gp
    index_df = gp.toutiao_index(keyword="马保国", start_date='20201115', end_date='20201125')
    print(index_df)

接口挂了，不知为何～

还有相关性、情感、地域、城市、年龄、性别、用户阅读兴趣分析数据等接口。

**04 谷歌数据**

需要通过代理才能使用，不过上面这三类已经完全够用了。

# 谷歌数据
    import gopup as gp
    index_df = gp.google_index(keyword="马保国", start_date='2020-11-15T10', end_date='2020-11-25T23')
    print(index_df)

**05 宏观经济数据**

有一个杠杆率的数据可以使用。

# 杠杆数据
    import gopup as gp
    df_index = gp.marco_cmlrd()
    print(df_index)

不懂经济学，所以不明觉厉。

![5e8f9217c08cb83a00361f887699fc42.png][]

**06 新经济数据**

这个数据倒是蛮有趣的，主要是公司数据。

比如独角兽和倒闭公司的数据。

# 独角兽公司数据
    import gopup as gp
    df_index = gp.nicorn_company()
    print(df_index)

一共是240家独角兽公司。

![d7524069a6049444baa3700ab6a85b6b.png][]

蚂蚁、字节、阿里云、滴滴，都是行业中的大佬。

# 倒闭公司数据
    import gopup as gp
    df_index = gp.death_company()
    print(df_index)

倒闭的公司一共有6921家。

![8647e89b58527442a03355fe1e8acac7.png][]

看到不少P2P的公司。

剩下还有有一个特许经营许可数据，好像是吊牌销售的意思。

前段时间看到一篇文章，讲的就是南极人吊牌销售的事情，南极人都不自己搞生产，而是代工。

**07 KOL数据&信息数据**

主要是微博的KOL，所以没啥用。

# KOL数据
    import gopup as gp
    g = gp.pro_api(token = "……")
    df_index = g.weibo_user(keyword="雷军")
    print(df_index)

信息数据是新闻联播文字稿。

**08 中国油价数据**

包含汽油和柴油的调价信息数据。

# 油价数据
    import gopup as gp
    df_index = gp.energy_oil_hist()
    print(df_index)

时间从2000年直到2020年，细数20年油价变化。

![7410d804cccabbef6286b17364d043ae.png][]

**09 百度迁徙数据**

可以用来做飞线图或者OD图。

# 迁徙数据
    import gopup as gp
    migration_area_baidu_df = gp.migration_area_baidu(area="湖北省", indicator="move_in", date="20200201")
    print(migration_area_baidu_df)

单次返回100个城市的数据。

![c69cb5a5248d8a8ea2ccd3a382e870c8.png][]

**10 影视数据**

实时电影票房数据，最近又有病例出现，数据应该也比较惨淡。

这里需要一个WebDES.js文件，才能请求成功。

# 实时电影票房数据
    import gopup as gp
    df_index = gp.realtime_boxoffice()
    print(df_index)

「如果声音不记得」当日1千万的票房，太少了。

![796079842f7956ad16008d10aa9185ae.png][]

单日影院数据，今年影院能倒闭一大堆。

# 单日影院数据
    import gopup as gp
    df_index = gp.day_cinema(date="2020-12-08")
    print(df_index)

得到票房前100的数据。

![2ad2a74107aeef25811ec67d4de21356.png][]

最高应该是8万多的收入。

实时电视剧播映指数，天气冷了选个好剧或者综艺，窝在被窝刷起来。

# 电视剧数据
    import gopup as gp
    df_index = gp.realtime_tv()
    print(df_index)

大秦赋，小F也在看，感觉还不错。

![f4895b6b7daf7f28de89844fc37854ea.png][]

还有实时综艺播映指数、艺人商业价值、流量价值等数据。

**11 全国高等学校数据**

普通高等学校名单，包含名称、主管部门，所在省市、所在地、办学层次等信息。

# 普通高等学校数据
    import gopup as gp
    df_index = gp.university()
    print(df_index)

一共是2631所高校。

![86d34087c2a41ecce72e4837888c9245.png][]

还有成人高等学校以及高等学校详情数据。

**12 疫情数据**

有网易、丁香园、百度三家的疫情数据。

# 世界历史累计确诊数据
    import gopup as gp
    covid_163_df = gp.covid_163(indicator="世界历史累计数据")
    print(covid_163_df)

目前累计207个国家有疫情出现。

![65599c879e84115d2511f29176918d1d.png][]

全世界总共就233个国家和地区，快接近90%了。

由于数据接口太多了，小F就不一一介绍了，可以点击左下角的阅读原文，查看文档。

文末赠书

本次小F联合【机械工业出版社华章公司】给大家带来2本计算机视觉相关的书籍。

《**OpenCV 4计算机视觉项目实战**》介绍OpenCV的入门知识及安装，然后介绍OpenCV的基础知识，包括用户界面、矩阵运算、滤波器和直方图等，之后介绍复杂的计算机视觉算法，包括对象分割和分类、视频监控、对象跟踪等，最后探讨对象跟踪、文本识别、机器学习和人脸检测等高级技术。点击下图可看详情/购买????

**赠书规则**：给本文点赞后("在看"不作要求)，扫描下方二维码，添加小F的微信。把点赞截图发给我，我会发送抽奖码给大家，时间截止至12月11号 21:00。

![dabc3a99922db2b1dd433c4d6afde513.png][]

感谢大家对小F的支持！

[dbb493e5e6e9f3f0f73ec6b4d8f9a06d.png]: /images/20221021/d3258ed0357148d9a4349fb2501d699d.png
[631d7d00da944ed1a652e42c774b2627.png]: /images/20221021/f78b1a89a2f4437991260733f4ad41e4.png
[4c83f18404216802fb90d305c3e6942f.png]: /images/20221021/147524d59d434651aee3a61a9d64a356.png
[dfaa3463d8de03697982a7ce77b80980.png]: /images/20221021/a7e3a44a155d472f866397b09500786f.png
[458b5851b59b84daab8b31c7c8443ecb.png]: /images/20221021/7d8dd33b3e4048598ccc166af24784fb.png
[5e8f9217c08cb83a00361f887699fc42.png]: /images/20221021/8bbfa5ec1d61494b9718b28a0af9467e.png
[d7524069a6049444baa3700ab6a85b6b.png]: /images/20221021/a2eb5401a45f41b2a37acd7bd28bad85.png
[8647e89b58527442a03355fe1e8acac7.png]: /images/20221021/83c0a87933a04e69a84b2556a19720ad.png
[7410d804cccabbef6286b17364d043ae.png]: /images/20221021/c90d260147424e7cbdcc9e5fb4cbcb68.png
[c69cb5a5248d8a8ea2ccd3a382e870c8.png]: /images/20221021/6f04596b5dfe4440bc54db5c90ba7d6a.png
[796079842f7956ad16008d10aa9185ae.png]: /images/20221021/410112d330934ea596d850b703cb0ab7.png
[2ad2a74107aeef25811ec67d4de21356.png]: /images/20221021/b7c742c91cc44ce1b68e1af40f73679b.png
[f4895b6b7daf7f28de89844fc37854ea.png]: /images/20221021/5e41576f4bd941b6844c8151754f2b46.png
[86d34087c2a41ecce72e4837888c9245.png]: /images/20221021/538415b9bfb44e9ca868d3736d9721b5.png
[65599c879e84115d2511f29176918d1d.png]: /images/20221021/d4d552b36e544082b5f3c708e5e35499.png
[dabc3a99922db2b1dd433c4d6afde513.png]: /images/20221021/e02bd54db8f94b348167586b034e6de6.png