post存储mysql_requests从api中获取数据并存放到mysql中

Dear 丶 2022-11-05 03:30 120阅读 0赞

python的requests库是一个非常强大的库，requests的安装方法十分简单，用:

pip install requests

即可安装requests，安装成功后：

import requests

即可导入requests模块，requests有get和post两种方法：

1、requests.get()用法:

url = "http://xxx"a\_content=requests.get(url)

aa=a\_content.content \#.content和.text的作用是一样的

a\_json= json.loads(aa)

这里说一下 json.loads和json.dumps，这是json模块的两个函数，分别进行解码和编码JSON数据， json.loads将json数据对象转换为python对象，相反，json.dumps是将python对象转换为json数据对象

我们得到的 a\_json是一个字典嵌套列表的结构，通过字典的key可以获取其对应的value，然后可以解析每个字段，如：

version\_name = a\_json\[0\]\['latest\_release'\]\['package'\]\['name'\]

a\_json是一个列表，列表中第0个元素是一个字典，依次取字典中的key，最终得到version信息

2、requests.post()用法:

requests.post()用法基本与requests.get()相同，但是requests.post可以接受带参数的请求，可以包含token等信息：

payload =\{"access\_token": "xxxxxxxxxxxxxxxxxxxxxxxxxx","request\_body": \{

\}

\}

headers= \{'content-type': 'application/json'\}

url= r"http://xxxxxxxxxxxxxxxxxxxxxxxxxx/xxxxxxxxxxx"re= requests.post(url, data=json.dumps(payload), headers=headers)

r= json.loads(re.text)

python连接MySQLdb:

db1 =MySQLdb.connect(

host="localhost",

db="",

user="root",

passwd="",

port=3306,

charset='utf8')

cur2=db1.cursor()

cur2.execute('xxxxxxxxxxx')

sql1= """create table table\_deploy(id INT (11) UNSIGNED NOT NULL PRIMARY KEY AUTO\_INCREMENT ,appid int not null

,timestamp VARCHAR(50)

,deploy\_id INT

)"""cur2.execute(sql1)

db1.commit()

这是python连接mysql的原始方法，如果用的是Django则自带ORM，Django的Models内部封装了mysql的方法

MySQLdb.connect()表示打开数据库连接，db1.cursor()表示使用cursor()方法获取操作游标 ，cur2.execute('xxxxxxxxxxx')表示使用execute方法执行SQL语句，sql1 =xxx  表示创建数据表SQL语句

时间戳相关转换，我们知道从接口获取的时间往往不是我们想要的时间格式，这里需要进行时间转换：

now\_time = int(time.time()) \#当前时间的时间戳

timeArray = time.strptime(timestamp, "%Y-%m-%d %H:%M")

\#timestamp是时间字符串，strptime函数根据指定的格式把时间字符串解析为时间元组

timeStamp\_1 = int(time.mktime(timeArray))

\#将时间元组转换为时间戳

timeArray11 = time.localtime(timeStamp\_1)

\#利用localtime()将时间戳转换为时间数组

dateStr= time.strftime("%Y-%m-%d %H:%M:%S", timeArray1)

\#再将时间数组转换为指定格式的时间字符串

datetimeObj = datetime.datetime.strptime(dateStr, "%Y-%m-%d %H:%M:%S")\#将字符串日期转换为datetime

data\_hours\_after = datetimeObj + datetime.timedelta(hours=16)\#转换为datetime之后可以对日期进行加减，表示16小时之后的日期

发表评论取消回复

表情：

评论列表（有 0 条评论，120人围观）

还没有评论，来说两句吧...

相关阅读

相关 MySQL存储过程中的数据无法获取问题

在MySQL中，如果你遇到了存储过程中的数据无法获取的问题，这通常有以下几种情况： 1. 数据库连接问题：确保你的程序能够正确地连接到MySQL服务器。 2. 存储过程执行

水深无声/ 2025年01月03日 10:27/ 0 赞/ 3 阅读

相关把数据库里的大表放到REDIS中（从Mysql将数据快速导入到redis中）

在把一个大表从 MySQL 迁移到 Redis 时，你可能会发现，每次提取、转换、导入一条数据是让人难以忍受的慢!这里有一个技巧，你可以通过使用管道把 MySQL 的输出

╰半夏微凉°/ 2024年02月18日 15:04/ 0 赞/ 66 阅读

相关从request中获取json数据

　　package com.newpp.core.interceptor; 　　import java.io.BufferedReader; 　　import java.i

今天药忘吃喽~/ 2023年10月11日 19:08/ 0 赞/ 62 阅读

相关获取到的ETF数据存储在data变量中代码

如果您想要存储获取的ETF数据到变量"data"中，您可以使用以下代码: import requests url = 'https://www.ex

傷城~/ 2023年09月29日 22:56/ 0 赞/ 12 阅读

相关【Log日志】打印mybatis中sql日志并存放到指定文件中

打印mybatis中sql日志并存放到指定文件中 `logback-spring.xml` (如果是logbackx.xml 动态路径会失效) <?xml ve

浅浅的花香味﹌/ 2022年12月17日 02:29/ 0 赞/ 395 阅读

相关 kafka消费者API之自定义存储offset 到mysql中

pom文件 <dependencies> <dependency> <groupId>org.apache.k

约定不等于承诺〃/ 2022年12月03日 08:50/ 0 赞/ 151 阅读

相关 post存储mysql_requests从api中获取数据并存放到mysql中

python的requests库是一个非常强大的库，requests的安装方法十分简单，用: pip install requests 即可安装requests，安装成功后

Dear 丶/ 2022年11月05日 03:30/ 0 赞/ 121 阅读

相关从request中获取json数据

package com.newpp.core.interceptor; import java.io.BufferedReader; impo

短命女/ 2022年05月24日 11:11/ 0 赞/ 242 阅读

相关 Python抓取数据并存入到mysql

!/usr/bin/env python coding:utf-8 ''' Created on Jul 21, 2013

﹏ヽ暗。殇╰゛Y/ 2021年12月22日 03:43/ 0 赞/ 270 阅读

相关使用Spark对数据进行ETL并存放到HBase中流程总结

ETL ETL用来描述将数据从来源端经过萃取（extract）、转置（transform）、加载（load）至目的端的过程使用场景要对某些日志数据文件进行分析

傷城~/ 2021年11月09日 01:16/ 0 赞/ 537 阅读