校园春色亚洲色图_亚洲视频分类_中文字幕精品一区二区精品_麻豆一区区三区四区产品精品蜜桃

主頁 > 知識庫 > python requests模塊的使用示例

python requests模塊的使用示例

熱門標簽:蘇州人工外呼系統(tǒng)軟件 看懂地圖標注方法 淮安呼叫中心外呼系統(tǒng)如何 電話機器人貸款詐騙 打印谷歌地圖標注 電話外呼系統(tǒng)招商代理 佛山通用400電話申請 廣東旅游地圖標注 京華圖書館地圖標注

為什么使用requests:

  • 支持使用Cookie保持會話
  • 支持文件上傳
  • 支持自動確定響應內容的編碼
  • 對用戶來說比較人性化

模擬get請求:

獲取token

# 使用微信公眾平臺舉例
get_param_dict={
 "grant_type":"**************",
 "appid":"**************",
 "secret":"**************",
}
response = requests.get(url='https://api.weixin.qq.com/cgi-bin/token', # url地址
      params=get_param_dict) # 參數(shù)
print(response.content.decode('utf-8'))

模擬請求頭部信息

注:因為requests請求頭是以python,requests發(fā)起的,所以大部分接口都會需要手動添加頭部信息

# get 模擬請求頭部信息,(當你發(fā)現(xiàn)數(shù)據(jù)不對時,就模擬)
# 以百度舉例
get_param_dict ={
 "wd":"newdream"
}
# 添加頭部信息字典(可以使用抓包抓取到頭部信息)
header_info_dict = {
 "User-Agent":"Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.105 Safari/537.36",
 "Accpet":"text/plain, */*; q=0.01"
}
response = requests.get(url = 'https://www.baidu.com/s',
      params=get_param_dict,headers=header_info_dict)
print(response.content.decode('utf-8'))

模擬post請求

import requests,json
# requests模擬發(fā)送post請求
# 使用微信公眾平臺舉例
url_param_doct = {"access_token": "43_XcK_1rvR8VPgicGGzq7Vp2QrGx30Kwhy9SSShoVTQs11G_jP9aqhy2bwRQFuG2hYzkwVjphJFfPj8WYQR8vgfu5Xej7KaZBiyPDJ9sYoCKte78sqgtBdCf6N5S8QosNXBOFSEJnzLMbxJwCOTWAgAAANQU"}
post_param_data = {
 "tag" : {  "name" : "我是新標簽" }
}
response = requests.post(url='https://api.weixin.qq.com/cgi-bin/tags/create',
       params=url_param_doct,
       # json=post_param_data # 可以使用json
       data=json.dumps(post_param_data) # 也可以使用data,但是data要求是字符串,需要使用json模塊dumps轉化
       )
print(response.content.decode('utf-8'))

requests上傳文件

import requests,os
# post上傳文件
current_path = os.path.dirname(__file__) # os模塊定位當前路徑
excel_path = os.path.join(current_path,'..','data','j.xlsx') # join拼接
excel_file = {'file':open(excel_path,'rb')} # 做成字典,open打開文件 rb:只讀二進制
response = requests.post(url='https://2.python-requests.org/', # requests官方實例文檔地址
       files=excel_file) # files傳文件
print( response.content.decode('utf-8') )

requests設置代理

import requests
# 設置代理:為什么設置代理?
# 爬蟲類項目,有檢測機制
# 防止公司系統(tǒng)有防灌水功能
# 需要翻墻做接口的時候
proxy_server = {'http':'http://127.0.0.1:8888',
    'https':'http://127.0.0.1:8888'} # 做一個字典
proxy_user_pass = {
 'https':'http://uesrname:password@127.0.0.1:8888' # 需要用戶跟密碼使用這個
}
response = requests.get(url= 'https://baidu.com',
      proxies=proxy_server) # proxies設置代理關鍵字
print(response.status_code)

time模塊設置請求超時

如果一個請求很久沒有結果,就會讓整個項目的效率變得非常低,這個時候我們就需要對請求進行強制要求

讓他必須在特定的時間內返回結果,否則就報錯。

# 設置請求超時
import requests
import time
print(time.time()) # 時間戳
response = requests.get(url='https://www.baidu.com',timeout=3) # timeout=3: 請求如果在規(guī)定時間之內(3秒鐘內)沒有得到響應,就會拋出超時錯誤
print(time.time())

retrying模塊設置刷新

使用超時參數(shù)能夠加快我們整體的請求速度,但是在正常的網頁瀏覽過成功,如果發(fā)生速度很慢的情況,我們會做的選擇是刷新頁面

retrying模塊就可以幫助我們解決。使用retrying模塊提供的retry模塊

通過裝飾器的方式使用,讓被裝飾的函數(shù)反復執(zhí)行retry中可以傳入參數(shù)stop_max_attempt_number,讓函數(shù)報錯后繼續(xù)重新執(zhí)行

達到最大執(zhí)行次數(shù)的上限,如果每次都報錯,整個函數(shù)報錯,如果中間有一個成功,程序繼續(xù)往后執(zhí)行。

import requests
from retrying import retry


# 如果函數(shù)連續(xù)調用三次都報錯,才會報錯,如果三次之中有一次成功,就成功
@retry(stop_max_attempt_number=3)
def get_response(url):
 response = requests.get(url, timeout=2)
 return response
retrying_requests = get_response("https://www.baidu.com")
print(retrying_requests.content.decode())

cookie設置

好處:能夠訪問登錄后的頁面

壞處:一套cookie往往對應的是一個用戶的信息,請求太頻繁有更大的可能性被對方識別為爬蟲
如何解決 ?使用多個賬號

# 使用requests提供的session模塊
import requests
# 構造formdata表單數(shù)據(jù),填寫自己的賬號和密碼
post_data = {
 "username": "xxxxx",
 "password": "xxxxx"
}
# session的使用: 在請求之前創(chuàng)建session對象
session = requests.Session()
# 后續(xù)的請求都由session來發(fā)起,因為session中保存了用戶的登陸信息
session.post(url="https://www.baidu.com", data=post_data)
response = session.get("https://www.baidu.com")
# 使用session請求登陸后的界面
print(response.content.decode())

處理證書認證錯誤

import requests
# 方式一:不驗證證書,報警告,返回200
requests.packages.urllib3.disable_warnings()# 直接解決爆紅警告

# 方式二不驗證證書,報警告,返回200 ,后面拼接verify=False,加這個控制臺報警的話,就在加上方式一
response = requests.get('https://www.12306.cn',verify=False)
print(response.content.decode('utf-8'))

# 方式三:安裝pyopenssl 安裝之后就不會報錯# pip3 install -U requests[security] 
response = requests.get('https://www.12306.cn')
print(response.content.decode('utf-8'))

# 方式四: 加上證書 公司內部 問開發(fā)要xxx.crt文件 ,最穩(wěn)妥
response = requests.get('https://www.12306.cn',cert=('/path/server.crt', '/path/key'))

requests+jsonpath解析數(shù)據(jù)

hosts = 'https://api.weixin.qq.com' # 主機地址
# 獲取token
get_param_dict = {
 "grant_type":"**********",
 "appid":"*************",
 "secret":"***************"
}
response = requests.get('%s/cgi-bin/token'%hosts,params=get_param_dict)
json_obj = response.json()
 # json數(shù)據(jù)解析:從一個json體中取出需要的數(shù)據(jù),就叫json數(shù)據(jù)解析
token_id = jsonpath.jsonpath(json_obj,'$.access_token')[0] # 接口依賴,接口關聯(lián)
print(token_id)

以上就是python requests模塊的使用的詳細內容,更多關于python requests模塊的使用的資料請關注腳本之家其它相關文章!

您可能感興趣的文章:
  • Python grequests模塊使用場景及代碼實例
  • Python requests模塊cookie實例解析
  • Python requests模塊基礎使用方法實例及高級應用(自動登陸,抓取網頁源碼)實例詳解
  • Python利用requests模塊下載圖片實例代碼
  • 詳解Python requests模塊

標簽:湖州 江蘇 呼和浩特 衡水 股票 中山 駐馬店 畢節(jié)

巨人網絡通訊聲明:本文標題《python requests模塊的使用示例》,本文關鍵詞  python,requests,模塊,的,使用,;如發(fā)現(xiàn)本文內容存在版權問題,煩請?zhí)峁┫嚓P信息告之我們,我們將及時溝通與處理。本站內容系統(tǒng)采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《python requests模塊的使用示例》相關的同類信息!
  • 本頁收集關于python requests模塊的使用示例的相關信息資訊供網民參考!
  • 推薦文章
    校园春色亚洲色图_亚洲视频分类_中文字幕精品一区二区精品_麻豆一区区三区四区产品精品蜜桃
    精品久久久久久久久久久久久久久久久| 国产iv一区二区三区| 国产精品久久久久久久久动漫| 久久影院午夜论| www激情久久| 精品乱码亚洲一区二区不卡| 欧美一区二区黄| 久久久久99精品一区| 精品电影一区二区| 久久网站最新地址| 亚洲一区二区三区小说| 毛片一区二区三区| 国产精品白丝jk黑袜喷水| 99国产麻豆精品| 久久日韩精品一区二区五区| 欧美男人的天堂一二区| 国产综合一区二区| 在线亚洲免费视频| 久久久久久久精| 一区二区三区在线观看网站| 蜜桃av一区二区| 色偷偷久久人人79超碰人人澡| 欧美日韩精品综合在线| 久久久久国产精品厨房| 天天av天天翘天天综合网色鬼国产| 激情综合色综合久久综合| 色偷偷一区二区三区| 久久久99久久| 免费精品视频在线| 欧美中文一区二区三区| 国产精品美女久久久久久久久久久 | 日韩一区二区三区四区| 亚洲精品成a人| 亚洲日本免费电影| 天天亚洲美女在线视频| 成人免费看的视频| 日韩午夜在线影院| 午夜精品一区二区三区免费视频 | 午夜影院久久久| 91免费国产在线| 中文字幕在线播放不卡一区| 久久精品国产亚洲5555| 欧美午夜寂寞影院| 一区二区三区四区精品在线视频| 色先锋久久av资源部| 成人黄色免费短视频| 欧美午夜不卡在线观看免费| 中文字幕在线观看不卡视频| 国产精一区二区三区| 日韩欧美激情四射| 蜜臀99久久精品久久久久久软件| 欧美日韩国产美女| 日韩av午夜在线观看| 91精品欧美久久久久久动漫 | 亚洲成a人片综合在线| 欧美亚洲自拍偷拍| 蜜臀久久99精品久久久久宅男| 欧美一级生活片| 国产在线精品视频| 国产精品不卡在线| 91精品国产福利在线观看| 久久久亚洲综合| 久草精品在线观看| 国产精品福利一区二区| 欧美日韩一区二区在线视频| 天天综合日日夜夜精品| 久久精品一区四区| 色狠狠色噜噜噜综合网| 免费一级欧美片在线观看| 国产午夜精品福利| 欧美人xxxx| 成人h动漫精品一区二| 捆绑紧缚一区二区三区视频| 欧美变态tickling挠脚心| 国产91丝袜在线播放| 一区二区在线观看视频 | 99久久国产综合精品色伊| 九色综合狠狠综合久久| 国产三级一区二区三区| 色综合久久久久网| 日韩国产欧美视频| 欧美精品久久99| 成人永久免费视频| 日本成人在线电影网| 国产精品久久久久影院| 欧美一区二区在线不卡| 91黄视频在线| 精品在线一区二区| 首页国产欧美日韩丝袜| 亚洲免费观看视频| 国产精品网站在线观看| 欧美电影免费观看高清完整版在线| 91麻豆文化传媒在线观看| 99r国产精品| 国产丝袜欧美中文另类| 欧美精品第1页| 3atv一区二区三区| 色噜噜狠狠成人网p站| 99久久99久久免费精品蜜臀| 高清不卡在线观看| 国产成人av资源| 国产成人99久久亚洲综合精品| 九色|91porny| 国产在线不卡一区| 国产精品18久久久久久vr| 狠狠色狠狠色综合系列| 久久97超碰色| 国产一区二区三区在线看麻豆| 国产乱码一区二区三区| 精品一区二区在线看| 国产精品资源在线看| 9色porny自拍视频一区二区| av一本久道久久综合久久鬼色| 成人免费av网站| 欧美制服丝袜第一页| 欧美成人一区二区三区片免费| 久久综合久久鬼色| 亚洲欧美日韩国产中文在线| 丝袜亚洲另类丝袜在线| 亚洲va天堂va国产va久| 精品一区二区三区香蕉蜜桃| 国产成人av一区| 欧美日韩高清不卡| 久久精品一区二区三区不卡 | 91片在线免费观看| 欧美高清视频不卡网| 国产欧美久久久精品影院| 亚洲桃色在线一区| 免费高清在线一区| av在线这里只有精品| 欧美日韩高清一区二区不卡| 久久精品视频一区二区三区| 一片黄亚洲嫩模| 狠狠色丁香久久婷婷综合_中| 91日韩在线专区| 国产区在线观看成人精品| 日本一道高清亚洲日美韩| av一区二区三区四区| 99在线精品免费| 精品电影一区二区三区| 亚洲福利一区二区三区| 99久久精品99国产精品| 久久综合色婷婷| 久久不见久久见免费视频7| 欧美性感一类影片在线播放| 中文字幕中文字幕一区| 成人一区二区三区| 亚洲精品在线观看网站| 久久国产精品99久久人人澡| 欧美色中文字幕| 亚洲国产wwwccc36天堂| 91香蕉国产在线观看软件| 国产精品网站在线播放| 国产不卡一区视频| 国产欧美一区二区精品性| 国产在线一区观看| 国产欧美精品一区二区色综合朱莉| 国产一区二区三区不卡在线观看| 欧美一区二区三区日韩| 午夜私人影院久久久久| 欧美伦理影视网| 日韩欧美不卡一区| 亚洲一区二区三区精品在线| 日本道在线观看一区二区| 亚洲精品成a人| 欧美人伦禁忌dvd放荡欲情| 亚洲v日本v欧美v久久精品| 欧美写真视频网站| 免费视频最近日韩| 国产亚洲精品福利| voyeur盗摄精品| 亚洲精品国产精品乱码不99| 欧美日韩免费观看一区二区三区| 亚洲国产人成综合网站| 欧美不卡123| 成人丝袜视频网| 天堂蜜桃91精品| 久久亚洲欧美国产精品乐播| 99re热这里只有精品视频| 亚洲影院免费观看| 久久久久国产成人精品亚洲午夜| 成人影视亚洲图片在线| 婷婷综合在线观看| 国产视频在线观看一区二区三区| 色综合婷婷久久| 精品一区二区三区视频| 最新国产精品久久精品| 日韩一区二区三区电影在线观看| 国产福利91精品| 日韩一区精品视频| 国产精品第13页| xfplay精品久久| 欧美一区二区播放| 在线精品视频免费观看| 国产91清纯白嫩初高中在线观看| 一级女性全黄久久生活片免费| 欧美大尺度电影在线| 色久综合一二码| 99国产欧美另类久久久精品 | 玖玖九九国产精品|