校园春色亚洲色图_亚洲视频分类_中文字幕精品一区二区精品_麻豆一区区三区四区产品精品蜜桃

主頁 > 知識庫 > 如何用python爬取微博熱搜數據并保存

如何用python爬取微博熱搜數據并保存

熱門標簽:高德地圖標注字母 騰訊地圖標注有什么版本 400電話辦理費用收費 千呼ai電話機器人免費 鎮江人工外呼系統供應商 深圳網絡外呼系統代理商 申請辦個400電話號碼 外呼系統前面有錄音播放嗎 柳州正規電銷機器人收費

主要用到requests和bf4兩個庫
將獲得的信息保存在d://hotsearch.txt下

import requests;
import bs4
mylist=[]
r = requests.get(url='https://s.weibo.com/top/summary?Refer=top_hottopnav=1wvr=6',timeout=10)
print(r.status_code) # 獲取返回狀態
r.encoding=r.apparent_encoding
demo = r.text
from bs4 import BeautifulSoup
soup = BeautifulSoup(demo,"html.parser")
for link in soup.find('tbody') :
 hotnumber=''
 if isinstance(link,bs4.element.Tag):
#  print(link('td'))
  lis=link('td')
  hotrank=lis[1]('a')[0].string#熱搜排名
  hotname=lis[1].find('span')#熱搜名稱
  if isinstance(hotname,bs4.element.Tag):
   hotnumber=hotname.string#熱搜指數
   pass
  mylist.append([lis[0].string,hotrank,hotnumber,lis[2].string])
f=open("d://hotsearch.txt","w+")
for line in mylist:
 f.write('%s %s %s %s\n'%(line[0],line[1],line[2],line[3]))

知識點擴展:利用python爬取微博熱搜并進行數據分析

爬取微博熱搜

import schedule
import pandas as pd
from datetime import datetime
import requests
from bs4 import BeautifulSoup

url = "https://s.weibo.com/top/summary?cate=realtimehotsudaref=s.weibo.comdisplay=0retcode=6102"
get_info_dict = {}
count = 0

def main():
  global url, get_info_dict, count
  get_info_list = []
  print("正在爬取數據~~~")
  html = requests.get(url).text
  soup = BeautifulSoup(html, 'lxml')
  for tr in soup.find_all(name='tr', class_=''):
    get_info = get_info_dict.copy()
    get_info['title'] = tr.find(class_='td-02').find(name='a').text
    try:
      get_info['num'] = eval(tr.find(class_='td-02').find(name='span').text)
    except AttributeError:
      get_info['num'] = None
    get_info['time'] = datetime.now().strftime("%Y/%m/%d %H:%M")
    get_info_list.append(get_info)
  get_info_list = get_info_list[1:16]
  df = pd.DataFrame(get_info_list)
  if count == 0:
    df.to_csv('datas.csv', mode='a+', index=False, encoding='gbk')
    count += 1
  else:
    df.to_csv('datas.csv', mode='a+', index=False, header=False, encoding='gbk')

# 定時爬蟲
schedule.every(1).minutes.do(main)

while True:
  schedule.run_pending()

pyecharts數據分析

import pandas as pd
from pyecharts import options as opts
from pyecharts.charts import Bar, Timeline, Grid
from pyecharts.globals import ThemeType, CurrentConfig

df = pd.read_csv('datas.csv', encoding='gbk')
print(df)
t = Timeline(init_opts=opts.InitOpts(theme=ThemeType.MACARONS)) # 定制主題
for i in range(int(df.shape[0]/15)):
  bar = (
    Bar()
      .add_xaxis(list(df['title'][i*15: i*15+15][::-1])) # x軸數據
      .add_yaxis('num', list(df['num'][i*15: i*15+15][::-1])) # y軸數據
      .reversal_axis() # 翻轉
      .set_global_opts( # 全局配置項
      title_opts=opts.TitleOpts( # 標題配置項
        title=f"{list(df['time'])[i * 15]}",
        pos_right="5%", pos_bottom="15%",
        title_textstyle_opts=opts.TextStyleOpts(
          font_family='KaiTi', font_size=24, color='#FF1493'
        )
      ),
      xaxis_opts=opts.AxisOpts( # x軸配置項
        splitline_opts=opts.SplitLineOpts(is_show=True),
      ),
      yaxis_opts=opts.AxisOpts( # y軸配置項
        splitline_opts=opts.SplitLineOpts(is_show=True),
        axislabel_opts=opts.LabelOpts(color='#DC143C')
      )
    )
      .set_series_opts( # 系列配置項
      label_opts=opts.LabelOpts( # 標簽配置
        position="right", color='#9400D3')
    )
  )
  grid = (
    Grid()
      .add(bar, grid_opts=opts.GridOpts(pos_left="24%"))
  )
  t.add(grid, "")
  t.add_schema(
    play_interval=1000, # 輪播速度
    is_timeline_show=False, # 是否顯示 timeline 組件
    is_auto_play=True, # 是否自動播放
  )

t.render('時間輪播圖.html')

到此這篇關于如何用python爬取微博熱搜數據并保存的文章就介紹到這了,更多相關python爬取微博熱搜數據內容請搜索腳本之家以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持腳本之家!

您可能感興趣的文章:
  • python爬取天氣數據的實例詳解
  • 用python爬取歷史天氣數據的方法示例
  • python爬取哈爾濱天氣信息
  • python3爬取各類天氣信息
  • Python爬取國外天氣預報網站的方法
  • Python爬蟲爬取微博熱搜保存為 Markdown 文件的源碼
  • python+selenium爬取微博熱搜存入Mysql的實現方法
  • Python網絡爬蟲之爬取微博熱搜
  • python趣味挑戰之爬取天氣與微博熱搜并自動發給微信好友

標簽:烏蘭察布 平頂山 合肥 大慶 郴州 烏蘭察布 哈爾濱 海南

巨人網絡通訊聲明:本文標題《如何用python爬取微博熱搜數據并保存》,本文關鍵詞  如,何用,python,爬取,微博,;如發現本文內容存在版權問題,煩請提供相關信息告之我們,我們將及時溝通與處理。本站內容系統采集于網絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《如何用python爬取微博熱搜數據并保存》相關的同類信息!
  • 本頁收集關于如何用python爬取微博熱搜數據并保存的相關信息資訊供網民參考!
  • 推薦文章
    校园春色亚洲色图_亚洲视频分类_中文字幕精品一区二区精品_麻豆一区区三区四区产品精品蜜桃
    欧美精品一区二区三区视频| 久久精品一区二区三区av| 亚洲色图.com| 精品第一国产综合精品aⅴ| 在线精品视频一区二区三四| 麻豆精品一区二区综合av| 1024成人网| 久久久91精品国产一区二区精品 | 一本色道久久综合狠狠躁的推荐| 天堂精品中文字幕在线| 亚洲国产一二三| 亚洲欧美成aⅴ人在线观看| 国产精品无圣光一区二区| 久久精品亚洲乱码伦伦中文| 国产亚洲自拍一区| 久久精品视频免费| 久久久久久99久久久精品网站| 欧美一区二区三区电影| 67194成人在线观看| 欧美福利一区二区| 欧美一区二区三区小说| 欧美日韩高清一区二区不卡| 欧美日韩激情在线| 欧美一区二区私人影院日本| 欧美精选午夜久久久乱码6080| 欧美精选午夜久久久乱码6080| 欧美日韩免费一区二区三区视频| 风间由美一区二区三区在线观看| 国产精品亚洲一区二区三区妖精| 国内成人免费视频| 国产成人在线免费| 欧美少妇bbb| 欧美成人vps| 91在线你懂得| 激情国产一区二区 | 日韩精品一区二区三区视频| 亚洲日本成人在线观看| 精品少妇一区二区三区日产乱码| 日韩限制级电影在线观看| 欧美经典一区二区| 一区二区欧美国产| 日本欧美一区二区在线观看| 激情六月婷婷综合| av综合在线播放| 欧美日韩免费一区二区三区视频| 日韩三级中文字幕| 中文字幕第一区二区| 亚洲精品乱码久久久久久久久| 偷拍一区二区三区| 9色porny自拍视频一区二区| 正在播放一区二区| 久久精品男人的天堂| 亚洲自拍都市欧美小说| 麻豆一区二区在线| 制服丝袜亚洲精品中文字幕| 久久综合久久综合亚洲| 亚洲精品视频自拍| 美腿丝袜亚洲综合| www.欧美色图| 日韩女优视频免费观看| 亚洲欧美日韩国产综合在线| 免费看欧美女人艹b| 91蜜桃网址入口| 欧美色网一区二区| 欧美极品另类videosde| 日本v片在线高清不卡在线观看| 成人一区二区三区在线观看| 91精品国产综合久久精品性色| 国产欧美一区二区三区在线老狼| 欧美中文字幕一二三区视频| 不卡的电视剧免费网站有什么| 国产九九视频一区二区三区| 欧美日韩日本视频| 中文字幕在线观看不卡视频| 经典三级一区二区| 一本大道久久a久久精品综合| 精品国内片67194| 天天影视涩香欲综合网| 91蜜桃网址入口| 欧美国产欧美亚州国产日韩mv天天看完整| 国产精品久久久久久久久搜平片 | 色综合中文字幕国产| a4yy欧美一区二区三区| 国产亚洲短视频| 石原莉奈在线亚洲三区| 欧美在线观看一区二区| 欧美激情自拍偷拍| 粉嫩嫩av羞羞动漫久久久| 2021久久国产精品不只是精品| 日韩精品一级二级| 日韩午夜激情视频| 青娱乐精品在线视频| 国产午夜亚洲精品午夜鲁丝片| 久久国产精品99精品国产| 欧美一区二区三区不卡| 蜜臀精品久久久久久蜜臀| 日本韩国欧美一区二区三区| 亚洲图片你懂的| 91在线视频播放地址| 久久一区二区视频| 精品国产髙清在线看国产毛片| 国产精品系列在线观看| 国产精品自拍三区| 久久蜜桃av一区二区天堂| 国产在线精品免费av| 久久免费美女视频| 国产精品99久久不卡二区| 亚洲色图自拍偷拍美腿丝袜制服诱惑麻豆| 欧洲国内综合视频| 国内久久精品视频| 亚洲综合在线电影| 久久久国产精华| 欧美色图激情小说| 从欧美一区二区三区| 午夜精品福利久久久| 国产欧美视频在线观看| 精品视频一区三区九区| 国产成人免费av在线| 午夜精品久久久久久久久久| 久久久久97国产精华液好用吗| 色欧美88888久久久久久影院| 日本免费在线视频不卡一不卡二| 欧美极品少妇xxxxⅹ高跟鞋| av在线不卡观看免费观看| 色网综合在线观看| 一区二区三区在线视频免费观看 | 一区二区在线观看视频| 亚洲欧洲美洲综合色网| 7777女厕盗摄久久久| 成人福利视频网站| 久久99精品一区二区三区三区| 一区二区三区在线视频播放| 久久久久久久久久久99999| 欧美精品aⅴ在线视频| 91丨porny丨最新| 不卡一区在线观看| 国产精品主播直播| 韩国av一区二区三区在线观看| 亚洲成人动漫av| 亚洲成人久久影院| 一区二区三区日韩欧美精品| 国产精品国产三级国产a| 国产日产欧美一区| 久久蜜桃av一区精品变态类天堂| 91精品国产黑色紧身裤美女| 欧美天天综合网| 欧美性大战xxxxx久久久| 91福利在线看| 欧美性淫爽ww久久久久无| 色拍拍在线精品视频8848| 91视频一区二区三区| 色综合久久中文字幕综合网| 91麻豆高清视频| 一本色道久久综合狠狠躁的推荐 | 99精品欧美一区二区三区小说 | 蜜臀av亚洲一区中文字幕| 国产精品人成在线观看免费| 久久国产婷婷国产香蕉| 一区二区三区在线视频播放| 亚洲黄色录像片| 亚洲成va人在线观看| 日本不卡的三区四区五区| 激情综合网天天干| 粉嫩高潮美女一区二区三区| 白白色 亚洲乱淫| 91精品91久久久中77777| 精品视频999| 欧美一级理论片| 国产三区在线成人av| 国产精品国产三级国产| 亚洲一区二区三区不卡国产欧美| 三级久久三级久久| 国产在线播放一区三区四| 国产成人精品三级| 色综合久久88色综合天天免费| 精品视频免费在线| 一本色道久久综合亚洲91| 国产精品美女久久久久久久| 日韩精品一区二区三区四区 | 色婷婷久久99综合精品jk白丝| 欧美日韩免费在线视频| 日韩美女天天操| 中文字幕在线不卡国产视频| 亚洲国产日韩a在线播放| 久久爱另类一区二区小说| 99国产精品一区| 日韩三级精品电影久久久| 国产精品进线69影院| 丝袜诱惑制服诱惑色一区在线观看 | 久久免费看少妇高潮| 亚洲免费av在线| 久久成人免费日本黄色| 99re66热这里只有精品3直播| 欧美一区二区三区播放老司机| 中文字幕第一区| 极品销魂美女一区二区三区| 欧美性受xxxx| 国产精品毛片a∨一区二区三区| 蜜桃视频在线一区| 欧美影院精品一区|