這篇文章主要介紹了python requests抓取one推送文字和圖片代碼實(shí)例,文中通過示例代碼介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價(jià)值,需要的朋友可以參考下
requests是Python中一個(gè)第三方庫,基于 urllib,采用 Apache2 Licensed 開源協(xié)議的 HTTP 庫。它比 urllib 更加方便,可以節(jié)約我們大量的工作,完全滿足 HTTP 測(cè)試需求。接下來將記錄一下requests的使用:
from bs4 import BeautifulSoupfrom lxml import htmlimport xmlimport requests#下載圖片函數(shù)def download_img(url,name): """" 下載指定url的圖片 url:圖片的url; name:保存圖片的名字 """ try: respone = requests.get(url) f_img = respone.content path = r'C:/Users/86131/Desktop/itchat/send_file/images//%s.jpg'%(name) with open(path, "wb")as f: f.write(f_img) except Exception as e: print("---------地址出錯(cuò)------------")url_list = []f = requests.get("http://wufazhuce.com/")# #打印網(wǎng)頁內(nèi)容# print(f.content.decode())soup = BeautifulSoup(f.content,"lxml")try: first_div = soup.find("div",attrs={'id':'main-container'}).find('div',attrs={'class':'carousel-inner'}) a_all = first_div.find_all('a') for i in a_all: url_list.append(i.attrs['href'])except Exception as e: print("---------出錯(cuò)------------")#得到one的首頁推薦頁面f_1 = requests.get(url_list[0])#打印網(wǎng)頁內(nèi)容# print(f_1.content.decode())soup_1 = BeautifulSoup(f_1.content,"lxml")try: second_div = soup_1.find("div",attrs={'id':'main-container'}).find('div',attrs={'class':'one-cita-wrapper'}) third_div = soup_1.find("div",attrs={'id':'main-container'}).find('div',attrs={'class':'one-imagen'}) #獲得時(shí)期值 now_month = second_div.find('p',attrs={'class':'may'}).text now_one_day = second_div.find('p',attrs={'class':'dom'}).text #獲得圖片的url img_url = third_div.find('img').attrs['src'] #獲得一段話并去除開頭的空格 one_text = second_div.find("div",attrs={'class':'one-cita'}).text.strip() #將獲得日期拼接 now_day = now_one_day +' '+ now_month #調(diào)用函數(shù)下載圖片 download_img(img_url, now_day)except Exception as e: print("---------出錯(cuò)------------")
以上就是本文的全部內(nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持武林網(wǎng)之家。
新聞熱點(diǎn)
疑難解答
圖片精選