五月天青色头像情侣网名,国产亚洲av片在线观看18女人,黑人巨茎大战俄罗斯美女,扒下她的小内裤打屁股

歡迎光臨散文網 會員登陸 & 注冊

使用selenium實現(xiàn)web自動化抓取-以qq空間說說內容

2023-02-08 23:14 作者:蕪湖小量化  | 我要投稿

# 分析網頁源代碼?

可知.txt-box.txt-big-size存放說說內容?.comments-content存放好友評論

# 使用的庫

from selenium import webdriver
import time
from selenium.webdriver.common.by import By

# 調用webdrive

options = webdriver.EdgeOptions()
# options.add_argument('headless') ?# options.add_argument('--headless')? ?# 取消可視化

browser = webdriver.Edge('msedgedriver', options=options)
browser.maximize_window()

# 自動化登錄qq空間

def get_response(qq_num):
? ?try:
? ? ? ?browser.get('https://user.qzone.qq.com/{}'.format(qq_num))
? ? ? ?browser.switch_to.frame('login_frame')
? ? ? ?browser.find_element(By.ID, value='switcher_plogin').click()
? ? ? ?browser.find_element(By.ID, value='u').clear()
? ? ? ?browser.find_element(By.ID, value='u').send_keys('qq')
? ? ? ?browser.find_element(By.ID, value='p').clear()
? ? ? ?browser.find_element(By.ID, value='p').send_keys(’password')
? ? ? ?browser.find_element(By.ID, value='login_button').click()
? ? ? ?time.sleep(5)

????????#?使用css選擇器查找評論

????????contents = browser.find_elements(By.CSS_SELECTOR, value='.txt-box.txt-big-size')
????????comments = browser.find_elements(By.CSS_SELECTOR, value='.comments-content')
????????for content in contents:
? ?????????????print(content.text)
????????for comment in comments:
? ?????????print(comment.text)
????????time.sleep(2)

????except Exception as e:
? ?????print(e)

# 運行程序

if __name__ == '__main__':
? ?get_response('qq')

抓取說說和評論

評論詳情

# 同理分析url和源代碼? 也可以抓取好友空間信息 也可以保存二進制格式文件 如圖片等。

使用selenium實現(xiàn)web自動化抓取-以qq空間說說內容的評論 (共 條)

分享到微博請遵守國家法律
绥化市| 枣庄市| 甘泉县| 柘荣县| 大新县| 松桃| 海淀区| 乌兰察布市| 南陵县| 隆昌县| 修文县| 张北县| 吴旗县| 克东县| 关岭| 宜州市| 潍坊市| 尚志市| 玉屏| 庆元县| 赞皇县| 谢通门县| 恩平市| 获嘉县| 利津县| 开阳县| 清水县| 姚安县| 南和县| 三穗县| 永康市| 甘南县| 新安县| 恭城| 抚州市| 巴彦淖尔市| 东阳市| 铜陵市| 汤阴县| 大余县| 库车县|