使用 selenium 下载小视频

最新推荐文章于 2025-04-27 20:57:45 发布

进击的Spider

最新推荐文章于 2025-04-27 20:57:45 发布

阅读量2.6k

点赞数

分类专栏： Python 爬虫

本文链接：https://blog.youkuaiyun.com/weixin_42552374/article/details/84443735

版权

Python 同时被 2 个专栏收录

42 篇文章

订阅专栏

爬虫

23 篇文章

订阅专栏

本文介绍了一种使用Selenium和Python爬取西瓜视频的方法，通过抓取视频列表并下载视频内容，适合对网页爬虫和视频下载感兴趣的读者。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

#!/usr/bin/env python
# -*- coding:utf-8 -*-

from selenium import webdriver
import urllib
import urllib.request
import time
# 普通爬虫，使用Charles抓包获取网址url，但是西瓜视频url只能使用一次
# url加密，只能使用selenium获取数据，浏览器
url = 'https://www.ixigua.com/'

driver = webdriver.Chrome()


driver.get(url=url)
time.sleep(2)

video_lists = driver.find_elements_by_xpath('//div[@class="feed-infinite-wrapper"]/ul/li')

print(len(video_lists))

hrefs = []
for video_info in video_lists:
    hrefs.append(video_info.find_element_by_xpath('.//a').get_attribute('href'))


def download_video(title, video_url):

    urllib.request.urlretrieve(video_url,'./videos/%s.mp4'%(title))
    print('视频：%s下载成功'%(title))

for href in hrefs:

    driver.get(href)
    time.sleep(2)

    video_url = driver.find_element_by_class_name('vjs-tech').get_attribute('src')

    title = driver.find_element_by_xpath('//h2[@class="title"]').text
    download_video(title,video_url)
input('输入任意字符，点击回车退出程序')

driver.quit()