广告
返回顶部
首页 > 资讯 > 后端开发 > Python >python爬虫爬网站的视频和图片
  • 924
分享到

python爬虫爬网站的视频和图片

爬虫图片网站 2023-01-31 06:01:22 924人浏览 安东尼

Python 官方文档:入门教程 => 点击学习

摘要

环境:Centos6.5 python2.6.6   Http://www.budejie.com/( 纯属测试,并无恶意 )网站分析:我们点视频按钮 可以看到url是:http://www.budejie.com/video/接着我们点开

环境:

Centos6.5 python2.6.6   Http://www.budejie.com/( 纯属测试,并无恶意 )


网站分析:

我们点视频按钮 可以看到url是:http://www.budejie.com/video/

wKiom1evUXWjE4yWAABqfvgBs7M559.png-wh_50

接着我们点开网页源码,看下面之处

wKiom1evUj3CY1JKAABduqyrjZE350.png-wh_50

接着我们把那个下面画红线的链接点开,可以看到是个视频。

wKioL1evUtHhpX9bAAPG3_tT8rs590.png-wh_50

下面我进行相似的操作点图片按钮,可以看到链接:http://www.budejie.com/pic/

wKiom1evUyzxND7EAACiFhG1R8Y036.png-wh_50

接着我们点开网页源码。

wKioL1evU8LxSY-OAACOF-1q7bU861.png-wh_50

相同操作,我们点开链接:http://mpic.spriteapp.cn/uGC/2016/07/07/577d9f0cdd67d_1.jpg

wKioL1evVDahar7kAAEdFwy0zok967.png-wh_50

基本上就是这么个套路,也就用了Python的两个模块 一个urllib 一个re正则

效果图:

这个是我爬下来的图片

wKioL1evT8vRgjFVAAOr_Zf6IYc323.png-wh_50

这个是我爬下来的视频 

wKiom1evT8yQt0SvAADw6RYU63Q515.png-wh_50

这个是我把linux上的视频拖一下到windows上给大家看效果。

wKiom1evT9SRVe1MAAmuk7fsmXs256.png-wh_50


下面直接上代码!!!

爬视频的代码

#!/usr/bin/env python
# -*- coding:utf-8 -*-
import urllib,re
def geturl():
	html = urllib.urlopen("http://www.budejie.com/video/").read()
	reg = r'data-mp4="(.*?)"'
	return re.findall(reg,html)
for page in range(1,100):
	for i in geturl():
		print i   #i是视频的链接地址
		video = urllib.urlopen(i).read()
		fwc = open('./video/%s' %i.split('/')[-1],'wb')
		fwc.write(video)
		fwc.close()				

爬图片的代码

# -*- coding:utf-8 -*-
import urllib,re
def geturl():
	html = urllib.urlopen("http://www.budejie.com/pic/").read()
	reg = r'data-original="(.*?)"'  
	return re.findall(reg,html)
for page in range(1,100):
	for i in geturl():
		print i   #i是图片的链接地址
		video = urllib.urlopen(i).read()
		fwc = open('./picture/%s' %i.split('/')[-1],'wb')
		fwc.write(video)
    		fwc.close()	

--结束END--

本文标题: python爬虫爬网站的视频和图片

本文链接: https://www.lsjlt.com/news/190145.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • python爬虫爬网站的视频和图片
    环境:centos6.5 python2.6.6   http://www.budejie.com/( 纯属测试,并无恶意 )网站分析:我们点视频按钮 可以看到url是:http://www.budejie.com/video/接着我们点开...
    99+
    2023-01-31
    爬虫 图片 网站
  • python爬虫:爬取网站视频
    python爬取百思不得姐网站视频:http://www.budejie.com/video/新建一个py文件,代码如下:#!/usr/bin/python # -*- coding: UTF-8 -*- import urllib,re...
    99+
    2023-01-31
    爬虫 视频 网站
  • Python爬虫爬取网站图片
    此次python3主要用requests,解析图片网址主要用beautiful soup,可以基本完成爬取图片功能, 爬虫这个当然大多数人入门都是爬美女图片,我当然也不落俗套,首先也...
    99+
    2022-11-12
  • 如何使用Python爬虫爬取网站图片
    这篇文章主要介绍了如何使用Python爬虫爬取网站图片,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。此次python3主要用requests,解析图片网址主要用beautif...
    99+
    2023-06-22
  • python爬取视频网站m3u8视频,下
    最近发现一些网站,可以解析各大视频网站的vip。仔细想了想,这也算是爬虫呀,爬的是视频数据。  首先选取一个视频网站,我选的是 影视大全 ,然后选择上映不久的电影 “一出好戏” 。 分析页面 我用的是chrome浏览器,F12进入查看。选...
    99+
    2023-01-30
    视频 网站 python
  • python3爬虫(4)各种网站视频下载
    理论上来讲只要是网上(浏览器)能看到图片,音频,视频,都能够下载下来,然而实际操作的时候也是有一定难度和技术的,这篇文章主要讲述各个网站视频资源如何下载。   B站视频 页面链接: https://www.bilibili.com/ban...
    99+
    2023-01-31
    爬虫 视频下载 网站
  • python爬虫入门实战之爬取网页图片
    本篇文章给大家带来了关于Python的相关知识,其中主要整理了爬取网页图片的相关问题,要想高效的获取数据,爬虫是非常好用的,而用python做爬虫也十分简单方便,下面通过一个简单的小爬虫程序来看一看写爬虫的基本过程,下面一起来看一下,希望对...
    99+
    2022-07-11
    python
  • 使用Python爬虫怎么避免频繁爬取网站
    这期内容当中小编将会给大家带来有关使用Python爬虫怎么避免频繁爬取网站,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。python的数据类型有哪些python的数据类型:1. 数字类型,包括int(整型...
    99+
    2023-06-15
  • 如何用Python网络爬虫抓取百度贴吧评论区图片和视频
    如何用Python网络爬虫抓取百度贴吧评论区图片和视频,针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。百度贴吧是全球最大的中文交流平台,你是否跟我一样,有时候看到评论区的图片...
    99+
    2023-06-01
  • Python爬虫:如何快速掌握Python爬虫核心技术,批量爬取网络图片
    对于爬虫,很多伙伴首选的可能就是Python了吧,我们在学习Python爬虫的时候得有侧重点,这篇文章教大家如何快速掌握Python爬虫的核心!有不清楚的地方,可以留言!1. 概述本文主要实现一个简单的爬虫,目的是从一个百度贴吧页面下载图片...
    99+
    2023-06-02
  • python爬取网站美女图片
    今天周五,项目刚刚上线完,有些时间,闲着无聊,继续复习爬虫,这次打算爬取网站的美女图片。得先找到目标,然后目标网站还不会反爬虫,因为自己只是小白,好了开始。寻找目标,发现了目标,哈哈 http://www.meizitu.com 里面图片按...
    99+
    2023-01-31
    美女 图片 网站
  • 用python爬取某个图片网站的图片
    爬取单张图片 # 爬取单张图片import requests # 导入requests库url = "https://file.lsjlt.com/upload/f/202309/12/54vwhbwy2re.jpg" # 图片地址re...
    99+
    2023-09-12
    python 爬虫
  • python制作花瓣网美女图片爬虫
    花瓣图片的加载使用了延迟加载的技术,源代码只能下载20多张图片,修改后基本能下载所有的了,只是速度有点慢,后面再优化下 import urllib, urllib2, re, sys, os,reque...
    99+
    2022-06-04
    爬虫 花瓣 美女
  • Python爬虫爬取美剧网站的实现代码
    一直有爱看美剧的习惯,一方面锻炼一下英语听力,一方面打发一下时间。之前是能在视频网站上面在线看的,可是自从广电总局的限制令之后,进口的美剧英剧等貌似就不在像以前一样同步更新了。但是,作为一个宅diao的我又...
    99+
    2022-06-04
    爬虫 美剧 代码
  • 爬虫:输入网页之后爬取当前页面的图片和背
    环境:py3.6 核心库:selenium(考虑到通用性,js加载的网页)、pyinstaller 颜色显示:colors.py colors.py  用于在命令行输出文字时,带有颜色,可有可无。 # -*- coding:utf-8 ...
    99+
    2023-01-30
    爬虫 页面 网页
  • Python爬虫之爬取最新更新的小说网站
    目录一、引言二、关于相关访问请求及应答报文2.1、百度搜索请求2.2、百度返回搜索结果2.3、小说网站关于最新更新的展现及html报文格式三、实现思路及代码3.1、根据url获取网站...
    99+
    2022-11-12
  • 使用Python进行网站数据爬取和视频处理
    导语 在互联网时代,我们经常需要从网站上获取数据并进行分析或处理。有时候,我们还需要对视频数据进行一些操作,比如剪辑、转码、合成等。Python是一门非常适合做数据分析和视频处理的编程语言,它有很多...
    99+
    2023-09-04
    python 网络爬虫 requests 爬虫代理 视频处理 moviepy 数据爬取
  • Python轻松爬取写真网站全部图片
    以下是一个使用Python爬取写真网站全部图片的示例代码:```pythonimport requestsfrom bs4 impo...
    99+
    2023-09-15
    Python
  • python 开心网和豆瓣日记爬取的小爬虫
    目录项目地址:开心网日记爬取使用代码豆瓣日记爬取使用代码Roadmap项目地址: https://github.com/aturret/python-crawler-exercise 用到了BeautifulSoup...
    99+
    2022-06-02
    python 爬虫 python 开心网爬虫 python 豆瓣日记爬虫
  • 使用Python怎么爬取网站图片并保存
    这期内容当中小编将会给大家带来有关使用Python怎么爬取网站图片并保存,文章内容丰富且以专业的角度为大家分析和叙述,阅读完这篇文章希望大家可以有所收获。第一步,导入模块import requestsfrom bs4&n...
    99+
    2023-06-06
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作