python爬取网页图片教程之python爬虫获取图片保存图片

上节课我们讲述了怎么用python爬取网页图片,今天我们以一个实例网页(https://www.qiushibaike.com/article/124699692)来爬取页面中的所有图片。


1.获取图片的URL


首先我们要想获取图片的URL,就需要将该网页中的图片URL提取你,那么我们首先获取该网页的整个数据


python爬取网页图片教程之python爬虫获取图片保存图片


然后我们通过re解析该网页获取到图片的URL(如果忘记re解析的可以看往期课程https://www.toutiao.com/i6999893679284503071/),我们就获取到了图片的URL


python爬取网页图片教程之python爬虫获取图片保存图片


但是我们获取的图片链接是个列表,并且并不完整,就需要for循环,获取单个网址,通过字符串的拼接获取到完整的URL


python爬取网页图片教程之python爬虫获取图片保存图片


2.发起请求


我们获得图片的URL,就可以对该图片发起get请求了,并通过content得到二进制的相应数据


python爬取网页图片教程之python爬虫获取图片保存图片


3.保存数据


此时有个注意的点就是由于我们是保存多个图片,因此图片的命名我们以图片中的链接部分字段为命名,如下图


python爬取网页图片教程之python爬虫获取图片保存图片


然后按照正常的保存格式即可:


python爬取网页图片教程之python爬虫获取图片保存图片


好了,这就是今天的内容,如果大家想要更多关于Python的信息,可关注公众号:Python教程初学讲解,获取学习资料!

展开阅读全文

页面更新:2024-04-02

标签:网页   爬虫   图片   字段   字符串   片中   图片链接   实例   公众   完整   课程   页面   格式   链接   网址   教程   数据   科技

1 2 3 4 5

上滑加载更多 ↓
推荐阅读:
友情链接:
更多:

本站资料均由网友自行发布提供,仅用于学习交流。如有版权问题,请与我联系,QQ:4156828  

© CopyRight 2020-2024 All Rights Reserved. Powered By 71396.com 闽ICP备11008920号-4
闽公网安备35020302034903号

Top