欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  IT编程

如何用Python爬虫获取千万美女图?手把手教你

程序员文章站 2022-05-18 20:48:59
我想问大家一个问题,大家学习Python爬虫的动力是什么啊?下面是我们有些朋友的回答: 1 .Python爬虫学好了,我可以找一个高薪的工作。 2 .我学习编程希望能够为社会做贡献(手动滑稽) 3 .为了菇凉!(很直白的回答!) .总结了一些同学的回答,结论大多是爬取一切自己想看想了解的事情和姑凉! ......

我想问大家一个问题,大家学习python爬虫的动力是什么啊?

下面是我们有些朋友的回答:

1 .python爬虫学好了,我可以找一个高薪的工作。

2 .我学习编程希望能够为社会做贡献(手动滑稽)

3 .为了菇凉!(很直白的回答!)

.总结了一些同学的回答,结论大多是爬取一切自己想看想了解的事情和姑凉!果然还是姑凉让我们这些码农有动力啊!

今天咱们就是爬取今日头条,你要问我为什么要爬取今日头条?是因为爱嘛?

是因为责任嘛?

不,是因为头条里面的有很多美女图片,然后我们可以把她们都爬取下来!!!

是不是想想都觉得很兴奋,是不是都要流鼻血了?!

如何用Python爬虫获取千万美女图?手把手教你

下面我们要做的就是用python爬虫把上面的图片给爬下来。

如何用Python爬虫获取千万美女图?手把手教你

开始分析网站

按下f 12,然后点击network,刷新下你可以看到这些

如何用Python爬虫获取千万美女图?手把手教你

在网页上可以看到图片会随着你下拉网页而进行显示更多的图片。

今日头条的网站是动态加载的,其实可以很轻松的就可以在xhr的文件里面找到。

如何用Python爬虫获取千万美女图?手把手教你

不断地发送请求,点击这个请求看看是返回什么数据

如何用Python爬虫获取千万美女图?手把手教你

如何用Python爬虫获取千万美女图?手把手教你

可以看到这是个json,里面有图片的url,这个就是我们要找的东西。

我们可以用json库来解析,还有这个网站是get请求,这样就可以用requests库来发送然后解析下就可以了,非常简单。

如何用Python爬虫获取千万美女图?手把手教你

最后给你们看下结果

如何用Python爬虫获取千万美女图?手把手教你

以上姑娘都是各位爷们想要的,哈哈,如果还有什么不懂的问题,欢迎去橙子的python学习裙 :一久五其二二流一思(数字的谐音)转换下可以找到了,里面有各种python实战教程,最后希望大家在python这条路越走越远,点这个赞再走吧!谢谢