猿人部落 › 主页 › 资讯 › 查看内容

urllib模块以及进阶版requests 模块实战之爬取妹子图、有道翻译以及百度贴吧

2017-12-30 15:29 发布者: admin 评论 20 查看 971

小甲鱼大大没有关于 requests 模块的视频，我只有自己渐渐探索。在论坛里看到最多的就是爬取妹子图，百度贴吧和有道翻译。不外大多数都是利用 urllib 模块。以是我想将自己在论坛里学到的知识分享出来，在这里利用 r

小甲鱼大大没有关于 requests 模块的视频，我只有自己渐渐探索。在论坛里看到最多的就是爬取妹子图，百度贴吧和有道翻译。

不外大多数都是利用 urllib 模块。以是我想将自己在论坛里学到的知识分享出来，在这里利用 requests 模块爬取三种常见的网站，

接待各位来此交换，也请各位先辈斧正。(于2018.01.26增长 urllib 模块)

假如学完视频的小同伴想继续学习 requests 模块，可以点此进入

Requests模块资助文档（小甲鱼版）

http://bbs.fishc.com/thread-95893-1-1.html(出处: 鱼C论坛)

内里有小甲鱼老师的具体解说。

一. 爬取妹子图。

网址：http://www.meizitu.com/

# requests 模块

TIM截图20171230152716.png

登录/注册后可看大图

# urllib模块

有前两个案例，各人可以自己实验把下面的例子用urllib模块改写，测试一下自己学得怎么样以及加强认知。

三.爬取百度贴吧图片
https://tieba.baidu.com/p/5085123197

TIM截图20171230152727.png

登录/注册后可看大图

末了附上历程教学:
1."requests+BeautifulSoup4+Excel":http://bbs.fishc.com/thread-102458-1-1.html
2."名流交换,妹子图网页套图爬取":http://bbs.fishc.com/thread-102299-1-1.html
3."小甲鱼老师的爬取豆瓣影戏TOP250":http://bbs.fishc.com/thread-94979-1-1.html
4."我的多线程与多历程爬取豆瓣TOP250":http://bbs.fishc.com/thread-103198-1-1.html
5."什么？python还可以爬视频？！"：http://bbs.fishc.com/thread-103503-1-1.html