Skip to content

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

2 Commits
 
 
 
 
 
 
 
 

Repository files navigation

爬虫小练习,请主要参考test1_requests.py文件,
功能:按页爬取www.mzitu.com图片,修改geturl参数即可,运行时记得在运行的目录下创一个pic文件夹用于存放图片

两部分:1.正则匹配构造图片url
		2.构造http请求的header,主要是referer,该网站的反爬虫机制是检测请求的referer是否为mzitu.com相关联的,
		如果不是将会跳转到一张反爬虫图片,所以将referer内容构造为每张图片的url即可

About

No description, website, or topics provided.

Resources

Stars

0 stars

Watchers

0 watching

Forks

Releases

Packages

Contributors

Languages