python爬虫怎么实现下载豆瓣妹子图片

这篇文章主要讲解了“python爬虫怎么实现下载豆瓣妹子图片”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“python爬虫怎么实现下载豆瓣妹子图片”吧!

让客户满意是我们工作的目标,不断超越客户的期望值来自于我们对这个行业的热爱。我们立志把好的技术通过有效、简单的方式提供给客户,将通过不懈努力成为客户在信息化领域值得信任、有价值的长期合作伙伴,公司提供的服务项目有:域名注册虚拟主机、营销软件、网站建设、梁山网站维护、网站推广。

代码如下:

import requestsimport reimport timefrom bs4 import BeautifulSoup
cat ='2'img = 'http://www.dbmeinv.com/dbgroup/show.htm?cid='+ catend = '/dbgroup/show.htm?cid='+ cat + '&pager_offset=100'urls = [ ]def getURLs(mainURL):    time.sleep(1)    headers = {'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_2) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.80 Safari/537.36'}    html = requests.get(mainURL).text    soup = BeautifulSoup(html, 'html.parser')    picURL = re.findall('<img class.*?src="(.+?\.jpg)"', html, re.S)    for url in picURL:        urls.append(url)        print(url)    asoup = soup.select('.next a')[0]['href']    Next_page = 'http://www.dbmeinv.com' + asoup    if asoup != end:        getURLs(Next_page)    else:        print('链接已处理完毕!')    return urlsurl = getURLs(img)
i = 0for each in url:    pic = requests.get(each, timeout = 10)    picName = 'pictures/' + str(i) + '.jpg'    fp = open(picName, 'wb')    fp.write(pic.content)    fp.close()    i += 1
print('图片下载完成')

感谢各位的阅读,以上就是“python爬虫怎么实现下载豆瓣妹子图片”的内容了,经过本文的学习后,相信大家对python爬虫怎么实现下载豆瓣妹子图片这一问题有了更深刻的体会,具体使用情况还需要大家实践验证。这里是创新互联,小编将为大家推送更多相关知识点的文章,欢迎关注!

当前名称:python爬虫怎么实现下载豆瓣妹子图片
网页网址:https://www.cdcxhl.com/article32/gpsssc.html

成都网站建设公司_创新互联,为您提供建站公司域名注册面包屑导航全网营销推广网站设计公司软件开发

广告

声明:本网站发布的内容(图片、视频和文字)以用户投稿、用户转载内容为主,如果涉及侵权请尽快告知,我们将会在第一时间删除。文章观点不代表本网站立场,如需处理请联系客服。电话:028-86922220;邮箱:631063699@qq.com。内容未经允许不得转载,或转载时需注明来源: 创新互联

营销型网站建设