一个简单的python爬虫爬取糗百图片

使用requests模块，不过注意一点的是get的时候没加header，而糗百是不检测的，如果百度图片的话使用这种方法会被认为是机器而get失败。

#! /usr/bin/python
import os
import requests
import re

def get_img_url(page_content):
        s = r'src="(.+?.jpg)"'
        return re.findall(s,page_content)

xiubai_url = r'http://www.qiushibaike.com/imgrank/'

pic_list = get_img_url(requests.get(xiubai_url).content)

#print pic_list

i = 0

for pic_url in pic_list:
        fd = open(str(i) + '.jpg','w+')
        print fd
        pic = requests.get('http:' + pic_url)
        if pic.status_code is not 200:
                fd.close()
                continue
        else:
                fd.write(pic.content)
                i += 1
                fd.close()

总共爬取了25张图片。

版权声明：本文来源CSDN，感谢博主原创文章，遵循 CC 4.0 by-sa 版权协议，转载请附上原文出处链接和本声明。
原文链接：https://blog.csdn.net/github_37157365/article/details/78852143
站方申明：本站部分内容来自社区用户分享，若涉及侵权，请联系站方删除。

发表于 2020-03-01 22:41:23
阅读 ( 980 )
分类：

一个简单的python爬虫爬取糗百图片

你可能感兴趣的文章

精选的优质文章

0 条评论

官方社群

GO教程

推荐文章

猜你喜欢

随便看看