python抓取网页图片并放到指定文件夹
admin
2023-07-31 02:07:07
0

python抓取网站图片并放到指定文件夹

复制代码 代码如下:
# -*- coding=utf-8 -*-
import urllib2
import urllib
import socket
import os
import re
def Docment():
    print u\’把文件存在E:\\Python\\图(请输入数字或字母)\’
    h=raw_input()
    path=u\’E:\\Python\\图\’+str(h)
    if not os.path.exists(path):
        os.makedirs(path)
    return path
def getallurl(html):
    reg=r\”a href=\'(.*?\\.htm)\’\”
    allurl= re.compile(reg)
    allList = re.findall(allurl,html)
    return allList
def getHTML(url):
    url=url
    req_header = {\’User-Agent\’:\’Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US; rv:1.9.1.6) Gecko/20091201 Firefox/3.5.6\’}
    req_timeout = 20
    html=\’cuowu\’
    try:
        req = urllib2.Request(url,None,req_header)
        resp = urllib2.urlopen(req,None,req_timeout)
        html = resp.read()
    except urllib2.URLError as e:
        print e.message
    except socket.timeout as e:
        getHTML(url,fu)
    return html
def getImg(html,path):
    reg = r\’img class=IMG_show border=0 src=(.*?\\.jpg)\’
    imgre= re.compile(reg)
    imgList = re.findall(imgre, html)
    if imgList:
        print \’ghasghg\’,path
        for imgurl in imgList:
            print imgurl
            content2=urllib2.urlopen(imgurl).read()
            with open(path+\’/\’+imgurl[-7:],\’wb\’) as code:
                code.write(content2)
    else:
        return 0
def getallurl(html):
    reg=r\”a href=\'(.*?\\.htm)\’\”
    allurl= re.compile(reg)
    allList = re.findall(allurl,html)
    return allList
j=1
i=0
print u\’请输入网址:\’
ul=raw_input()
print u\’开始下载\’
print u\’第\’+str(j)+u\’页\’
html=getHTML(ul)
allList=getallurl(html)
path=Docment()
getImg(html,path)
while i    for lis in allList:
        l=lis[i]
        url=r\’http://www.umei.cc/p/gaoqing/rihan/\’+lis
        i=i+1
        j=j+1
        html=getHTML(url)
        getImg(html,path)
        print u\’第\’+str(j)+u\’页\’
    else:
        print u\’下载完毕\’

相关内容

热门资讯

Mobi、epub格式电子书如... 在wps里全局设置里有一个文件关联,打开,勾选电子书文件选项就可以了。
定时清理删除C:\Progra... C:\Program Files (x86)下面很多scoped_dir开头的文件夹 写个批处理 定...
500 行 Python 代码... 语法分析器描述了一个句子的语法结构,用来帮助其他的应用进行推理。自然语言引入了很多意外的歧义,以我们...
scoped_dir32_70... 一台虚拟机C盘总是莫名奇妙的空间用完,导致很多软件没法再运行。经过仔细检查发现是C:\Program...
小程序支付时提示:appid和... [Q]小程序支付时提示:appid和mch_id不匹配 [A]小程序和微信支付没有进行关联,访问“小...
65536是2的几次方 计算2... 65536是2的16次方:65536=2⁶ 65536是256的2次方:65536=256 6553...
pycparser 是一个用... `pycparser` 是一个用 Python 编写的 C 语言解析器。它可以用来解析 C 代码并构...
微信小程序使用slider实现... 众所周知哈,微信小程序里面的音频播放是没有进度条的,但最近有个项目呢,客户要求音频要有进度条控制,所...
Apache Doris 2.... 亲爱的社区小伙伴们,我们很高兴地向大家宣布,Apache Doris 2.0.0 版本已于...
python清除字符串里非数字... 本文实例讲述了python清除字符串里非数字字符的方法。分享给大家供大家参考。具体如下: impor...