2011年6月英语四级答案,中华之声通讯社,河南戏曲大全
#coding=utf-8
import os
import sys
import re
import urllib
url_reg = re.compile(r'(http://[^///]+)', re.i)
img_reg = re.compile(r'<img[^>]*?src=([/'"])([^/1]*?)/1', re.i)
def download(dir, url):
'''下载网页中的图片
@dir 保存到本地的路径
@url 网页url
'''
global url_reg, img_reg
m = url_reg.match(url)
if not m:
print '[error]invalid url: ', url
return
host = m.group(1)
if not os.path.isdir(dir):
os.mkdir(dir)
# 获取html,提取图片url
html = urllib.urlopen(url).read()
imgs = [item[1].lower() for item in img_reg.findall(html)]
f = lambda path: path if path.startswith('http://') else /
host + path if path.startswith('/') else url + '/' + path
imgs = list(set(map(f, imgs)))
print '[info]find %d images.' % len(imgs)
# 下载图片
for idx, img in enumerate(imgs):
name = img.split('/')[-1]
path = os.path.join(dir, name)
try:
print '[info]download(%d): %s'% (idx + 1, img)
urllib.urlretrieve(img, path)
except:
print "[error]cant't download(%d): %s" % (idx + 1, img)
def main():
if len(sys.argv) != 3:
print 'invalid argument count.'
return
dir, url = sys.argv[1:]
download(dir, url)
if __name__ == '__main__':
# download('d://imgs', 'http://www.163.com')
main()
如对本文有疑问,请在下面进行留言讨论,广大热心网友会与你互动!!
点击进行留言回复
相关文章:
-
-
python如何查看网页代码
用python查看网页代码的方法:1、使用“import”导入requests包import requests2、使用requests包的get()函数通过网页...
[阅读全文]
-
-
python如何保存文本文件
python保存文本文件的方法:使用python内置的open()类可以打开文本文件,向文件里面写入数据可以用write()函数,写完之后,使用close()函...
[阅读全文]
-
python如何编写win程序
python可以编写win程序。win程序的格式是exe,下面我们就来看一下使用python编写exe程序的方法。编写好python程序后py2exe模块即可将...
[阅读全文]
-
-
-
-
-
-
网友评论