html - 正则表达式 python爬虫
怪我咯
怪我咯 2017-06-22 11:51:19
0
2
660

import urllib.request

req = urllib.request.urlopen('http://search.jd.com/Search?k...')

req
Out[3]: <http.client.HTTPResponse at 0x52bf6d8>

buf = req.read()

buf = buf.decode('utf-8')

urllist = re.findall(r'//img.+.png',buf)
这样正常显示.png结尾的图片网址
urllist = re.findall(r'//img.+.jpg',buf)
也基本正常
urllist = re.findall(r'//img.+.(png|jpg)',buf)
这样只能显示一串图片的格式,像这样:
'.jpg',
'.jpg',
'.png',
'.jpg',
'.jpg',
'.jpg',
'.jpg',
'.jpg',
'.jpg',
这是为什么呢?

怪我咯
怪我咯

走同样的路,发现不同的人生

全部回复(2)
阿神

主要是因为, 当你没加()时, re.findall会将匹配的全部打印出来, 但是如果你加了(), 它就会打印匹配中, 被()捕获的结果, 所以你看到一堆的jpg/png, 正因为这样, 所以我们需要用()将这个匹配的链接都捕获起来, 这样才能打印, 同时要用(?:jpg|png), 因为这个地方需要的是匹配jpg或者png, 所以我们需要用非捕获的分组语法.

# 代码修改
urllist = re.findall(r'(//img.+?.(?:png|jpg))',buf)

关于更多关于捕获分组/非捕获分组, 可以参考: 链接描述

代言

[png|jpg]

(png|jpg)的话就做了分组了

import re
import requests

r = requests.get('http://search.jd.com/Search?keyword=%E6%96%87%E8%83%B8&enc=utf-8&wq=%E6%96%87%E8%83%B8&pvid=4anf50si.fbrh68')
print re.findall('//img.+.[png|jpg]', r.text)
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板
关于我们 免责声明 Sitemap
PHP中文网:公益在线PHP培训,帮助PHP学习者快速成长!