84669 人学习
152542 人学习
20005 人学习
5487 人学习
7821 人学习
359900 人学习
3350 人学习
180660 人学习
48569 人学习
18603 人学习
40936 人学习
1549 人学习
1183 人学习
32909 人学习
1 比如有博客列表页 a ,获取文章列表2 博客内容详情页 b , 获取文章正文3 如何依次获取到文章 + 内容 到数据库 ?4 当前问题主要是不知道如何组合2个不同页面的数据
可以用request.meta来存储额外的信息, 比如
def parse_x1(self, response): extra = {} ... req = scrapy.Request(url2) req.callback = self.parse_x2 ... req.meta['extra'] = extra yield req def parse_x2(self, response): item = {} extra = response.meta['extra'] item.update(extra) ... yield item
可以用request.meta来存储额外的信息, 比如