pyspider +mongodb 多个爬虫 result 如何指定 collection 名称
过去多啦不再A梦
过去多啦不再A梦 2017-04-28 09:05:44
0
1
968

如题,我现在需要爬取多个网站的内容,但是结果结构是一样的。现在的配置resultdb 是一个db,每个爬虫的结果分别是不同的集合。而我想把这些结果保存到指定db下的指定集合,这个如何设置。请大侠帮我解答下。

过去多啦不再A梦
过去多啦不再A梦

Antworte allen(1)
刘奇

自带的 resultdb 只是用来展示 preview 结果的,如果你更改了结构,这个功能就无效了。所以你需要拿到结果后,自己建库自己处理怎么存储。

http://docs.pyspider.org/en/latest/Working-with-Results/

Neueste Downloads
Mehr>
Web-Effekte
Quellcode der Website
Website-Materialien
Frontend-Vorlage