pyspider +mongodb 多个爬虫 result 如何指定 collection 名称
过去多啦不再A梦
过去多啦不再A梦 2017-04-28 09:05:44
0
1
838

如题,我现在需要爬取多个网站的内容,但是结果结构是一样的。现在的配置resultdb 是一个db,每个爬虫的结果分别是不同的集合。而我想把这些结果保存到指定db下的指定集合,这个如何设置。请大侠帮我解答下。

过去多啦不再A梦
过去多啦不再A梦

répondre à tous(1)
刘奇

自带的 resultdb 只是用来展示 preview 结果的,如果你更改了结构,这个功能就无效了。所以你需要拿到结果后,自己建库自己处理怎么存储。

http://docs.pyspider.org/en/latest/Working-with-Results/

Derniers téléchargements
Plus>
effets Web
Code source du site Web
Matériel du site Web
Modèle frontal
À propos de nous Clause de non-responsabilité Sitemap
Site Web PHP chinois:Formation PHP en ligne sur le bien-être public,Aidez les apprenants PHP à grandir rapidement!