pyspider +mongodb 다중 크롤러 결과 컬렉션 이름을 지정하는 방법
过去多啦不再A梦
过去多啦不再A梦 2017-04-28 09:05:44
0
1
969

앞서 언급한 대로 이제 여러 웹사이트의 콘텐츠를 크롤링해야 하지만 결과 구조는 동일합니다. 현재 구성 resultdb는 db이며, 각 크롤러의 결과는 서로 다른 컬렉션입니다. 그리고 이 결과를 지정된 db 아래의 지정된 컬렉션에 저장하고 싶습니다. 설정 방법. 질문에 답하도록 도와주세요.

过去多啦不再A梦
过去多啦不再A梦

모든 응답(1)
刘奇

내장된 resultdb는 미리보기 결과를 표시하는 데에만 사용됩니다. 구조를 변경하면 이 기능이 유효하지 않게 됩니다. 따라서 결과를 얻은 후에는 자체 데이터베이스를 구축하고 이를 저장하는 방법을 처리해야 합니다.

http://docs.pyspider.org/en/latest/Working-with-Results/

최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿