python - 크롤러가 로그인을 시뮬레이션한 후 csdn 배경 기사 목록을 크롤링할 때 문제가 발생했습니다.

Question

개인정보를 크롤링해서 캡쳐할 수 있어서 크롤러가 실제로 로그인이 되었는데, 아래 사진의 URL은 캡쳐가 되지 않습니다. URL은 http://write.blog.csdn.net/postlist 입니다. csdn 백스테이지. py2.7의 {code...} 코드를 게시하겠습니다.

高洛峰 · Answer

이 주소는 302 점프를 반환하므로 반환된 헤더의 위치를 기반으로 요청을 계속한 다음 반환된 콘텐츠를 분석하여 처리를 계속해야 합니다. 브라우저는 이러한 302 점프를 수행하고 반환된 js 및 기타 항목을 실행하는 데 도움이 됩니다. 콘텐츠를 직접 캡처하고 수동으로 처리해야 합니다.

迷茫 · Answer

쿠키만 사용하세요