테스트 웹사이트: www.om.cn
사진을 클릭하시면 해당 페이지로 이동합니다. 점프하기 전에 HTML에서 유용한 정보를 찾을 수 없습니다
요소에서 얻은 HTML을 검사합니다.
Baidu에서 검색한 후 일반 크롤러를 통해 Angular 데이터를 얻기가 어렵습니다. 그래서 시각화를 위해 Qt5.8의 QWebEngineView를 사용했습니다. 그런데 이 데이터는 어떻게 얻을 수 있나요? 방향과 아이디어를 찾고 있습니다!
闭关修行中......
정확하게 무엇이 필요한지는 모르겠지만, 패킷 캡처를 통해 원하는 데이터를 분석할 수 있는 것 같습니다. 그냥 ajax 요청일 뿐입니다. 예를 들어 자세한 제품 설명, 특정 제품 목록 카테고리 아래의 제품 목록 등이 있습니다. 어쨌든, 크롤러의 왕은 패킷 캡처 + JS 분석입니다. 이는 패킷 캡처만 포함하고 JS
정확하게 무엇이 필요한지는 모르겠지만, 패킷 캡처를 통해 원하는 데이터를 분석할 수 있는 것 같습니다. 그냥 ajax 요청일 뿐입니다. 예를 들어 자세한 제품 설명, 특정 제품 목록 카테고리 아래의 제품 목록 등이 있습니다. 어쨌든, 크롤러의 왕은 패킷 캡처 + JS 분석입니다. 이는 패킷 캡처만 포함하고 JS
를 분석할 수는 없습니다.