지역 사회 배우다 도구 라이브러리 여가
찾다
한국어
집 > 백엔드 개발 > PHP 튜토리얼 > Sohu Video에 있는 모든 사용자의 앨범 이름을 캡처하세요

Sohu Video에 있는 모든 사용자의 앨범 이름을 캡처하세요

WBOY
풀어 주다： 2016-07-25 08:47:03
원래의
1074명이 탐색했습니다.
抓取搜狐视频中所有用户的专辑名。如果记录全部获取过来以后，可以方便的检索出相关关键词的视频专辑。但是由于用户数目太多，一个线程跑的话不知道要跑多少年。可以通过设置多表、ID分段来实现多通道的同时抓取。

可通过修改$user_id的开始和结束，来分段同时多通道。

sleep(1)仅为个人测试，可以修改
  1. header("Content-Type:text/html; Charset=UTF-8");
  2. set_time_limit(0);
  4. $col_title = ''; //标题
  5. $col_url = ''; //URL编号
  6. $user_id = 26; //起始抓取用户编号
  8. //MySQL预操作
  9. $mysqli = new mysqli("p:localhost", 'root', '', 'sohutv');
  10. if ($mysqli->connect_errno) {
  11. printf("Connect failed: %sn", $mysqli->connect_error);
  12. exit();
  13. }
  14. $mysqli->set_charset("utf8");
  15. $sql = "INSERT INTO album (userid,title,url) VALUES(?,?,?)";
  16. $stmt = $mysqli->prepare($sql);
  17. $stmt->bind_param("sss",$user_id ,$col_title ,$col_url);
  21. //循环抓取
  22. while (true) {
  23. $url = "http://my.tv.sohu.com/user/a/playlist/ta/list.do?userId=".$user_id;
  24. $temp_html = file_get_contents($url);
  25. $temp_json = json_decode($temp_html);
  26. $column_no = $temp_json->{'data'}->{'count'};
  28. if ($column_no) {
  29. //var_dump($temp_json->{'data'});
  30. $temp_array = $temp_json->{'data'}->{'list'};
  32. for($i=0; $i<$column_no; $i )
  33. {
  34. $temp_obj = $temp_array[$i];
  35. //var_dump($temp_obj);
  36. $col_title = $temp_obj->{'title'};
  37. $col_url = substr($temp_obj->{'url'}, 25, -6);
  39. $stmt->execute();
  40. }
  41. }
  42. //休眠1秒
  43. sleep(1);
  44. $user_id ;
  45. }
  47. /*
  48. 访问方式
  49. http://my.tv.sohu.com/pl/URL编号.shtml
  50. */
  52. ?>
复制代码


관련 라벨：
抓取搜狐视频中所有用户的专辑名
원천：php.cn
이전 기사：파일 크기를 계산하는 가장 빠른 방법, 'B', 'KB', 'MB' 다음 기사：프로그래머가 프로그래밍 경력에서 저지르는 7가지 실수
본 웹사이트의 성명
본 글의 내용은 네티즌들의 자발적인 기여로 작성되었으며, 저작권은 원저작자에게 있습니다. 본 사이트는 이에 상응하는 법적 책임을 지지 않습니다. 표절이나 침해가 의심되는 콘텐츠를 발견한 경우 admin@php.cn으로 문의하세요.
저자별 최신 기사
최신 이슈
function_exists()는 사용자 정의 함수를 결정할 수 없습니다. 기능 테스트() {                                                                                ...
에서 2024-04-29 11:01:01
0
3
2240
Chrome 모바일 버전을 표시하는 방법 안녕하세요 선생님, Chrome을 모바일 버전으로 어떻게 변경하나요?
에서 2024-04-23 00:22:19
0
11
2381
자식 창이 부모 창을 작동하지만 출력이 응답하지 않습니다. 처음 두 문장은 실행 가능하지만 마지막 문장은 구현할 수 없습니다.
에서 2024-04-19 15:37:47
0
1
1990
상위 창에 출력이 없습니다. document.onclick = function(){ window.opener.document.write('나는 자식 창의 출력입니다.');
에서 2024-04-18 23:52:34
0
1
1877
CSS 마인드맵 코스웨어는 어디에 있나요? 코스웨어
에서 2024-04-16 10:10:18
0
0
1947
관련 주제
더>
인기 추천
인기 튜토리얼
더>
관련 튜토리얼
인기 추천
최신 강좌
최신 다운로드
더>
웹 효과
웹사이트 소스 코드
웹사이트 자료
프론트엔드 템플릿