Heim > Backend-Entwicklung > PHP-Problem > So lösen Sie das verstümmelte Problem des PHP-Webcrawlens

So lösen Sie das verstümmelte Problem des PHP-Webcrawlens

藏色散人
Freigeben: 2023-03-05 18:34:01
Original
2959 Leute haben es durchsucht

Lösung für das Crawlen verstümmelter PHP-Webseiten: 1. Verwenden Sie „mbconvertencoding“, um die Codierung zu konvertieren. 2. Legen Sie die Option „curl_setopt($ch, CURLOPT_ENCODING, ‚gzip‘)“ fest.

So lösen Sie das verstümmelte Problem des PHP-Webcrawlens

Empfohlen: „PHP-Video-Tutorial

php crawlt die Seite mit verstümmelten Zeichen

Beim Crawlen der Seite erscheinen verstümmelte Zeichen wie ������. Die Lösung ist wie folgt

1. Konvertieren Sie die Kodierung

str=mbconvertencoding(str, “utf-8”, “GBK”);
Nach dem Login kopieren

2. Die Daten werden von gzip komprimiert

Wenn Curl die Daten erhält, legen Sie die folgenden Optionen fest und fügen Sie sie hinzu:

curl_setopt($ch, CURLOPT_ENCODING, 'gzip');
Nach dem Login kopieren

Die Verwendung der Funktion „file_get_contents“ erfordert die Installation der zlib-Bibliothek

$data = file_get_contents("compress.zlib://".$url);
Nach dem Login kopieren

3. Nach Erhalt der Daten werden verstümmelte Zeichen angezeigt

Fügen Sie oben den folgenden Code für

header("Content-type: text/html; charset=utf-8");
Nach dem Login kopieren
hinzu

Das obige ist der detaillierte Inhalt vonSo lösen Sie das verstümmelte Problem des PHP-Webcrawlens. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!

Verwandte Etiketten:
Quelle:php.cn
Erklärung dieser Website
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn
Beliebte Tutorials
Mehr>
Neueste Downloads
Mehr>
Web-Effekte
Quellcode der Website
Website-Materialien
Frontend-Vorlage