Python urllib.Parse Beispiel
Urllib.Parse ist ein Standard -Bibliotheksmodul, das in Python verwendet wird, um URLs zu verarbeiten. 1. Verwenden Sie die URLParse, um die URL in Schema, Netloc, Pfad, Abfrage und andere Teile aufzuteilen, was zum Extrahieren von Protokoll, Domänennamen, Port, Abfrageparametern und anderen Informationen geeignet ist. 2. Durch Urlunparse können die Komponenten der URL in eine vollständige URL rekombiniert werden oder verwenden Urljoin, um den relativen Pfad basierend auf der Basisadresse zu vervollständigen, um einen absoluten Pfad zu erzeugen. 3.. Verwenden Sie Parse_qs, um die Abfragezeichenfolge in ein Wörterbuch der entsprechenden Schlüsselwertliste zu analysieren, und PARSE_QSL gibt eine Liste von Schlüsselwertpaaren von Tupel zurück, die für die Verarbeitung von Multi-Wert-Parametern geeignet sind. V. Zitat und Unquote werden verwendet, um Signalzeichen oder Chinesisch sicher zu codieren und zu dekodieren. Dieses Modul bietet zugrunde liegende und zuverlässige URL -Verarbeitungsfunktionen bei Crawlern, API -Aufrufen und Routing -Parsen.
urllib.parse ist ein Standard -Bibliotheksmodul in Python zur Verarbeitung von URLs und wird häufig verwendet, um URLs zu analysieren, zu teilen, zu konstruieren und zu codieren. Das Folgende sind einige häufige Nutzungsszenarien, um die grundlegende Nutzung zu zeigen.
1. analysieren Sie URL ( urlparse )
Teilen Sie eine vollständige URL in mehrere Teile auf (Protokoll, Domänenname, Pfad, Parameter usw.):
von urllib.parse import urlparse url = "https://www.example.com:8080/search?q=python&sort=desc#results" analysiert = urlparse (URL) print (parsed.scheme) # https print (parsed.netloc) # www.example.com:8080 print (parsed.hostname) # www.example.com print (parsed.port) # 8080 print (parsed.path) # /suche print (parsed.query) # q = python & sort = desc Print (Parsed.Fragment) # Ergebnisse
Dies ist nützlich, wenn Sie Domain -Namen oder Abfragungsparameter extrahieren müssen.
2. Construct URL ( urlunparse / urljoin )
Rekombination von jedem Abschnitt in die URL:
von urllib.parse import urlunparse
Teile = ((
'https', # Schema
'www.example.com', # netloc
'/api/data', # Pfad
'', # Params
'q = python & limit = 10', # Abfrage
'Top' # Fragment
)
URL = Urlunparse (Teile)
print (url) # https://www.example.com/api/data?q=python&limit=10#top Sie können auch urljoin verwenden, um den relativen Pfad zu vervollständigen:
von urllib.parse import urljoin Base = "https://www.example.com/docs/" Relative = "Tutorial.html" full = urljoin (Basis, relativ) print (full) # https://www.example.com/docs/tutorial.html
3. Prozessabfrageparameter ( parse_qs und parse_qsl )
Parses Abfragen in Wörterbücher oder Tupellisten:
von urllib.parse import parse_qs, parse_qsl
Query = "Name = John & Age = 30 & Hobby = Reading & Hobby = Reisen"
# Gibt das Wörterbuch zurück, der Wert ist eine Liste (da die Parameter wiederholt werden können)
params_dict = parse_qs (Abfrage)
print (params_dict)
# {'Name': ['John'], 'Alter': ['30'], 'Hobby': ['Lesen', 'Travel']}
# Geben Sie die Liste der Schlüsselwertpaare zurück Params_List = parse_qsl (Abfrage) zurück
print (params_list)
# [('Name', 'John'), ('Alter', '30'), ('Hobby', 'Lesen'), ('Hobby', 'Reisen')] Geeignet für die Verarbeitung ? Die folgenden Parameter und fällen weitere logische Urteile.
4. Codierung und Decodierung ( quote / unquote / urlencode )
-
urlencode: Encodieren Sie das Wörterbuch in eine Abfragebarstellung:
von urllib.parse urlencode importieren
Data = {
"Suche": "Chinesisch",
'Seite': 2
}
query_string = urlencode (Daten)
print (query_string) # search = chinesisch & page = 2-
quote/unquote: URL -Codierung / Dekodierung einer einzelnen Zeichenfolge:
von Urllib.Parse Import -Zitat, unquote Text = "Hallo Welt!" codiert = zitat (Text) Druck (codiert) # Hallo Welt! decoded = unquote (codiert) Druck (dekodiert) # Hallo Welt!
Geeignet für die Verarbeitung von URLs mit Sonderzeichen wie Räumen und Chinesen.
Grundsätzlich diese gemeinsamen Operationen. Obwohl urllib.parse nicht so "fortgeschritten" ist wie requests , ist es bei der Umgang mit URL -Struktur und -Codierung sehr zugrunde und zuverlässig. Es ist ein grundlegendes Instrument zum Erstellen von Crawler, API -Schnittstellenaufrufen, Routing -Auflösung und anderen Funktionen.
Das obige ist der detaillierte Inhalt vonPython urllib.Parse Beispiel. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!
Heiße KI -Werkzeuge
Undress AI Tool
Ausziehbilder kostenlos
Undresser.AI Undress
KI-gestützte App zum Erstellen realistischer Aktfotos
AI Clothes Remover
Online-KI-Tool zum Entfernen von Kleidung aus Fotos.
Clothoff.io
KI-Kleiderentferner
Video Face Swap
Tauschen Sie Gesichter in jedem Video mühelos mit unserem völlig kostenlosen KI-Gesichtstausch-Tool aus!
Heißer Artikel
Heiße Werkzeuge
Notepad++7.3.1
Einfach zu bedienender und kostenloser Code-Editor
SublimeText3 chinesische Version
Chinesische Version, sehr einfach zu bedienen
Senden Sie Studio 13.0.1
Leistungsstarke integrierte PHP-Entwicklungsumgebung
Dreamweaver CS6
Visuelle Webentwicklungstools
SublimeText3 Mac-Version
Codebearbeitungssoftware auf Gottesniveau (SublimeText3)
Warum NameResolutionError(self.host, self, e) von e und wie man es löst
Mar 01, 2024 pm 01:20 PM
Der Grund für den Fehler ist NameResolutionError(self.host,self,e)frome, ein Ausnahmetyp in der urllib3-Bibliothek. Der Grund für diesen Fehler ist, dass die DNS-Auflösung fehlgeschlagen ist, d. h. der Hostname oder die IP-Adresse Der Lösungsversuch konnte nicht gefunden werden. Dies kann daran liegen, dass die eingegebene URL-Adresse falsch ist oder der DNS-Server vorübergehend nicht verfügbar ist. So beheben Sie diesen Fehler Es gibt möglicherweise mehrere Möglichkeiten, diesen Fehler zu beheben: Überprüfen Sie, ob die eingegebene URL-Adresse korrekt ist und stellen Sie sicher, dass sie zugänglich ist. Stellen Sie sicher, dass der DNS-Server verfügbar ist. Sie können es mit dem Befehl „ping“ in der Befehlszeile versuchen Um zu testen, ob der DNS-Server verfügbar ist, versuchen Sie, über die IP-Adresse statt über den Hostnamen auf die Website zuzugreifen, wenn Sie sich hinter einem Proxy befinden
Lösung: urllib3 ProxySchemeUnknown(proxy.scheme)
Feb 29, 2024 pm 07:01 PM
Der Grund für den Fehler ist, dass der ProxySchemeUnknown(proxy.scheme)-Fehler von urllib3 normalerweise durch die Verwendung eines nicht unterstützten Proxy-Protokolls verursacht wird. In diesem Fall erkennt urllib3 den Protokolltyp des Proxyservers nicht und kann daher den Proxy nicht für Netzwerkverbindungen verwenden. Um dieses Problem zu beheben, müssen Sie sicherstellen, dass Sie ein unterstütztes Proxy-Protokoll wie HTTP oder HTTPS verwenden. So lösen Sie dieses Problem: Sie müssen sicherstellen, dass Sie ein unterstütztes Proxy-Protokoll wie HTTP oder HTTPS verwenden . Sie können dieses Problem lösen, indem Sie die Proxy-Parameter von urllib3 festlegen. Wenn Sie einen http-Proxy verwenden, lautet das Codebeispiel wie folgt: importurllib3http
So verwenden Sie die Funktion urllib.request.urlopen() zum Senden einer POST-Anfrage in Python 3.x
Jul 31, 2023 pm 07:10 PM
So verwenden Sie die Funktion urllib.request.urlopen() in Python3.x zum Senden einer POST-Anfrage. Bei der Netzwerkprogrammierung ist es häufig erforderlich, eine POST-Anfrage über das HTTP-Protokoll zu senden, um mit dem Server zu interagieren. Python bietet die Funktion urllib.request.urlopen() zum Senden verschiedener HTTP-Anfragen, einschließlich POST-Anfragen. In diesem Artikel wird die Verwendung von urllib.request.urlop ausführlich vorgestellt
So verwenden Sie die Funktion urllib.request.urlopen() zum Senden einer GET-Anfrage in Python 3.x
Jul 30, 2023 am 11:28 AM
So verwenden Sie die Funktion urllib.request.urlopen() in Python3.x, um eine GET-Anfrage zu senden. Bei der Netzwerkprogrammierung müssen wir häufig Daten von einem Remote-Server erhalten, indem wir eine HTTP-Anfrage senden. In Python können wir die Funktion urllib.request.urlopen() im Modul urllib verwenden, um eine HTTP-Anfrage zu senden und die vom Server zurückgegebene Antwort zu erhalten. In diesem Artikel wird die Verwendung vorgestellt
Ein Artikel führt Sie durch die urllib-Bibliothek in Python (Bedienung von URLs).
Jul 25, 2023 pm 02:08 PM
Die Verwendung der Python-Sprache kann jedem helfen, Python besser zu lernen. Die von urllib bereitgestellte Funktion besteht darin, mithilfe von Programmen verschiedene HTTP-Anforderungen auszuführen. Wenn Sie einen Browser simulieren möchten, um eine bestimmte Funktion auszuführen, müssen Sie die Anforderung als Browser tarnen. Die Tarnungsmethode besteht darin, zunächst die vom Browser gesendeten Anforderungen zu überwachen und sie dann basierend auf dem Anforderungsheader des Browsers zu tarnen. Der User-Agent-Header wird zur Identifizierung des Browsers verwendet.
So verwenden Sie die HTTP-Clientmodule urllib und urllib3 von Python
May 20, 2023 pm 07:58 PM
1. Übersicht über urllib: urllib ist die offizielle Standardbibliothek zum Anfordern von URL-Verbindungen in Python. Sobald Sie Python installiert haben, kann diese Bibliothek im Wesentlichen direkt verwendet werden. In Python2 sind dies hauptsächlich urllib und urllib2, und in Python3 sind sie in urllib integriert. urllib2 wurde in Python3.x mit urllib zusammengeführt, und dann wurde das Paket in die folgenden vier Module unterteilt: urllib.request: Es ist das grundlegendste http-Anfragemodul, das zum Simulieren von Sendeanfragen verwendet wird. urllib.error: Ausnahmebehandlungsmodul, falls vorhanden Fehler tritt auf, diese Ausnahmen abfangen urllib
Golang-Kompilierungsfehler: „undefiniert: time.Parse' Wie kann man ihn lösen?
Jun 25, 2023 am 10:03 AM
Go-Sprache ist eine Programmiersprache, die in den letzten Jahren viel Aufmerksamkeit erregt hat. Sie ist aufgrund ihrer einfachen Erlernbarkeit, ihrer prägnanten Syntax und ihrer Unterstützung für Parallelität beliebt. Während des Kompilierungsprozesses mit Golang können jedoch einige Fehlermeldungen auftreten, z. B. Kompilierungsfehler: „undefiniert: time.Parse“. Dieser Fehler tritt normalerweise auf, wenn wir das Zeitpaket in einem Programm verwenden und versuchen, die Parse-Funktion zum Parsen einer Zeichenfolge zu verwenden. Die Lösung dieses Problems ist eigentlich sehr einfach. Es gibt zwei Hauptmethoden: Methode
Wie behebe ich den Fehler „undefiniert: flag.Parse' in Golang?
Jun 24, 2023 pm 10:28 PM
In den letzten Jahren wurde Golang als aufstrebende Programmiersprache von vielen Programmierern bevorzugt. Es wird in der Netzwerkprogrammierung, im verteilten Rechnen, in der Big-Data-Verarbeitung und in anderen Bereichen eingesetzt. Aber wie bei jeder anderen Sprache können beim Schreiben von Programmen in Golang verschiedene Fehler auftreten. Unter ihnen ist der Fehler „undefiniert:flag.Parse“ ein häufiger Fehler. Wie kann man es also lösen? Zunächst ist es notwendig, das Flag-Paket zu verstehen. Das Flag-Paket ist eine Go-Standardbibliothek zum Parsen von Befehlszeilenargumenten. es kann zählen
