Leichte Python-Bibliothek zum Scrapen mit LLMs

WBOY
Freigeben: 2024-08-13 20:30:10
Original
515 Leute haben es durchsucht

Lightweight python library for scraping with LLMs

Hallo zusammen,

Ich möchte meine Python-Bibliothek zum Lazy Scrapping teilen :)

Ich habe LLMs genutzt, um schnell strukturierte Daten von Websites zu extrahieren, ohne mich mit der DOM-Struktur herumschlagen und Web-Scraper schreiben zu müssen. Nach ein paar Monaten voller Experimente teile ich meinen Code als Open-Source-Python-Bibliothek.

Im Vergleich zu ähnlichen Open-Source-Bibliotheken liegt der Hauptvorteil in der Einfachheit und dem Fokus auf eine minimale Token-Nutzung, was zu geringeren Kosten und einer schnelleren Verarbeitung führt.

Schauen Sie sich die Bibliothek GitHub an: https://github.com/raznem/parsera

Ich freue mich über Ihr Feedback!

Das obige ist der detaillierte Inhalt vonLeichte Python-Bibliothek zum Scrapen mit LLMs. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!

Quelle:dev.to
Erklärung dieser Website
Der Inhalt dieses Artikels wird freiwillig von Internetnutzern beigesteuert und das Urheberrecht liegt beim ursprünglichen Autor. Diese Website übernimmt keine entsprechende rechtliche Verantwortung. Wenn Sie Inhalte finden, bei denen der Verdacht eines Plagiats oder einer Rechtsverletzung besteht, wenden Sie sich bitte an admin@php.cn
Neueste Downloads
Mehr>
Web-Effekte
Quellcode der Website
Website-Materialien
Frontend-Vorlage
Über uns Haftungsausschluss Sitemap
Chinesische PHP-Website:Online-PHP-Schulung für das Gemeinwohl,Helfen Sie PHP-Lernenden, sich schnell weiterzuentwickeln!