Bagaimana untuk Mendapatkan Kandungan Halaman Secara Cekap Menggunakan `async.map` Perpustakaan `requests` Python?

Mengambil Kandungan Halaman dengan Permintaan Tak Segerak

Pustaka permintaan Python menyediakan ciri pemetaan tak segerak, async.map, untuk mengendalikan berbilang permintaan secara serentak. Walau bagaimanapun, apabila menggunakan async.map, anda mungkin menghadapi masalah mendapatkan kandungan respons untuk setiap halaman.

Untuk berjaya mendapatkan semula kandungan halaman, anda perlu mengikuti langkah berikut:

1 . Tentukan Fungsi untuk Tugas Anda:
Buat fungsi yang mentakrifkan tindakan yang anda mahu lakukan pada setiap objek tindak balas. Sebagai contoh, jika anda ingin mencetak kandungan respons, fungsi anda mungkin kelihatan seperti ini:

def print_content(response):
    print(response.content)

2. Tambahkan Fungsi sebagai Cangkuk Acara:
Dalam permintaan anda, tambahkan fungsi yang ditakrifkan dalam langkah 1 sebagai cangkuk acara. Ini akan melaksanakan fungsi anda setiap kali respons diterima secara tidak segerak.

action_item = async.get(url, hooks={'response': print_content})

3. Panggil async.map pada Senarai Permintaan:
Kompilasikan senarai semua permintaan atau tindakan yang perlu anda lakukan. Kemudian, panggil async.map, menghantar senarai tindakan. Ini akan melaksanakan semua tugasan secara tak segerak.

async_list.append(action_item)

async.map(async_list)

Dengan mengikut langkah ini, anda boleh menggunakan ciri async.map pustaka permintaan untuk mendapatkan semula kandungan berbilang halaman secara tak segerak dalam Python.

Atas ialah kandungan terperinci Bagaimana untuk Mendapatkan Kandungan Halaman Secara Cekap Menggunakan `async.map` Perpustakaan `requests` Python?. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!