python - Labah-labah Scrapy memudahkan berjalan dan menyahpepijat dalam IDE

Question

Saya mempunyai banyak labah-labah, jadi saya tidak boleh membuat penyahpepijat secara manual (scrapy crawl spider_name) setiap kali saya nyahpepijat saya rasa saya boleh klik kanan pada fail labah-labah untuk menjalankan/nyahpepijat secara terus.

欧阳克 · Answer

Artikel rujukan: Ringkasan masalah biasa dengan perangkak Scrapy

labah-labah mudah dijalankan/debug

Dalam fail labah-labah, tambahkan cmdline kaedah panggilan

import scrapy.cmdline

#Your Spider Class...

def main():
    scrapy.cmdline.execute(['scrapy', 'crawl', 'your_spider_name'])

if __name__ == '__main__':
    main()

过去多啦不再A梦 · Answer

Buat fail py baharu dan gunakan ini untuk nyahpepijat

from scrapy.cmdline import execute

import sys
import os


sys.path.append(os.path.dirname(os.path.abspath(__file__)))

execute(["scrapy","crawl","YOUR_SPIDER"])