Python - Scrapy で CrawlSpider を使用すると、URL が一致しない

Question

私のクローラコードは以下の通りですが、ルールが取得できません。何が問題なのかわかりません。 {コード...} 実行エラー リマインダー: {コード...}

世界只因有你 · Answer

主な問題は allow_domains です。このようにコードを作成すると、リンクをキャプチャできます。リーリー

主に

文字列。 allow_domain别带上http://

さらに、解析モジュールに問題があります。私はそれを変更していません。データを取得したら、自分で変更できるはずです。

また、前のクラスメートについて文句を言わせてください。彼はコードをまったくデバッグしていませんでしたが、それでもこのように答えました。それは明らかに誤解を招きます。

習慣沉默 · Answer

いくつかのモジュールコンポーネントが非推奨になり、代わりに同様のモジュールを使用できるようになりました

阿神 · Answer

警告のみで、エラーはありません。もしかしたら、クロールしたWebサイトがクローラー対策されているため、正常に取得できなくなっている可能性があります。

php 8、私も来ます