Web サイトのドメイン名の下にあるすべてのリンクをクロールします。

Question

PHP を使用して Web サイト上のすべてのリンクをクロールするにはどうすればよいですか?ドメイン名を入力すると、変更されたドメイン名の下にあるすべてのリンクを取得できます。ループ内のリンクをクロールする場合、重複したリンクを削除するにはどうすればよいですか?

邓宇 · Answer

問題は解決しましたか、兄弟?私もこのニーズに応えられるようになりました?