JavaScript - ノードが Weibo をクロールする
仅有的幸福
仅有的幸福 2017-06-30 10:00:08
0
1
909

私はノードを初めて使用するので、Sina Weibo のコメントをクロールするためのクローラーを作成したいと考えていますが、ページは JS によって動的に生成されており、http モジュールではクロールできないことがわかりました。そのため、phantomjs を使用してクロールしました (聞いたところ)。 「遅くなります。15 分近く実行されています。遅すぎます。書き方が間違っているのではないかと思います。」と表示されていますが、それでも動作しません。新浪微博と同じように Web ページをクロールする方法はありますか?

リーリー
仅有的幸福
仅有的幸福

全員に返信 (1)
扔个三星炸死你

Weiboのクローリングについて書きました

アイデアは2つあります。
  1. 注意深く見ると、対応するデータを取得し、正規表現を使用してそれに一致するインターフェースがあるはずです

  2. Weiboは開発者APIインターフェースを提供しますが、使用するのはより面倒です

いいねを押す+0
    最新のダウンロード
    詳細>
    ウェブエフェクト
    公式サイト
    サイト素材
    フロントエンドテンプレート
    私たちについて 免責事項 Sitemap
    PHP中国語ウェブサイト:福祉オンライン PHP トレーニング,PHP 学習者の迅速な成長を支援します!