私は分散型 Weibo クローラーをオープンソース化しました。このプロジェクトは元々、(私自身の作品に関連した) 人気のある Weibo の再投稿を分析するために使用されました。その後、何度も修正し、多くの新機能を追加して、オープンソースにしました。最初の質問については、Weibo の検索エンジンに問題があるのでしょうか。たとえば、Weibo システムでは、場所による検索など、ユーザーのフォローやユーザーのファンに対して返されるデータは 5 ページのみに制限されているため、意図的な可能性があると思います。ユーザーは数万のデータのみを返します。また、表示権限がない Weibo 投稿がいくつかあるにもかかわらず、取得される結果は表示権限があるものである可能性もあります。
あなたが言及した2番目の質問は、目に見えないWeiboを取得できないということです。クローラーは一般のユーザーが見ることができるWeiboデータのみを取得できます。これもコードに実装しました。なぜなら、非公開のWeiboであれば間違いなくWeiboシステムでは表示されず、APIも利用できないはずだからです。 Weibo は非常に大きな企業であるため、依然としてユーザーのプライバシーを保護する必要があります。
モバイル端末の検索インターフェースで検索しても何も返されない理由は、実は Weibo が意図的にこれを行っているためである可能性があります。よく調べてみると、モバイル側の Weibo の情報よりも PC 側の情報の方がはるかに豊富であることがわかります。したがって、クローラーを作成し、包括的なデータが必要な場合は、PC 側から開始する必要があります。