python - 如何爬取百度指数的数据？

Question

百度指数的查询地址：http://index.baidu.com
比如说我输入：世界杯。查询到的结果如下：

查询到的结果数字并不是文本的形式，不知道应该如何抓取？

希望各位大神指教！

迷茫 · Answer

ajax的吧看看ajax里的请求返回数据吧

迷茫 · Answer

F12 ，妥妥的
找 http://index.baidu.com/Interface/Search/getAllIndex/?res=azsWJCcMfgQgYQUpI2wmSz0GawFcHjoMKyIkMG0eYFYDXUspVARdQi03DiU6elRIMR0sRT8IElZhDBgYI11ZBT4xSlxdehQZNkZ1P0skBQcrDERiInxSBhEwGgMIc10aWUdVIwxREhNfZxs4PjE7Ag9eMG0PZDEQczUlA153HSY5CmNDaDRDaXMIeRhIMi5rN1YQVwoyBCVGBUQXZGJxAhdKJBhVH0pwFTRncXYfD0AUWypJLz4nJUczFw8jRXxdHRMwCxdhAHF7Fx8CKQ%3D%3D&res2=iMdY1W1TGQHmpyG9tZta9KatZf2VFnf1sQab3vylcHnlz95IvL491.2RTSXE73&startdate=2014-05-28&enddate=2014-06-26

ringa_lee · Answer

大致步骤如下：

首先要前往这个页面登录，获取会话 cookie；
然后使用获取到的 cookie 访问指数查询的 URL（此处使用“google io”）：http://index.baidu.com/?tpl=trend&word=google+io；
根据获取到页面中的 Javascript，拼接相关 AJAX 请求 URL，使用获取到的 cookie 重新请求该 URL，返回的内容即是你要的东西。