這篇文章主要介紹了python訪問抓取網頁常用命令的相關資料,需要的朋友可以參考下
#python訪問抓取網頁常用命令
#簡單的抓取網頁:
import urllib.request url="http://google.cn/" response=urllib.request.urlopen(url) #返回文件对象 page=response.read()
直接將URL儲存為本機檔案：
import urllib.request url="http://google.cn/" response=urllib.request.urlopen(url) #返回文件对象 page=response.read()
POST方式：
import urllib.parse
import urllib.request
url="http://liuxin-blog.appspot.com/messageboard/add"
values={"content":"命令行发出网页请求测试"}
data=urllib.parse.urlencode(values)
#创建请求对象
req=urllib.request.Request(url,data)
#获得服务器返回的数据
response=urllib.request.urlopen(req)
#处理数据
page=response.read()GET方式：
import urllib.parse
import urllib.request
url="http://www.google.cn/webhp"
values={"rls":"ig"}
data=urllib.parse.urlencode(values)
theurl=url+"?"+data
#创建请求对象
req=urllib.request.Request(theurl)
#获得服务器返回的数据
response=urllib.request.urlopen(req)
#处理数据
page=response.read()有2個常用的方法,geturl(),info()
geturl()的設定是為了辨別是否有伺服器端的網址重定向,而info()則包含了一系列的資訊。
中文問題的處理，會用到 encode()編碼 dencode()解碼：
以上是python訪問抓取網頁常用指令的實例詳解的詳細內容。更多資訊請關注PHP中文網其他相關文章！
