提問搜尋_PHP中文網

社群學習工具庫休閒

繁体中文

熱門搜尋：
PHP
MySQL
jquery
HTML
CSS

redis - 行python爬蟲時，MySQL版本是5.7，總是報錯

執行python爬蟲時，MySQL版本是5.7，總是報錯 {程式碼...} 問題出在什麼地方？怎麼解決呢？

扔个三星炸死你 2017-06-12 09:19:42

html - 爬蟲時出現'DNS lookup failed”，開啟網頁卻沒問題，這是什麼情況？

RT，在使用python進行爬蟲，一開始一切正常，突然網頁卡死，等待了一會兒後恢復正常，然而這時候再進行爬蟲時，就會報“DNS lookup failed”，試過很多網站，網頁卻是正常打開。請教原因及解決方法。跪謝！！

PHP中文网 2017-06-14 10:50:53

網頁爬蟲 - 部落格園部落格中的圖片怎麼用python爬取下來？

寫了一小段程式碼，爬取部落格園部落格中的圖片，這段程式碼對部分連結有效，還有一部分連結一爬就報錯，這是什麼原因呢？ {代碼...} 如圖，可以正確爬取圖片若把url換成 {代碼...} 則立刻報錯求解決，謝謝！

某草草 2017-05-18 10:45:39

網頁爬蟲 - Python爬蟲入門知識

本人快大二了，自習了Python，文法基本上會。想學下爬蟲，但是感覺這牽涉到好多知識啊，有沒有過來人總結下都有什麼知識，或者Python爬蟲該怎麼學？

欧阳克 2017-07-05 10:34:11

PHP爬蟲是如何連接到動態爬蟲代理的？

php爬蟲是如何接入爬蟲代理的呢，之前用的是python 和php一樣的嗎接入方式？

Laical 2020-03-13 17:10:19

python - scrapy中使用CrawlSpider，匹配不到urls

我的爬蟲代碼如下，其中rules無獲取，不知道是什麼問題？ {代碼...} 執行報錯的提醒： {代碼...}

为情所困 2017-05-18 10:51:02

python - 關於爬蟲爬取圖片的問題？

現在的爬蟲通常都是從html裡面解析出圖片，但問題是有的圖片路徑寫在js裡面。這個怎麼爬？我知道瀏覽器打開f12點source可以看裡面的圖片，但要怎麼用爬蟲把source裡面的資源爬出來？

我想大声告诉你 2017-06-28 09:25:40

javascript - node爬取微博

剛接觸node,想寫個爬蟲，爬取新浪微博評論，但是發現頁面是由JS動態生成的，用http模組爬取不到，然後用phantomjs爬取，（聽說會比較慢，運行了近15分鐘，這也太慢了，不知是否寫錯），還是不行，問一下有什麼辦...

仅有的幸福 2017-06-30 10:00:08

python - 怎麼看網址做的是什麼反爬蟲

網址：https://www.nvshens.com/g/22377/，網站直接遊覽器打開然後，點擊圖片右鍵是可以下載的，然後我爬蟲直接請求下來的圖片就已經被屏蔽了，然後我改了headers跟設定了ip代理，還是沒用。但抓包來看也不是動...

ringa_lee 2017-06-12 09:27:51

網頁爬蟲 - python3.4.1 request模組報錯 'list' object has no attribute 'get'

用python 寫了一個爬取ip位址的爬蟲，由於該網站是反爬蟲的，所以寫了代理使用線程池開啟10個線程來爬取ip地址然而直接報錯'list' object has no attribute 'get'不知道如何解決，貼上本人代碼。 from bs4 import...

世界只因有你 2017-06-12 09:24:16

網頁爬蟲 - python 爬蟲怎麼處理json內容

看不清楚的話網址是http://www.sse.com.cn/disclos...紅字是我需要的內容但是我提取不出來求教怎麼操作

学习ing 2017-06-22 11:51:33

linux - 有什麼Python寫的程式碼發布，自動上線或是配製管理的系統啊？

有什麼Python寫的程式碼發布，自動上線或是配製管理的系統啊？想做一個類似的網站，但是沒什麼思路，各位推薦一個相關項目。我先學習一下…

大家讲道理 2017-05-16 13:31:07

python - csdn爬蟲評論

https://github.com/xchaoinfo/fuck-login/blob/master/015%20CSDN/csdn.py 根據87-88行的註釋說明，為什麼用爬蟲去評論csdn文章的時候需要轉化成這個鏈接，這個連結是怎麼得來的，我看了下網頁程式碼沒有相關連結...

仅有的幸福 2017-05-18 10:53:42

python中開發中例如道具之類的設定文件，是以什麼文件格式儲存

python中開發中例如道具之類的設定文件，是以什麼文件格式儲存

phpcn_u1582 2017-05-18 10:49:39

python把第x列資料寫入第x個文件

Python爬蟲一共需要爬取65頁數據，每頁數據的列數不確定。現在我能把每一列的資料抓下來，但是因為列數不確定，寫入的檔案名稱就不能確定。問題在於怎麼才能把第x列資料寫入第x個檔案。也就是如何才能動態選擇file=...

漂亮男人 2017-06-12 09:23:40

python - 阿里巴巴爬蟲源碼的應用疑惑

1.目前問題：運行該py文件，沒有任何反應，請問是什麼問題？ 2.純新手，沒接觸過py，只學完初淺的html+css。但由於公司一個專案需要蒐集區域的供應商信息，想到了py爬蟲，便在一個科學怪咖的網站找到了一個爬取阿...

阿神 2017-06-22 11:51:27

ThinkPHP5怎麼導入simple_HTML_DOM文件

我想做一個網頁爬蟲取得資料的，現在有simple_HTML_DOM.php文件，在TP5中我該怎麼使用它呢？直接把文件內容放到common.php中還是怎麼用？

NULL 2017-12-07 13:26:15

python - 網頁title中包含換行，如何用正規表示式擷取出來？

在用python做CSDN的網頁爬蟲，在爬取網頁title時，我一直用的正規表示式(?<=\<title\>).+?(?=\<)在CSDN中用不了，去CSDN源碼一看，title換行顯示了所以導致原來的正則表達式無法使用，那麼，問題...

女神的闺蜜爱上我 2017-06-22 11:51:43

網頁爬蟲 - Python requests.get 爬蟲設定代理 IP位址未改變

工作需要爬取亞馬遜上面的訊息，但是亞馬遜反爬蟲太厲害，同一個IP位址會被封。 Python版本：3.6， IDE：Pycharm 2017.1上網查了很多資料，requests函式庫的手冊也讀過，但是都是同一個方法，程式碼如下： {程式碼...} ...

typecho 2017-06-12 09:24:11

python - scrapy 爬取pages比實際進入items的多得多？

{程式碼...} 為什麼我使用scrapy爬取的時候訪問pages要比實際進入items的的多的多?就是爬了半天items裡沒有幾條數據入庫的有什麼辦法解決麼？

PHP中文网 2017-05-18 10:47:40