作者CaptPlanet (ep)
看板Python
標題[問題] 證交所歷史股價 無法自動下載
時間Wed Apr 18 16:20:18 2018
以前有寫出code自動下載證交所上的csv檔
最近想整理更多個股日成交價量資訊,發現沒辦法抓了,會出現maxretryerror的錯誤,
看起來是被擋了,
加上了time.sleep和timeout設成None和fake useragent也沒辦法解決,
想請問各位有沒有什麼好方法呢?感謝!
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 27.52.202.114
※ 文章網址: https://www.ptt.cc/bbs/Python/M.1524039621.A.368.html
→ cory8249: 大概IP被鎖 會被禁一段時間 04/18 17:55
推 ThxThx: max retry error不是root cause 04/18 18:50
→ ThxThx: 你要先告訴大家retry失敗的原因是什麼或是你怎麼爬的,因 04/18 18:50
→ ThxThx: 為擋爬蟲的方法太多招了 04/18 18:50
→ CaptPlanet: 感謝回覆 以解決 等一段時間後把time sleep加長已經可 04/19 10:02
→ CaptPlanet: 以正常運作 看起來是一開始頻率太高被鎖了而已 04/19 10:02