[問題] WSJ網站上的資料抓取

[areyo (沒有名字的怪物)]

各位午安

想請教如何抓取wsj.com上面某檔股票的歷史資料

例如Nikkei 225
http://quotes.wsj.com/index/JP/XTKS/NIK/advanced-chart

目前僅會'手抓'，利用Chrome + F12去抓取JSON數據

https://dl.dropboxusercontent.com/u/14347169/wsj.png

想請教版上高手，這要怎麼抓取呢??

謝謝

--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 1.174.246.28
※ 文章網址: https://www.ptt.cc/bbs/Python/M.1480060861.A.917.html
→ gozule: 用scrapy抓完後再parse
→ areyo: scrapy該如何抓?? 謝謝
→ areyo: 如果用urllib, request能否抓取呢??
→ Neisseria: 用 urllib 要自行處理細節，用 scrapy 就省下這些工夫
→ Neisseria: 如果不會用 scrapy，可以用 requests 函式庫
→ Neisseria: 這些函式庫/框架都有網站，可以上去看一下相關說明
→ s860134: 老實說你的問題應該是怎麼爬那個網站吧
→ areyo: 是想爬該網站某檔股票的歷史股價
→ s860134: header 抄一抄，解析一下那些 url parameter的規律
→ s860134: 像是你要爬多檔股票你要知道股票清單在哪或是名稱規律