作者ntuleo (里歐)
看板Python
標題[問題] 爬取infinite scrolling web
時間Tue Jun 30 12:28:03 2015
有不用selenium可以爬infinite scrolling web的方法嗎?
有些page selenium沒有辦法爬(ex:quora),而且selenium很慢
有沒有其他方式可以background trigger infinite scrolling
讓我可以爬到整個網頁呢?
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 60.250.185.98
※ 文章網址: https://www.ptt.cc/bbs/Python/M.1435638486.A.BC2.html
→ talenttb: 查他的js呼叫那一隻api,然後組參數呼叫。 這種方式 07/08 08:31
→ talenttb: 如何 07/08 08:31