[問題] python response 問題

[fordpines (阿福)]

http://crdd.osdd.net/raghava/lbtope/vrindex/index.php?ran=42052

最近在做網頁的爬蟲
上傳資料到form的已經另外寫好了 問題是不管什麼時候點進結果頁(上面的網址)他都會先跑
loading 的gif再刷新到有結果的那個頁面(會有標示百分比的那個)
我有試著送出request以後 讓他等一下收回response 但還是只有讀到gif的頁面

https://imgur.com/Mi4E6Yh
請問鄉民有甚麼方法 可以讓他讀到結果頁呢?

另外 在另一個地方問 回答的人說她改user-agent就可以拿到 但我用了兩個方法都不行啊...


https://imgur.com/AeUwT1h

--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 36.225.56.90
※ 文章網址: https://www.ptt.cc/bbs/Python/M.1520511615.A.D3E.html
※ 編輯: fordpines (36.225.56.90), 03/08/2018 20:23:49
→ s860134: 不熟悉爬蟲抓網業流程吧，先把 F12 打開 重新整理網頁
→ s860134: 可以發現其實這個頁面總共要了兩次頁面
→ s860134: https://imgur.com/CMKKe0f
→ s860134: 所以你加什麼 header 都沒有用拉，因為 url 是錯的
→ s860134: index.php (X) lbtope.php(O)
推 fiorentino: Good
→ AlaRduTP: 呃 顯示結果的網址和你給的網址不是不一樣嗎
→ fordpines: 謝謝s86大