看板 Python 關於我們 聯絡資訊
如題,請問這個需求有可能達成嗎? 需要哪些套件? 我想到可能會有的問題是 1.無效連結的判斷 這部分可能用判斷requests的status_code來達成 2.修正連結 這我就沒啥頭緒了 @@ 請問有什麼套件可以輸入關鍵字然後帶出搜尋引擎的第一筆資料呢? 謝謝 -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 140.114.69.226 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1479346391.A.846.html
Yshuan: 可以偷偷硬爬google results 但機器爬蟲的速率容易被ban 11/17 10:17
tiefblau: google 有search的api 但是要快的話就是樓上講的 11/17 10:27
tiefblau: 記得加點random的sleep避免被鎖IP阿 11/17 10:28
alair99: 哇靠~~對耶,真是個好方法, 謝謝 ^^ 11/17 12:35