[心得] PTT 爬蟲函式庫

作者CodingMan ()

看板Python

標題[心得] PTT 爬蟲函式庫

時間Sat Jul 8 23:01:18 2017

Hi 因為有需要跟PTT銜接的需求所以寫了一個PTT爬蟲可以使用的函式庫算是把散佈在版上關於PTT爬蟲的知識做個整理不用再每個人都自己把底層實做一次有缺少的功能 api 請立馬告訴我有需要歡迎引用有問題歡迎回報最後如果可以不吝給個星星謝謝 <3 https://github.com/Truth0906/PTTCrawlerLibrary 20171013 更新整理了前人的程式碼更新字元對照表共十三萬行成功支援 PTT 編碼 big5uao 備註一下這個編碼計畫在2006年社群就停止了找到的程式碼也停留在 python2跟蠻早版本的對照表更只有實作 decode 的狀態。 PTT 預設使用這種編碼當然大部分情況可以使用big5運作但有人回報內文日文會爆炸讓我不得不研究一下這富有歷史意義的 big5uao。我整理出來的這份編碼程式碼應該是目前年代最新最完整的版本了。 CodingMan -- ※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 218.161.55.119 ※ 文章網址: https://www.ptt.cc/bbs/Python/M.1499526083.A.9F4.html ※ 編輯: CodingMan (218.161.55.119), 07/08/2017 23:14:04

推 pups003: 推 07/09 00:52

推 agogoman: 推 07/09 09:13

推 paoju5566: 推 07/09 22:32

※ 編輯: CodingMan (218.161.55.119), 07/10/2017 00:14:56

推 ccvs: <3 07/10 10:39

推 abraxas: 推 07/10 14:53

推 aznchat100: 我有寫一個multithreaded的爬蟲https://goo.gl/768vmV 07/11 00:40

→ CodingMan: 謝謝我研究一下 07/11 08:48

推 saul1210: 推 07/12 07:57

推 shanishani: 推一個 07/13 19:01

推 japing: 推一個太強大了 07/14 10:04

推 TCLbasanova: 在import出現error http://imgur.com/wvQKmhw 07/15 17:24

→ TCLbasanova: 有專家可以幫小弟解答嗎Orz 07/15 17:24

→ zerof: .......他又沒有丟上 PyPI ... 07/15 23:23

→ CodingMan: ....我丟我丟 07/16 10:38

推 TCLbasanova: 抱歉抱歉小弟初學python 不清楚流程謝謝原PO z大 07/17 11:58

推 gemini6479: 還不快丟XDDD 07/17 14:39

推 sam80719: 讚，我是剛開始進入程式的初心者，向巨人說謝謝 07/18 19:42

推 asd2260123: cool!!! 08/24 15:26

※ 編輯: CodingMan (110.28.226.62), 10/13/2017 21:20:58