[問題] 輸入資料筆數限制

[toptaster (icewine)]

不知道R有沒有輸入資料大小的限制?

我把一個存有約20萬筆的.csv檔用read.table匯入R後，
R內的資料筆數只有8萬多筆，整個匯入過程沒有出現錯誤訊息，
不知道是read.table的限制還是R本身限制？
有沒有辦法解決？

先謝謝各位解答。


--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 217.189.188.210
※ 文章網址: https://www.ptt.cc/bbs/R_Language/M.1426691444.A.356.html
→ Wush978: 你先檢查看看匯入的Table最後一列有沒有什麼問題看看
→ Wush978: 20萬這個數字本身不會挑戰到R的極限，問題應該在別處
→ celestialgod: 如果是正規的csv，可以試試data.table的fread看看，
→ celestialgod: 比較能夠給一些錯誤訊息。
→ toptaster: @Wush978 原資料Table跟匯入後的TABLE除了資料筆數不
→ toptaster: 同外，一切正常。
→ toptaster: @celestialgod 用fread匯入資料筆數只多了約五千筆，
→ toptaster: 離20萬還有一段距離。
→ celestialgod: 所以還是沒有錯誤訊息？
→ celestialgod: 有確定memory沒被用盡嗎？？
→ toptaster: 只有對資料型態的警告訊息另fread好像不能用dec=","?
→ toptaster: 沒有顯示記憶體方面問題。
→ celestialgod: dec? fread通常是用sep2，詳細可以讀manual
→ celestialgod: 資料型態的錯誤是什麼錯誤? 有時候可能是關鍵。
→ psinqoo: 先看資料型態是什麼? 我之前有遇到資料被塞入怪怪的東西
推 psinqoo: 我十萬筆資料一樣吃入 而且是windows~
→ psinqoo: 不過之前 也發生類似像原PO的事件 主要是被塞入特殊符號
→ psinqoo: 因為是網路抓的 所以每次讀到一半就中斷 或讀很久
推 Edster: 你有讀進來後, 再寫出來嗎？
→ Edster: 說不定是分隔符號的問題
→ toptaster: 還是找不出原因，後來只好改用readLines解決。