作者bigmoun (123)
看板CSSE
標題Re: [問題] 檔案切割的問題...
時間Tue Oct 18 13:54:59 2005
有點看不太懂。
你為什麼需要用編輯程式開這個檔呢?
如果你只是要看這個檔案每筆資料的格式。
也就是只是要看資料儲存的規則。
你只要看前幾筆資料就可以了!
你可以在DOS視窗下打type filename | more
就可以了!
如果你已經知道規則,用程式去開啟這個檔案就可以了!
不會有記憶體不夠的問題。
(如果你是用java程式開這個檔案,你要下參數,否則程式只會用128M的記憶體跑,
這樣會出現out of memory)
我之前處理過proxy log的資料,一個檔案也是超過1G。
我用java寫一個程式從log檔只挑出.html, .asp, .php, .xml and .jsp檔的紀錄。
並不會有什麼問題。
最後在將挑出的資料轉入到資料庫內。
※ 引述《bendon (bendon)》之銘言:
: 請問各位好人...
: 我目前因為論文需要...
: 有DATA檔案很大800M左右需要分析(都是數字 所以用.txt打開就可以了)
: 太大打開不了
: 因為這樣我還去買記憶體加到1.5G(記憶體真不便宜)
: 打開還是很慢
: 其他事情不太能夠作業...
: 有沒有辦法不打開這檔案把它切割幾個小檔案阿...
: 讓我可以慢慢分析整合...我用的系統是XP
: 希望不要因為這樣又要再花大筆錢買記憶體...
: 平常根本用不到這麼多記憶體...
: 謝謝各位好人們...
--
失憶 是生物個體對於創痛
無法承受 卻又無法逃避的一種生存機制
--
※ 發信站: 批踢踢實業坊(ptt.cc)
◆ From: 61.71.94.220
推 WYchuang:原po說他要"分析",不會是用肉眼分析吧 XD 10/18 15:14
※ 編輯: bigmoun 來自: 61.71.94.220 (10/18 17:24)
推 cruise:問題在於,原PO要不要自己coding來分析吧,如果不是自己寫 10/18 23:43
→ cruise:而是用既有的套裝軟體,那麼RAM不夠應該很正常... 10/18 23:44
推 gwliao:....對, 不能自己coding的話, 應該只能加RAM. 10/19 13:05