[問題] Google Drive下載1~2TB大檔案失敗

[kci9kimo (leecat)]

大家好,

網路環境是Hinet 100M/40M

Google Drive是教育板

下載電腦是Win10透過遠端桌面操作，空間是透過iscsi連線到ubuntu tgt提供的空間

幾個月前，硬碟出現壞軌，所以用ddrescue 把硬碟做成映像檔

檔案有兩個，大小分別是1TB跟2TB，通時掛兩個硬碟.....囧

一次壞兩個真的蠻傷的，那時候硬碟又貴貴的，想說先丟到Google Drive

上傳是透過rclone，沒啥問題，checksum檢查應該也是對的

下載的時候試過幾個方法

1 .rlone失敗，感覺是流量限制

2. backup and sync，跑得時候硬碟空間有變小，但是兩天後空間又回來了

   雖然程式還在跑，但是感覺像是之前下載的失敗了，又重來

3. Google Drive Stream，昨天晚上丟下去跑，用windows 複製檔案方式

   早上出現複製檔案錯誤ms-dos功能無效

   另外我也很異想天開的，裝ftp server，路徑指向串流資料夾，結果當然是抓不到...

4. Google Drive原本的同步程式，這個跑一晚，隔天看程式就自己關掉了

AirExplore就沒試了感覺會跟rclone差不多，還是應該要試一下?

目前卡的點是檔案真的太大，有1TB跟2TB，目前嘗試的都沒續傳功能，一次失敗就要重來

請問各位先進，有什麼好的方式可以有續傳功能的嘛？

另外我需要把網路限速嘛？避免單日流量太高

還是有其他更好的方法可以下載單一大檔案

感謝!!

----題外話----

這次空間怎麼來的，因為最近又壞了一個1T的硬碟，好死不死這個是LVM裡面的硬碟

想說把壞軌掃一掃MARK起來，再來用PVMOVE移除硬碟，我錯了，掃一掃就葛屁了

後來買了一個2TB的硬碟，改一下UUID，重新加回去，檢查檔案系統，被帶走3TB的資料..

所以現在有很多空間，可以把之前的檔案拉回來，只是真的不太順利，拜託大家了

LVM是一種可以把多個硬碟當作一個硬碟用的好東西，原本總和大小是6TB

----最後結果----

更新一下最後結果，用AirExplorer慢慢拉完了，怕被Ban所以速度弄很慢，遠低於8MB

2T+1T的檔案，拉超級久

--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 114.42.129.170
※ 文章網址: https://www.ptt.cc/bbs/Free_box/M.1506992608.A.0B6.html
推 l98: https://goo.gl/xsN5CC 這個討論串有教RCLONE限流，也確實有
→ l98: 成功，但妳要抓個兩三天就是XD
→ victor21813: air explorer支援續傳 可以踹踹
感謝兩位大大的回應，結合兩位的意見，從討論串看來一天有750GB的限制

流量最好是8MB/s比較穩妥，由於前幾天有跑，可是不知道跑多少流量去了

現在用AirExplorer設定每秒3MB/s 慢慢跑，等明天再調成8MB/s，希望這次順利

這樣我很好奇，用Google放出來的程式，一樣有這限制嘛？

翻到的資料都沒提到，確定有流量限制是分享或者用rclone之類的程式有

※ 編輯: kci9kimo (114.42.129.170), 10/03/2017 12:22:35
※ 編輯: kci9kimo (114.42.129.170), 10/03/2017 12:43:51
→ sigurose: 程式會自動關閉的是Backup and Sync、還是原本的Google
→ sigurose: Drive桌面版？
會自動關閉的是Google Drive桌面版，大概不到24hr，右下角icon就不見了

Backup and Sync跑快兩天都還在，只是真的怪怪的，我其實找不到暫存檔案在哪裡

只能從硬碟的容量去判斷  https://i.imgur.com/MrrGu42.png 判斷現在可能進度

我記得最後一眼看到剩餘容量不到1TB，然後又全部空回來了
※ 編輯: kci9kimo (114.42.129.170), 10/03/2017 14:49:10
→ l98: 看有沒有勇者去試，有一陣子沒去追這個話題了! 畢竟一天會下
→ l98: 載到750gb的人算少數吧!
→ l98: Backup and Sync 我目前遇到是安裝完，不確定是安裝ms更新檔
→ l98: 還是被內建ms防毒砍掉，就莫名其妙程式消失，要重新安裝，但
→ l98: 重新安裝完軟體後，不需再重新設定就是。目前案例就兩個!
裝Backup and Sync的系統是win 10 pro，完整update，只有裝文書軟體

是沒遇到突然消失的狀況

推 r1239386: 一天上傳超過750G會斷 昨天測試過 下載還沒測試
請問使用的上傳程式是Google放出來的嘛？如果是的話，看來不管用啥24hr就是750G

後來設定下載速度超慢，只有3MB左右，大概還要下載兩天多，讓他慢慢跑.希望拉的下來
※ 編輯: kci9kimo (114.42.129.170), 10/04/2017 01:03:15
推 r1239386: 我用smartftp傳的
推 victor21813: 750GB上傳限制是確定的 下載我記得不只750GB
→ lonewind220: 下載應該可以超過1T，不過我沒有單檔超過1T的
之前用rclone拉過一次檔案，只是忘記是拉1TB，還是2TB，比較有可能應該是1TB

出現錯誤訊息，然後跑一個網頁出來

https://support.google.com/a/answer/1071518

那時候看到這網頁嚇死了，他的Bandwidth limits也太低，然後就一直放著到現在

下次有一樣的狀況，需要上傳的話，應該會把檔案切一切在放上去，不然下載真的痛苦
※ 編輯: kci9kimo (114.42.129.170), 10/04/2017 11:57:28
→ ak77now: 這網頁好像是mail的流量限制是嗎?google drive的沒這麼低
他網頁其實寫的不清不楚，第一個表格是透過網頁下載/上傳，第二個表格是透過POP/IMAP

翻到另外一個說明"Sync limits for accounts"，裡面也都是跟mail有關的協定

看來應該真的是限制mail的
※ 編輯: kci9kimo (114.42.129.170), 10/04/2017 22:27:16
→ ak77now: 其實我之前發文也是以為網頁的是Google Drive限制
→ ak77now: 也是板友推文提醒我說應該是mail的
※ 編輯: kci9kimo (114.42.152.71), 10/16/2017 20:59:52