PTT評價

[問題] 挑戰:把600GB的零碎資料放進NAS最速解

看板Storage_Zone標題[問題] 挑戰:把600GB的零碎資料放進NAS最速解作者
kisscrystal
(kisscrystal)
時間推噓16 推:16 噓:0 →:24

我有一支 Gen3 NVME SSD,裡頭有 600GB 的零碎檔案,磁碟格式是 exFAT。

打算把資料放進 QNAP NAS。

NAS 裡有兩個 NVME 槽,其中一個也插了一支同型號的 SSD。

想透過最快的作法把資料複製進去。

目前試過幾種作法:

一、SAMBA 或 FTP
區網速度是 GbE,理論傳輸時間是大於 100 分鐘。
實際上,花了兩小時多,只傳輸了一半。

二、HBS+
花了三小時。
我不確定 HBS+ 是不是透過 rsync,理論上第一次應會比 SAMBA/FTP 慢才對。

三、用外接 USB 的方式
透過 NAS 的檔案管理員直接複製,每次途中都會中斷重開機,不會自動覆傳。

四、把 exFAT NVME 直接內插 NAS
成功試過一次這麼做,NAS 的檔案總管自動掛載,可以寫入。
但也就只有那麼一次,那次還來不及試傳輸速度,就拔出來了。
我忘了該支 exFAT 最初是用 Mac 或 Windows 格式化的,
總之之後用別支 exFAT 插入,可以成功被辨識為硬碟,但無法辨識為 Volume,
也就是無法用 NAS 的檔案總管存取。

五、目前想不到其它作法



之後常需要這麼做,所以不是這次完成即可。

想問問板上的賢拜們,有沒有推的最佳解呢?
如果方法四能成行.應該就會是最快的。

但 QNAP NAS 對於「內置」 exFAT 磁碟的相關資訊,似乎有點模糊。

--

※ PTT 留言評論
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 125.231.193.27 (臺灣)
PTT 網址

huahua0603 10/17 20:32dd bs=1M

tyf99 10/17 21:02iSCSI

losts 10/17 22:11s牌usbcopy吧 。會斷是供電不足吧..

potsunglo 10/17 22:34睡覺前丟下去,明天早上就好了,這樣?

okgogogo 10/17 23:59外接 m2 我都長時間接著用耶,外接盒太爛嗎

Cubelia 10/18 00:04rsync -avnc

Cubelia 10/18 00:05要從網路共享資料夾拉進去建議用Teracopy之類軟體

Cubelia 10/18 00:06要保證完整性就加verify傳輸順便生成hash值

birdy590 10/18 07:32無解 大量小檔是 NAS 的罩門 4F說的方法最簡單~

SRNOB 10/18 08:23SAMBA Fastcopy

ppon 10/18 09:07推1F 小碎檔用block方法備份不用管檔案結構 備份最

ppon 10/18 09:07

heymike 10/18 14:56打包成zip或7z 分四到六包 包好後傳到NAS

heymike 10/18 14:58再用NAS自己檔案總管 解開

litwild 10/18 15:51不能平常就同步,一定要一次600G ?

orzero 10/18 17:49內網1g usb5g 要麼都拆下pc處理 要麼看外接usb找有

orzero 10/18 17:49獨立供電方式

a0193143 10/18 20:31NFS

phoque 10/18 21:14tar起來傳過去再tar解開

prussian 10/18 21:27複製檔案能搞到重開機太強了吧

filiaslayers10/19 00:05用winrar的無壓縮打包

are2 10/19 00:38別想太多 瓶頸終究是HDD的隨機寫入

maniaque 10/19 09:56fastcopy

ijwbg 10/19 12:06換一台全nvme的nas或有nvme當快取的nas可行嗎?

wei115 10/19 21:21dd真的好用

righer 10/20 08:53能另外開電腦 就fastcopy +1

dsin 10/20 15:15有Gb級的網路 那瓶頸就在碎檔的讀取跟寫入 沒什麼快

dsin 10/20 15:16的方法 就是放著給他傳了 除非只是要備一份那打包壓

dsin 10/20 15:16縮才有縮短時間效果

spfy 10/20 18:29我覺得不管怎麼處理最終的總耗時大概不會差太多 從

spfy 10/20 18:29關鍵處理比較可行 例如希望人不用在電腦前或要盡快

spfy 10/20 18:29移動裝置卸除就打包進NAS讓它自己解壓縮 想要降低N

spfy 10/20 18:29AS運算資源就FC放著複製 想要不專用太多頻寬就檔案

spfy 10/20 18:29總管複製 這大概最慢...

saito2190 10/20 21:31Fastcopy區網拖過去 睡一覺起來搞定

jhjhs33504 10/21 02:55用新的掛載指令跟rsync 參數就問GPT一下

jhjhs33504 10/21 02:56不同OS支援的指令都不太一樣

jhjhs33504 10/21 02:58第四種方法不曉得開虛擬機來往的開銷大嗎?

jhjhs33504 10/21 03:06看需求如果可以不verify會更快

skywgu 10/21 07:12fastcopy +1