Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

thanhtung08

Well-Known Member
Ðề: Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

Ý kiến cá nhân của mình thế này.
Thứ nhất, trừ phi bạn còn dùng máy vào việc gì khác, chứ nếu chỉ sd cho chứa data thì nên cài Windows server 2012 R2 cho máy chạy ổn định và qua đó dữ liệu quý của mình cũng an tâm phần nào.
Thứ hai, cho đến bây giờ mà nói snapRaid với flexRaid (pooling only) là the best cho lưu trữ dữ liệu trong gia đình hiện nay. Snapraid nghe nói mới ra version 10 tốc độ sync lên tới 1350 MB/s rất đáng giá cho những ai lưu trữ nhiều. Lúc mới đầu dùng Snapraid bằng lần tôi sync cũng phải hơn 30h mới xong cho hơn 100TB data, giờ chỉ còn trên dưới 3h. Hy vọng lên V.10 sẽ còn nhanh hơn.
Tôi đang dùng bản cũ của Flexraid. Nghe nói upgrade lên phiên bản mới phải trả tiền nên cũng ko muốn thử. Thật ra với tôi cái version cũ cũng đã đạt yêu cầu rồi. Nghe nói DrivePool cũng rất tốt khi đi đôi với SnapRaid.

PS. Nghe ông anh ở Úc giới thiệu beer Foster của Úc ngon chưa có dịp thử. Giờ lại nghe Becks ha..ha... bắt đầu thấy miệng nó lạt lạt rồi đó...
Ừa khi nào qua chơi thì cứ hú mình tiếng.

Không hiểu sao cái snapRaid của mình nó sync chỉ tầm 200MB/s mình xài HDD là WD Enterprise 3TB đó, the top of the range của WD mà bèo quá. Hơn
$300 cho 1 em mà thấy oải ghê.

Mình thì có sẵn 1 con Synology 1812+ rồi, còn cái máy là mình chỉ lưu những thứ mà mình không share cho cả gia đình coi được thôi. hehe.

Tốc độ copy qua LAN always 110MB/s. Đang tính giải pháp cho cái snapraid lưu cái parity trên đó đây cho đỡ tốn thêm 1 ổ cứng. Trên con synology đã sử dụng chế độ bảo vệ cho phép 2 HDD failed rồi.
 
Ðề: Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

Không hiểu sao cái snapRaid của mình nó sync chỉ tầm 200MB/s mình xài HDD là WD Enterprise 3TB đó, the top of the range của WD mà bèo quá. Hơn
$300 cho 1 em mà thấy oải ghê.

Mình thì có sẵn 1 con Synology 1812+ rồi, còn cái máy là mình chỉ lưu những thứ mà mình không share cho cả gia đình coi được thôi. hehe.

Tốc độ copy qua LAN always 110MB/s. Đang tính giải pháp cho cái snapraid lưu cái parity trên đó đây cho đỡ tốn thêm 1 ổ cứng. Trên con synology đã sử dụng chế độ bảo vệ cho phép 2 HDD failed rồi.
Tốc độ sync trên cái máy nhà tôi cũng cỡ đó thôi bạn. Theo tôi biết muốn nhanh thì chủ yếu đầu tư vào RAM. Như hiện nay máy tôi gắn 16GB. Tôi đã thử sync và so sánh giữa hdd 7200 và 5900 thấy gần như nhau.
Dùng parity như bạn quả là ý tưởng độc đáo. Nhưng có lẽ trong lúc sync mạng nhà sẽ bị slow down.
 

thanhtung08

Well-Known Member
Ðề: Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

Tốc độ sync trên cái máy nhà tôi cũng cỡ đó thôi bạn. Theo tôi biết muốn nhanh thì chủ yếu đầu tư vào RAM. Như hiện nay máy tôi gắn 16GB. Tôi đã thử sync và so sánh giữa hdd 7200 và 5900 thấy gần như nhau.
Dùng parity như bạn quả là ý tưởng độc đáo. Nhưng có lẽ trong lúc sync mạng nhà sẽ bị slow down.

Ram máy mình là 32GB nên mình nghĩ không phải là do RAM.
Về cái snapRaid, mình đang gắn 6xHDD 3TB, lấy 1xHDD ra làm parity tức là còn 5xhdd for pooling space. Nhưng mà cái thằng SnapRaid cứ đòi thêm 1 ổ nữa cho parity hoài. Cái log của nó nè, "WARNING! With 5 disks it's recommended to use two parity levels."
Mình có thể ignore nó được không bác? Mình cũng thử xài cái Elucidate cho cái UI trực quan hơn.

"
C:\Snapraid>snapraid.exe sync
Self test...
Loading state from E:/HDD_Folder/Disk2/SnapRAID.content...
WARNING! With 5 disks it's recommended to use two parity levels.
Scanning disk d0...
WARNING! Ignoring special 'system-directory' file 'E:/HDD_Folder/Disk2/_flxr_'
Scanning disk d1...
WARNING! Ignoring special 'system-directory' file 'E:/HDD_Folder/Disk3/_flxr_'
Scanning disk d2...
WARNING! Ignoring special 'system-directory' file 'E:/HDD_Folder/Disk4/_flxr_'
Scanning disk d3...
WARNING! Ignoring special 'system-directory' file 'E:/HDD_Folder/Disk5/_flxr_'
Scanning disk d4...
WARNING! Ignoring special 'system-directory' file 'E:/HDD_Folder/Disk6/_flxr_'
Using 74 MiB of memory for the FileSystem.
Initializing...
Saving state to E:/HDD_Folder/Disk2/SnapRAID.content...
Saving state to E:/HDD_Folder/Disk3/SnapRAID.content...
Saving state to E:/HDD_Folder/Disk4/SnapRAID.content...
Saving state to E:/HDD_Folder/Disk5/SnapRAID.content...
Saving state to E:/HDD_Folder/Disk6/SnapRAID.content...
Saving state to E:/HDD_Folder/Disk1/SnapRAID.content...
Verifying E:/HDD_Folder/Disk2/SnapRAID.content...
Verifying E:/HDD_Folder/Disk3/SnapRAID.content...
Verifying E:/HDD_Folder/Disk4/SnapRAID.content...
Verifying E:/HDD_Folder/Disk5/SnapRAID.content...
Verifying E:/HDD_Folder/Disk6/SnapRAID.content...
Verifying E:/HDD_Folder/Disk1/SnapRAID.content...
Syncing...
Using 48 MiB of memory for 32 blocks of IO cache.
Nothing to do
"
 
Ðề: Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

Oh... với chỉ có 6HDD mà dùng tới 32GB RAM là dư quá rồi. Bạn đang dùng SnapRaid version nào vậy? Nghe nói sau này thuật toán Sync có thông minh hơn, tức là nó sẽ kiểm tra xem nếu file/ folder/ HDD nào ko thay đổi so với lần sync trước thì nó sẽ bỏ qua. Chỉ tính toán với những thay đổi mới xảy ra thôi do đó thời gian sync nhanh hơn nhiều mà lại đỡ hư hao các HDD.
Cuối cùng, cứ mỗi 4 data disks thì phải dành cho nó 1 parity disk. Ai có dữ liệu quý tôi thấy họ tuân thủ theo cái rule (RAID5) này dữ lắm. Mình thì tiết kiệm và tận dụng, cứ bị cảnh báo hoài. Máy tôi cũng bị nhưng cứ lơ đi.
Không biết Elucidate sau này có cải tiến gì ko, tôi đã thử cách đây hơn 2 năm thấy rất tệ nên bỏ tới giờ. Tôi có viết vài script đơn giản, khi muốn sync hay scrub thì cứ việc cho chạy chúng, ko cần phải nhớ và gõ lại mấy lệnh này.
 

thanhtung08

Well-Known Member
Ðề: Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

Mình đang xài là SnapRaid 10. Bác có thể share cái script được không? Cảm ơn bác trước.

Cái máy này thật ra là cái máy dùng thường ngày. chứ không phải spare PC để làm nas. thấy cái main support 10 STATA ports nên bỏ hdd vô để lưu trữ thêm.
Chứ bình thường là xài SSD 1TB với con M.2 samsung pro cho OS.
 

latruong

Member
Ðề: Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

Em thì thấy SnapRaid nó ghi như thế này

Parities Data disks
1/Single Parity/RAID5 2 - 4
2/Double Parity/RAID6 5 - 14
3/Triple Parity 15 - 21
4/Quad Parity 22 - 28
5/Penta Parity 29 - 35
6/Hexa Parity 36 - 42

Em thấy có 4 HDD Data trở lại thì dùng 1 HDD Parity với dung lượng =Max(HDD data). Trên 5 HDD Data thì dùng 2HDD Parity. Theo kinh nghiệm của em thì dùng Parity đúng với yêu cầu thì việc Recovery khi có sự cố mới có hiệu quả.
 

toanmht

New Member
Ðề: Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

Mình đang xài là SnapRaid 10. Bác có thể share cái script được không? Cảm ơn bác trước.

Cái máy này thật ra là cái máy dùng thường ngày. chứ không phải spare PC để làm nas. thấy cái main support 10 STATA ports nên bỏ hdd vô để lưu trữ thêm.
Chứ bình thường là xài SSD 1TB với con M.2 samsung pro cho OS.

Bác sài SSD 1TB? hoành quá bác ơi ..
 
Ðề: Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

Mình đang xài là SnapRaid 10. Bác có thể share cái script được không? Cảm ơn bác trước.

Cái máy này thật ra là cái máy dùng thường ngày. chứ không phải spare PC để làm nas. thấy cái main support 10 STATA ports nên bỏ hdd vô để lưu trữ thêm.
Chứ bình thường là xài SSD 1TB với con M.2 samsung pro cho OS.

Chiện nhỏ, để cuối tuần này rảnh mình sẽ gửi cho files cho bạn
 

toanmht

New Member
Ðề: Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

Mình đang xài là SnapRaid 10. Bác có thể share cái script được không? Cảm ơn bác trước.

Cái máy này thật ra là cái máy dùng thường ngày. chứ không phải spare PC để làm nas. thấy cái main support 10 STATA ports nên bỏ hdd vô để lưu trữ thêm.
Chứ bình thường là xài SSD 1TB với con M.2 samsung pro cho OS.

Bác cho xin model con main 10 port SATA với ah!
 

vippro789

Banned
Ðề: Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

tks các bạn nhiu
 

pioneer700

New Member
Ðề: Làm thế nào để xây dựng, bảo vệ và quản lý kho dữ liệu HD hiệu quả nhất

Quá công phu, bây h mới biết. Một lần nữa cám ơn bác chủ nhé! Chắc em chỉ áp dụng được một phần thôi, vì thiết bị có hạn!;))
 

ds2k

Active Member
Em dùng NAS buffalo 6 ổ và đã bỏ software RAID5 để chuyển sang dùng snapraid. Cảm ơn bác chủ đã chia sẻ và hướng dẫn về snapraid.
 

dungsin_lqd

Well-Known Member
-Đang xem lại bài viết này...xin bác chủ gửi phần mềm SnapRAID và sửa lại hình. Cảm ơn!
 

member_lpc

New Member
Cho mình hỏi. Mình dùng Synology DS115j. Trước đây mình vào app dscam trên android bình thường. Sau mình thay ổ thì ko thể login được nữa. Trên web quickconnect vẫn vào được. Bạn nào có thể giúp mình được ko?
 

letienvy

Member
@Thanksforsharing
Trước hết cảm ơn Bác rất nhiều, nếu được bác cập nhật giúp mấy tấm ảnh với ạ, ảnh bị die rồi ạ.
Với lại nhờ bác tư vấn giúp em em case chứa tầm 10 HDD trở lại ạ.
 

tbn2004

Active Member
Em mới lụm cái SilverStone Kublai KL04B Black trên taobao có hơn 800k thôi pác, hài lòng vô cùng. Rộng rãi, vững chải, 10 HDD 3.5; 6HDD 2.5; fan 120mm êm ru.
 
Bên trên