Daten Chaos beseitigen ...

  • Hallo zusammen,

    ich habe mich heute Vormittag mal drangesetzt, um auszuloten, wieviel Festplatten Platz ich denn wohl für mein NAS-Laufwerk benötige. -ich glaube, dass stand irgendwo auf der Ugreen Seite im Netz :/.

    Die erste Frage dich ich mir nach 15 Minuten gestellt haben war "Warum habe ich das bloß getan" :huh:

    Die zweite und dritte Frage war dann:

    :?: Wie und mit welchen Tool´s führe ich denn nun aus den sechs externen Festplatten und div. USB-Sticks, meine Daten zusammen und sortiere dann im Nachgang die Dubletten aus?

    :?: Und wie stelle ich sicher, dass eine Dublette auch wirklich eine Dublette ist? - zum Glück haben wir nicht so viele Bilder im Archiv, dafür aber Unmengen an Dokumenten.

    Der einzige Lichtblick ist, dass das Ablagesystem schon klar ist, da ich auf der Firma mit der P-A-R-A Methode und einem Inbox Ordner ganz gut klarkomme.

    So und nun kommt ihr ins Spiel, da ich denke, dass ihr seinerzeit genau vor der gleichen Herausforderung gestanden habt. Ich würde mich freuen, wenn ihr mir etwas in die Spur helfen könntet:?:

    ### Ich könnte es mir auch leicht machen, und alles stumpf in einen Ordner stopfen, aber leicht kann ja jeder :D und es kostet Plattenplatz, den ich nicht so richtig habe, da meine NAS-Konfiguration zwei NVME´s und zwei 2 TB SSD beinhalten soll.

    Fritzbox 6660 - Cabel | DXP 4800 Plus | Speicher 1 x Samsung 8 GB & 32 GB Kingston KVR56S46BD8-32 | Raid 1- Vol1; 2 x Kingston SNV3S 2TB | Raid 1- Vol 2; 2 x 4 TB 870 EVO 4TB (2,5")

  • Go to Best Answer
  • Sorry, aber wieviel Daten du da auf irgendwelchen Platten und USB-Sticks verteilt hast, und was davon doppelt ist, kannst nur du selber wissen. Da gibt es keine Tools für ^^
    Natürlich solltest du vor einem NAS-Kauf wissen, wieviel das ist und was da jährlich hinzu kommt.

    Ugreen NAS DPX4800Plus, UGOS 1.18.1.0098, 2x Samsung 990 EVO Plus NVMe M.2 SSD 2 TB Raid1, 3*Toshiba MG10ACA20TE HDD 20TB Raid5, 64GB RAM -> 2 x Crucial DDR5 RAM 32GB 4800MHz SODIMM
    DS1522+ | DSM 7.4.1-90080 (Final) | 40 GB RAM | 3 x WD 14TB WD140EFGX Red Plus SHR, 2 x M.2-Samsung 980 Pro SSD 1TB SHR
    DS415+ | DSM 7.1.1-42962-9 (Final) | 8 GB RAM | 3 x WD 6TB WD60EFRX Red Raid5, 1 x SSD Intel 128GB Basic

  • Sorry, aber wieviel Daten du da auf irgendwelchen Platten und USB-Sticks verteilt hast, und was davon doppelt ist, kannst nur du selber wissen.

    Hallo Benares,

    wie Recht Du doch hast. Es sind zusammen bummelige 5,4 TB inkl. E-Mail Sicherungen über Mail-Store.

    Fritzbox 6660 - Cabel | DXP 4800 Plus | Speicher 1 x Samsung 8 GB & 32 GB Kingston KVR56S46BD8-32 | Raid 1- Vol1; 2 x Kingston SNV3S 2TB | Raid 1- Vol 2; 2 x 4 TB 870 EVO 4TB (2,5")

  • Dann würde ich gleich auf 12TB HDDs gehen, dann hast Du mal eine gute Zeit Deine Ruhe. Später kannst Du die HDDs ja immer noch vergrößern.

    Wieviele HDDs hängt natürlich vom NAS ab und welches Raid Du anstrebst.

    Was für eine DXP wird es denn?

    Meine Hardware

    iDX6011 Pro (64GB RAM) btrfs, 2x12 TB SG Enterpr. Raid1, 1x12TB SG Enterpr. Basic, 2x 2TB NVME Lexar NM790 Raid1,

    DXP2800 btrfs 1x 12TB WDRedPl, 16GB RAM Crucial CT16G56C46S5.C8B2, NVME 2x 500GB Samsg. 970 EVOPlus Raid1,

    DS1525+, btrfs 2x8TB WD, btrfs SHR, 1x 12 TB SG IronWolf, 1x 3TB WD RedPlus, 2x 2TB NVME Lexar NM790 Raid1, 40GB ECC RAM

    DS218+ btrfs 1x12TB WD, 1x SSD 500GB, RAM 20GB DDR4-2666MHZ

    USV US3000, EatonEllip.PRO 850DIN, Zyxel XMG-108 8 x 2,5GB, Zyxel GS1200-8 x 1GB,

  • Dann nimm ein NAS mit 2*2TB NVMEs für die Apps und den ganzen Kleinkram und noch zwei HDDs ab 8TB im Raid1 (also 8TB netto), für die größeren Dinge. Anregungen findest du ja in den Signaturen der meisten Anwender hier.

    Ugreen NAS DPX4800Plus, UGOS 1.18.1.0098, 2x Samsung 990 EVO Plus NVMe M.2 SSD 2 TB Raid1, 3*Toshiba MG10ACA20TE HDD 20TB Raid5, 64GB RAM -> 2 x Crucial DDR5 RAM 32GB 4800MHz SODIMM
    DS1522+ | DSM 7.4.1-90080 (Final) | 40 GB RAM | 3 x WD 14TB WD140EFGX Red Plus SHR, 2 x M.2-Samsung 980 Pro SSD 1TB SHR
    DS415+ | DSM 7.1.1-42962-9 (Final) | 8 GB RAM | 3 x WD 6TB WD60EFRX Red Raid5, 1 x SSD Intel 128GB Basic

  • :?: Wie und mit welchen Tool´s führe ich denn nun aus den sechs externen Festplatten und div. USB-Sticks, meine Daten zusammen und sortiere dann im Nachgang die Dubletten aus?

    dupeGuru
    dupeGuru is a cross-platform (Linux, OS X, Windows) GUI tool to find duplicate files in a system. It’s written mostly in Python 3 and has the peculiarity of…
    dupeguru.voltaicideas.net
    Meine Hardware


    • DXP6800PRO | 2 x CT16G48C40S5.M8A1 16 GB 4800 MHz | 3 x Seagate ST12000VN0008-2YS101 12TB | 3 x Samsung SSD 870 EVO 1TB | 4 x Samsung SSD 990 PRO 2TB

  • Vielleicht kann man das „Chaos“ mit der Anwendung „AllDup“ beseitigen. Nutzte (und immer noch, wenn es benötigt wird) ich bei meiner Bereinigung. Geht für MP3s oder Dokus oder auch Bilder. Man muss nur zusehen das man das was machen durchsuchen will, vielleicht auf ein Medium rauf packt, die Anwendung dann einstellt, einen Testlauf durchführen, ggf. nachschärfen und los geht es. Ja, zeitlicher Aufwand vorhanden, aber immer noch besser als Datenlasten x-fach mitzuschleppen.

  • Was für eine DXP wird es denn?

    Hallo eineb,

    es soll eine 4800 Plus werden (z.Zt. liegt die im Preis ja ganz gut), die mit zwei 2TB NVME´s im Raid 1 für das ganze Programmgeraffel und Paperless (wobei ich immer noch Grubel, ob ich den Media-Ordner nicht doch auslagere? siehe Variante 1.). Dann dachte ich mir:

    1. dass ich noch zwei SSD mit 2 TB dazu nehme für die reinen Daten im Raid 1 oder eine 4 TB im Raid 0, die ich dann im Nachgang mit einer zweiten ergänze um beide dann im Raid 1 zu betrieben.

    2. Alternativ überlege ich noch, ob ich drei 2 TB SSD´s nehme im Raid 5 um dann auf $TB nutzbares Volumen zu kommen. EInen Slot hätte ich dann noch für eine HDD frei zur reinen Backupablage, wobei ich noch eine 2 TB externe HDD habe.

    3. Ich nehme die Variante 1. und schiebe bis auf weiteres noch zwei HHS´s mit jeweils 1 TB von Samsung HD103SJ aus meinem Museum zur reinen Backupspeicherung mit rein.

    Wie Du siehst, habe ich mir schon eine Murmel gemacht, aber wie wir ja schon festgestellt haben, sind die Speicher- und Festplattenpreise gerade nicht so richtig geil. und niemand weiß, ob es sich lohnen würde bis Ende November auf die Cyber-Weeks zu warten.


    Beste Grüße aus Hamburg,

    Stefan

    Fritzbox 6660 - Cabel | DXP 4800 Plus | Speicher 1 x Samsung 8 GB & 32 GB Kingston KVR56S46BD8-32 | Raid 1- Vol1; 2 x Kingston SNV3S 2TB | Raid 1- Vol 2; 2 x 4 TB 870 EVO 4TB (2,5")

  • Ach was, lass das. Mit der DXP4800plus (übrigens gute Wahl) hast du 2 NVME-Slots und 4 für HDDs/SSDs.
    Setz das NAS erstmal mit 2 2TB-NVMEs im Raid1 für die Apps und Kleinkram auf, damit kommst du schonmal recht weit, und nutze die HDD-Slots später nur mit HDDs für die Massendaten.
    HDDs und SSDs in einem Pool mischen geht eh nicht.

    Ugreen NAS DPX4800Plus, UGOS 1.18.1.0098, 2x Samsung 990 EVO Plus NVMe M.2 SSD 2 TB Raid1, 3*Toshiba MG10ACA20TE HDD 20TB Raid5, 64GB RAM -> 2 x Crucial DDR5 RAM 32GB 4800MHz SODIMM
    DS1522+ | DSM 7.4.1-90080 (Final) | 40 GB RAM | 3 x WD 14TB WD140EFGX Red Plus SHR, 2 x M.2-Samsung 980 Pro SSD 1TB SHR
    DS415+ | DSM 7.1.1-42962-9 (Final) | 8 GB RAM | 3 x WD 6TB WD60EFRX Red Raid5, 1 x SSD Intel 128GB Basic

  • schiebe bis auf weiteres noch zwei HHS´s mit jeweils 1 TB von Samsung HD103SJ aus meinem Museum zur reinen Backupspeicherung mit rein.

    Edit: Fehler,-> gestrichen.

    Insgesamt spare nicht zu sehr mit Speicherplatz, Würde ich in jedem Fall gleich eine 4TB SSD nehmen und dann später noch auf ein Raid erweitern.

    Meine Hardware

    iDX6011 Pro (64GB RAM) btrfs, 2x12 TB SG Enterpr. Raid1, 1x12TB SG Enterpr. Basic, 2x 2TB NVME Lexar NM790 Raid1,

    DXP2800 btrfs 1x 12TB WDRedPl, 16GB RAM Crucial CT16G56C46S5.C8B2, NVME 2x 500GB Samsg. 970 EVOPlus Raid1,

    DS1525+, btrfs 2x8TB WD, btrfs SHR, 1x 12 TB SG IronWolf, 1x 3TB WD RedPlus, 2x 2TB NVME Lexar NM790 Raid1, 40GB ECC RAM

    DS218+ btrfs 1x12TB WD, 1x SSD 500GB, RAM 20GB DDR4-2666MHZ

    USV US3000, EatonEllip.PRO 850DIN, Zyxel XMG-108 8 x 2,5GB, Zyxel GS1200-8 x 1GB,

    Edited 2 times, last by eineb (October 19, 2025 at 5:59 PM).

  • Hi!

    Ich stand vor einem ähnlichem Problem und habe mir die Mühe gemacht alles mit Alldup zu vergleichen.

    Ich hab also mit einer (für mich :whistling:) logischen Methode die Platten verglichen.
    Die größte Platte mit allen anderen verglichen. Die Größte beiseite gelegt sowie die Daten der anderen auf so wenig wie mögliche zusammengezogen. Und so weiter und sofort.


    Es hat sich definitiv gelohnt, da ich wesentlich weniger Speicher benötige als ich zu beginn vermutete.

    Ohne Backupstragie häuft man ne Menge Dupletten an, zumindest war es bei mir so. Gefühlt wollte ich ne 12TB Platte kaufen als externe Backup Platte. Gelandet bin ich nun bei ner 8TB auf der noch einiges an Platz ist.

    Meine Hardware


    DXP4800 + | 1x 32GB Crucial DDR5 RAM 32GB 5600MHz (CT32G56C46S5) | 2x 8TB Ironwolf@5400rpm | 2x 2TB Samsung 990 EVO
    • UGREEN 120W USV US3000

    • UniFi Cloud Gateway Ultra | UniFi Access Point U6+

Participate now!

Join our community with over 10,000 members!

Register yourself now for free to get full access to all content, graphics, downloads and other exclusive features!