2x NVMe als RAID1 (Btrfs), 4x HDDs als RAID5 (ext4)

  • Hi zusammen,

    danke für das Forum, ich bin seit gestern dazugekommen und freue mich darauf hier was zu lernen und hoffentlich auch einiges beitragen zu können.

    Ich wechsele gerade von einer Synology DS720+ zu einem Ugreen DXP4800 Plus.

    Mein Setup besteht aktuell aus:
    2x Samsung 980 Pro 2TB
    4x Seagate IronWolf 24TB

    Heute abend erhalte ich noch:
    Crucial DDR5 RAM 32GB Kit (2x16GB) 4800MHz (CT2K16G48C40S5)
    Noctua NF-A14 PWM chromax.black.swap (da mich der eingebaute Lüfter bei maximaler Drehzahl schon etwas stört, ich hoffe der Noctua hat ein anderes Klangbild)

    Ich habe die beiden NVMe SSDs als RAID1 konfiguriert mit Btrfs für Apps etc. Auf einen SSD Cache werde ich verzichten, da er sich in meinem Nutzerszenario eher nicht lohnt (bei der DS720+ hatte ich zwei 512GB NVMe als Cache und habe zu vorher keine Auswirkungen gespürt in der alltäglichen Nutzung, auch ist der Cache kaum belegt gewesen).

    Nun warte ich noch auf den RAM und Lüfter zum Einbauen bevor ich mich ans RAID5 mache.
    Das RAID5 wird hauptsächlich ein Datengrab auf das ich Videos und Fotos von unseren Kameras und Smartphones ablege (bzw. werden sie von den Kameras zuerst in die Hetzner Nextcloud hochgeladen und von da dann per WebDAV aufs NAS gesynct). Diese werden dann zusätzlich noch regelmäßig auf extern angeschlossene USB-Festplatten weggesichert.

    Musik-Dateien kommen eher aufs SSD-Volume wenn überhaupt, da ich nur noch Spotify und Tidal nutze.

    Dazu kommen noch andere Videos, die nicht gesichert werden müssen, da die unwichtig sind und nur temporär draufliegen und auch bei Verlust vernachlässigbar sind.

    Nun frage ich mich:

    Die Vorteile von Btrfs was Snapshops und Datenintegrität angeht bringen mir in meinem Fall nicht viel, ext4 wäre minimal performanter, was vernachlässigbar ist.

    Beim Stöbern habe ich woanders Kommentare dazu gelesen:

    Quote

    Ext4 has limits with inodes (your disk is full if you run out of inodes which is a fixed number when you format the drive, which could happen if you have a huge number of small files)


    Btrfs is incomplete with raid 5 & 6. Tools exist to fix file system errors but are not simple or automated.

    Quelle: https://www.howtogeek.com/filesystems-on…u-not-use-ext4/

    Der Kommentar ist von Februar diesen Jahres und gerade in Bezug auf Btrfs und RAID5 frage ich mich, was er damit meinen könnte?
    Es ist - obwohl ein UGREEN NAS abgebildet ist - nicht auf UGREEN bezogen.

    Woanders machte sich vor kurzem auch jemand die gleichen Gedanken:

    Quote

    I ask as I read that in RAID 5/6 historically Btrfs is considered unstable (due to write hole bugs); some distros still consider it experimental and not ready for production use, though stability has improved a lot.

    Quelle: https://www.reddit.com/r/UgreenNASync…6_storage_pool/

    Könnt ihr was mit den Aussagen anfangen oder habt evtl. selbst Kenntnisse was die "Unkomplettheit" und ggf. Instabilität von Btrfs mit RAID5 angeht?

    Auf der Synology hatte ich alles als ext4 und Jahrzehnte mit verschiedenen DiskStations keine Probleme, auch bei Stromausfällen nicht, alles sehr robust... daher neige ich beim UGREEN eigentlich auch dazu das RAID5 als ext4 zu erstellen und nur das SSD RAID1 als Btrfs für Snapshots und Datenintegrität, was mir beides auf dem RAID5 nicht wichtig ist.

    Macht es geschwindigkeitsmäßig beim Erstellen/Sync einen Unterschied ob ich auf dem RAID5 ext4 oder Btrfs verwende? Das 2TB RAID1 hat vorhin fürs Erstellen und Syncen schon knapp eine Stunde gebraucht trotz RAID Priorisierung. Wie lange wird das dann wohl beim RAID5 mit 24TB Festplatten dauern :)

    Vielen Dank schonmal für eure Gedanken dazu. Auf eine tolle Zeit im Forum!

    [ DXP4800+ | 2x Samsung 980 Pro 2TB | 4x Seagate IronWolf 24TB | UGOS ]

  • Hallo, da ich RAID 5 auf meinem Ugreen NAS nutze, überkam mich kurz eine gewisse Sorge, da ich von dem Problem noch nichts gehört hatte. Aber anscheinend müssen wir uns da keine Sorgen machen: BTRFS wird nur für das Dateisystem verwendet, das zugrundliegende RAID 5 wird aber vom Betriebssystem (per bewährtem mdadm) selbst verwaltet - die "experimentelle" BTRFS-Implementierung kommt nicht zum Einsatz. Zumindest hat mir das ChatGPT beruhigend erklärt, nachdem ich ein paar Befehle im Terminal abgesetzt hatte und die Ausgaben zur Verfügung stellte.

    Quote

    Du nutzt Btrfs korrekt und sicher als Dateisystem, das auf einem durch dein NAS verwalteten Volume liegt. Da das zugrunde liegende RAID nicht von Btrfs, sondern vom NAS-Betriebssystem verwaltet wird, umgehst du alle bekannten Probleme des Btrfs-eigenen RAID5/6.

    Wenn du Snapshots, Checksummen und effizientes Subvolume-Management willst (z. B. für Docker), bist du mit diesem Setup sogar sehr gut aufgestellt.

    -------
    DXP480T Plus, 2x32 GB Crucial DDR5 4800MHz, 4x4 TB Samsung 990 PRO NVMe,CyberPower USV OR650ERM1U mit RMCARD400

  • Danke, dann werde ich es wohl mal mit Btrfs auf den Platten versuchen :)

    Ich versuche grade nur meinem inneren Schweinehund auszureden einen RAID0 Verbund zu erstellen. Der verrückte Köter meint, wenn bei mir eine Platte im RAID5 abraucht brauch ich mit der Wiederherstellung nach Einbau einer neuen Platte eh länger als ein Backup in ein nochmal neu erstelltes RAID0 wieder reinzukopieren und verliere beim RAID0 nicht gleich 20+TB Kapazität wie beim RAID5... vielleicht doch nochmal ne Nacht drüber schlafen :)

    Offtopic ...

    Das kleine Upgrade ist mittlerweile auch erfolgreich abgeschlossen.

    Unspektakulärer RAM von hinten:
    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    Ohne Wärmeleitpads liefen die Samsung NVMe SSDs übrigens ziemlich genau 10°C wärmer bei 52°C:
    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    Alter Lüfter raus:
    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    Neuer Lüfter rein:
    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    Und ich liebe dieses Stummelkabel beim Noctua:
    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    Als wäre der Lüfter speziell für das UGREEN NAS entworfen worden, das Kabel passt von der Länge genau so, dass man das beigelegte Verlängerungskabel nicht braucht.

    [ DXP4800+ | 2x Samsung 980 Pro 2TB | 4x Seagate IronWolf 24TB | UGOS ]

  • Der verrückte Köter meint, wenn bei mir eine Platte im RAID5 abraucht brauch ich mit der Wiederherstellung nach Einbau einer neuen Platte eh länger als ein Backup in ein nochmal neu erstelltes RAID0 wieder reinzukopieren und verliere beim RAID0 nicht gleich 20+TB Kapazität wie beim RAID5...

    Stimmt schon, man macht das RAID > 0 allerdings primär aus Gründen der Datenverfügbarkeit und weniger aus Gründen der Datensicherheit. Denn beim RAID5 sind beim Ausfall einer Platte alle deine Daten dann erstmal noch verfügbar, während du beim Zurückspielen deines Backups erstmal warten musst, bis alles wieder an Ort und Stelle ist ;) Wenn dir das nicht wichtig ist und du ohnehin regelmäßig Backups machst, kann ich deine Überlegungen schon nachvollziehen und dann bringt dir ein höheres RAID-Level tatsächlich keinen Vorteil bei gleichzeitig weniger Speicherkapazität.


    edit: Schreib-/Lese-Geschwindigkeit kann noch ein Thema sein, aber da bin ich nicht so bewandert.

    -------
    DXP480T Plus, 2x32 GB Crucial DDR5 4800MHz, 4x4 TB Samsung 990 PRO NVMe,CyberPower USV OR650ERM1U mit RMCARD400

  • Ohne Wärmeleitpads liefen die Samsung NVMe SSDs übrigens ziemlich genau 10°C wärmer bei 52°C:

    Gut daß Du das erwähnt hast, stehe grad kurz davor diese, allerdings inkl. Deckel wegzulassen. Bei meiner DS920 + ist es genau umgekehrt, da hat das Weglassen ca. 10° weniger gebracht. Allerdings haben die Kühlpads bei der DXP Kontakt zu Metall Deckel der die Temperatur flächig ableitet.

    Kannst Du hier vielleicht noch den genauen Typ von dem verwendeten Noctua Lüfter Poste, oder den link wo man diesen findet?

    Wie hat sich der Lüfter bei Dir bemerkbar gemacht und Ist er leiser?

    Ich habe noch den original Lüfter, läuft auf aktuell auf der Einstellung Allgemein und ist bis jetzt nicht zu hören gewesen. Doch wenn es wärmer wird, kann sich das schnell ändern.

    Ich habe bisher eher an eine PureWings 2 gedacht.

    Meine Hardware

    iDX6011 Pro in Späh ^^

    DXP4800+ 2x8TB WDRedPl Btrfs Raid1 2x 2TB Lexar NM790 Raid1, 64GB RAM Kingst. KVR48S40BD8-32 DDR5/4800MH

    DXP2800 1x 12TB Seag. 1x 12TB WDRedPl, Raid1 Btrfs 16GB RAM Cruc. CT16G56C46S5.C8B2, 2x NVME Samsg,

    DS1525+ 2x8TB WD, Btrfs SHR, 2x 2TB NVME Lexar NM790 Raid1. 40GB ECC RAM_Speicher.de

    DS920+ DSM 7.3.2 Btrfs Raid1 2x8TB WD, 2x2TB Samsg. 970 EVOPlus, RAM 20GB DDR4-2666MHZ Speicher.de

    USV US3000, EatonEllip.PRO 850DIN, Switch Zyxel GS1200-8 1GB, Zyxel XMG-108 8 x 2,5GB

  • eineb ja beim DXP sind die Pads so dick, dass die auch das Metall des Deckels berühren. Das ganze Alugehäuse leitet nun die Wärme ab.

    Hier vorher/nachher (die HDDs sind etwas wärmer, weil sie gerade zu tun haben bzw. hatten^^):
    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.
    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    Der Noctua Lüfter ist dieser:
    Noctua NF-A14 PWM chromax.black.swap, Leiser Premium-Lüfter, 4-Pin (140mm, Schwarz)
    https://www.amazon.de/dp/B07655KF5C

    Ich habe vergessen nachzuschauen mit wieviel RPM der original Lüfter dreht. Könntest du bei Gelegenheit schauen, mit wieviel der bei "Quiet" und bei "Full power" dreht?

    Hier sind die Werte vom Noctua...

    Full power:
    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    Quiet:
    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    Der originale war bei Full power schon ein Kraftwerk, der Noctua ist zwar auch sehr hörbar, aber ich meine (kanns mir auch einbilden :D) dass er anders/angenehmer fürs Ohr pustet. Wenn's dich nicht stört, würd ich ihn erst mal nicht tauschen, ich bin schon ein Silent-Freak, man macht sich sonst nur verrückt :D

    Aber jetzt hör ich wohl den CPU Lüfter noch deutlicher raus im Zusammenspiel mit dem Noctua, der CPU-Lüfter surrt vor sich hin, *rrrrrrrrrrrrrrrrrrr*... dadurch entsteht nun der Drang nach einem neuen CPU-Lüfter zu suchen und den auch noch zu tauschen... aber ab 1 Meter ist der eh nicht mehr wahrnehmbar und der Umbau wäre mir doch zu aufwändig... ich lasse es jetzt so, bin sehr zufrieden aktuell.

    [ DXP4800+ | 2x Samsung 980 Pro 2TB | 4x Seagate IronWolf 24TB | UGOS ]

  • Ja das mit den Drehzahlen mache ich morgen im Lauf des Tages.

    Ich muß sagen, ich höre von beiden Lüfter eigentlich nichts, da muß ich schon direkt an der DXP hängen um was zu hören.

    Die Temp der NVMEs sind Akt. Im Idle bei 42°.

    Gestern habe ich 1 Win11 und zwei Linux VMs gleichzeitig exportiert, da waren es grad mal 52° und von beiden Lüfter war nichts zu hören.

    Mein WD HDDs haben ca. 32°

    Eigentlich kann ich da nicht meckern.

    Meine Hardware

    iDX6011 Pro in Späh ^^

    DXP4800+ 2x8TB WDRedPl Btrfs Raid1 2x 2TB Lexar NM790 Raid1, 64GB RAM Kingst. KVR48S40BD8-32 DDR5/4800MH

    DXP2800 1x 12TB Seag. 1x 12TB WDRedPl, Raid1 Btrfs 16GB RAM Cruc. CT16G56C46S5.C8B2, 2x NVME Samsg,

    DS1525+ 2x8TB WD, Btrfs SHR, 2x 2TB NVME Lexar NM790 Raid1. 40GB ECC RAM_Speicher.de

    DS920+ DSM 7.3.2 Btrfs Raid1 2x8TB WD, 2x2TB Samsg. 970 EVOPlus, RAM 20GB DDR4-2666MHZ Speicher.de

    USV US3000, EatonEllip.PRO 850DIN, Switch Zyxel GS1200-8 1GB, Zyxel XMG-108 8 x 2,5GB

  • Hier mal im Leerlauf über Nacht zum Vergleich, die Platten fahren nicht in den Standby bei mir. Zimmertemperaturen in dem 3m² Abstell-/Technikraum sind so um die 23-24°C zur Zeit glaube ich.

    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    [ DXP4800+ | 2x Samsung 980 Pro 2TB | 4x Seagate IronWolf 24TB | UGOS ]

  • Die Werte sind doch top.

    DS920+ DSM 7.2.2 U3: 20 GB RAM, 2 x 2 TB SSD (SHR/BTRFS), 2 x 1TB NVME M.2 (RAID1 BTRFS), DX517 4x 12 TB (SHR1/BTRFS), 1 x USB HDD 3,5" 4 TB Backup, 2,5GbE - DS415+(Backupziel): 8 GB RAM, 2x 12 TB + 2x 14 TB (SHR1/BTFRS), 2,5GbE - DS 413j (Backupziel): 4x6 TB(RAID0) - Hetzner 1 TB (Backupziel) - Cams: IPC-HFW5849T1-ASE-LED 2.8, Reolink: E1 pro - Network: ZYXEL XGS1250-12 - EATON Ellipse 650 ECO - FB 6591 (KD: 1.000 Mbit/s 50 Mbit/s) - Clients: Mac/Win/Linux

  • Ja, ich bin ja auch sehr zufrieden bisher mit meinem DXP4800 nach zwei Tagen :)
    Crucial RAM ist kompatibel und der Noctua Lüfter bringt mir ein klein wenig mehr Laufruhe rein.

    UGOS plus Docker reichen auch fürs Erste für mich vollkommen. Mal schauen was die nächsten Wochen/Monate bringen.

    [ DXP4800+ | 2x Samsung 980 Pro 2TB | 4x Seagate IronWolf 24TB | UGOS ]

  • im Leerlauf über Nacht

    Unter Last bei knapp 28° Raumtemperatur... :saint:

    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    MN5 | PVE 9.x | 80 GB | 2x SN700 1TB | 4x WD8005FFBX RAIDZ1 | 1x AirDisk 128GB (PVE Boot ZFS)

  • Wieso ist so wenig RAM cached?

    DS920+ DSM 7.2.2 U3: 20 GB RAM, 2 x 2 TB SSD (SHR/BTRFS), 2 x 1TB NVME M.2 (RAID1 BTRFS), DX517 4x 12 TB (SHR1/BTRFS), 1 x USB HDD 3,5" 4 TB Backup, 2,5GbE - DS415+(Backupziel): 8 GB RAM, 2x 12 TB + 2x 14 TB (SHR1/BTFRS), 2,5GbE - DS 413j (Backupziel): 4x6 TB(RAID0) - Hetzner 1 TB (Backupziel) - Cams: IPC-HFW5849T1-ASE-LED 2.8, Reolink: E1 pro - Network: ZYXEL XGS1250-12 - EATON Ellipse 650 ECO - FB 6591 (KD: 1.000 Mbit/s 50 Mbit/s) - Clients: Mac/Win/Linux

  • Ist mir auch schon bei mir aufgefallen , ist bei mir Zeitweise auch so, je nachdem was die DXP aktuell zu tun hat

    Meine Hardware

    iDX6011 Pro in Späh ^^

    DXP4800+ 2x8TB WDRedPl Btrfs Raid1 2x 2TB Lexar NM790 Raid1, 64GB RAM Kingst. KVR48S40BD8-32 DDR5/4800MH

    DXP2800 1x 12TB Seag. 1x 12TB WDRedPl, Raid1 Btrfs 16GB RAM Cruc. CT16G56C46S5.C8B2, 2x NVME Samsg,

    DS1525+ 2x8TB WD, Btrfs SHR, 2x 2TB NVME Lexar NM790 Raid1. 40GB ECC RAM_Speicher.de

    DS920+ DSM 7.3.2 Btrfs Raid1 2x8TB WD, 2x2TB Samsg. 970 EVOPlus, RAM 20GB DDR4-2666MHZ Speicher.de

    USV US3000, EatonEllip.PRO 850DIN, Switch Zyxel GS1200-8 1GB, Zyxel XMG-108 8 x 2,5GB

  • oder es spricht für ein gutes Cache Managment.

    DS920+ DSM 7.2.2 U3: 20 GB RAM, 2 x 2 TB SSD (SHR/BTRFS), 2 x 1TB NVME M.2 (RAID1 BTRFS), DX517 4x 12 TB (SHR1/BTRFS), 1 x USB HDD 3,5" 4 TB Backup, 2,5GbE - DS415+(Backupziel): 8 GB RAM, 2x 12 TB + 2x 14 TB (SHR1/BTFRS), 2,5GbE - DS 413j (Backupziel): 4x6 TB(RAID0) - Hetzner 1 TB (Backupziel) - Cams: IPC-HFW5849T1-ASE-LED 2.8, Reolink: E1 pro - Network: ZYXEL XGS1250-12 - EATON Ellipse 650 ECO - FB 6591 (KD: 1.000 Mbit/s 50 Mbit/s) - Clients: Mac/Win/Linux

  • Ja, das sollte dann im Cache des RAMs passieren.

    UGREEN NAS Hardware

    DXP8800 | Test verschiedener Betriebssysteme | 2 x 18 TB MG10 bzw. 1x EXOS X24 16 TB RAID5 | 2x 4 TB Lexar NM790 | 64 GB RAM Kingston 5600 MHz

  • Bei mir gehen auch aktuell nur Daten rein (Verschieben von Dateien von DS720+ zuDXP4800+) und da ist der Cache etwas mehr belegt :D

    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    [ DXP4800+ | 2x Samsung 980 Pro 2TB | 4x Seagate IronWolf 24TB | UGOS ]

  • Interessant wird es erst wenn da 2 bis 3 VMs laufen, und mit ca. 15 Container am laufen sind. Da hatte ich Zeitweise nur noch bei 64GB Gesamtspeicher nur noch rund 20 GB Frei. ca. 30GB davon waren Cache.

    Meine Hardware

    iDX6011 Pro in Späh ^^

    DXP4800+ 2x8TB WDRedPl Btrfs Raid1 2x 2TB Lexar NM790 Raid1, 64GB RAM Kingst. KVR48S40BD8-32 DDR5/4800MH

    DXP2800 1x 12TB Seag. 1x 12TB WDRedPl, Raid1 Btrfs 16GB RAM Cruc. CT16G56C46S5.C8B2, 2x NVME Samsg,

    DS1525+ 2x8TB WD, Btrfs SHR, 2x 2TB NVME Lexar NM790 Raid1. 40GB ECC RAM_Speicher.de

    DS920+ DSM 7.3.2 Btrfs Raid1 2x8TB WD, 2x2TB Samsg. 970 EVOPlus, RAM 20GB DDR4-2666MHZ Speicher.de

    USV US3000, EatonEllip.PRO 850DIN, Switch Zyxel GS1200-8 1GB, Zyxel XMG-108 8 x 2,5GB

  • Mavvy super, da wird der RAM voll als Cache genutzt perfekt.
    Gibt es schon Erkenntnisse über Overraming -> 128 GB???

    Edit: Hier hat einer 96 GB RAM verbaut in einer DXP6800pro 

    Kommentar von sinned_1986_06zu „96GB (48GB x 2) kit is working in my 6800 Pro.“
    Entdecke dieses Gespräch und mehr aus der Community UgreenNASync
    www.reddit.com
    Imgur
    Discover the magic of the internet at Imgur, a community powered entertainment destination. Lift your spirits with funny jokes, trending memes, entertaining…
    imgur.com

    DS920+ DSM 7.2.2 U3: 20 GB RAM, 2 x 2 TB SSD (SHR/BTRFS), 2 x 1TB NVME M.2 (RAID1 BTRFS), DX517 4x 12 TB (SHR1/BTRFS), 1 x USB HDD 3,5" 4 TB Backup, 2,5GbE - DS415+(Backupziel): 8 GB RAM, 2x 12 TB + 2x 14 TB (SHR1/BTFRS), 2,5GbE - DS 413j (Backupziel): 4x6 TB(RAID0) - Hetzner 1 TB (Backupziel) - Cams: IPC-HFW5849T1-ASE-LED 2.8, Reolink: E1 pro - Network: ZYXEL XGS1250-12 - EATON Ellipse 650 ECO - FB 6591 (KD: 1.000 Mbit/s 50 Mbit/s) - Clients: Mac/Win/Linux

  • Könntest du bei Gelegenheit schauen, mit wieviel der bei "Quiet" und bei "Full power" dreht?

    Ich habe mal die Drehzahlen ausgelesen, allerdings konnte ich das ganze nur im Idle machen, da ich meine DXP vor zwei Tagen frisch zurückgestzt habe. Die Einstellungen liefen bereits jeweils seit einer Stunde auf den einzelnen Stufen, damit da keine falschen Zahlen heraus kommen. This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.



    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.



    This image is exclusive to our members!
    Please log in or register for free to view graphics and attachments.

    Meine Hardware

    iDX6011 Pro in Späh ^^

    DXP4800+ 2x8TB WDRedPl Btrfs Raid1 2x 2TB Lexar NM790 Raid1, 64GB RAM Kingst. KVR48S40BD8-32 DDR5/4800MH

    DXP2800 1x 12TB Seag. 1x 12TB WDRedPl, Raid1 Btrfs 16GB RAM Cruc. CT16G56C46S5.C8B2, 2x NVME Samsg,

    DS1525+ 2x8TB WD, Btrfs SHR, 2x 2TB NVME Lexar NM790 Raid1. 40GB ECC RAM_Speicher.de

    DS920+ DSM 7.3.2 Btrfs Raid1 2x8TB WD, 2x2TB Samsg. 970 EVOPlus, RAM 20GB DDR4-2666MHZ Speicher.de

    USV US3000, EatonEllip.PRO 850DIN, Switch Zyxel GS1200-8 1GB, Zyxel XMG-108 8 x 2,5GB

Participate now!

Join our community with over 10,000 members!

Register yourself now for free to get full access to all content, graphics, downloads and other exclusive features!