Sammenligning av ZFS vs. Btrfs vs. EXT4 på NAS- og Linux-servere

Informatec Digital » Ressurser » Sammenligning ZFS vs Btrfs vs EXT4 på NAS- og Linux-servere

Hvis du sliter med å velge mellom ZFS, Btrfs eller EXT4 for NAS-en eller Linux-serveren din , er du ikke alene. Ved første øyekast virker de veldig like (øyeblikksbilder, RAID, dataverifisering osv.), men når du graver litt dypere, vil du se at hver av dem ble laget med forskjellige mål, har veldig klare styrker og også betydelige avveininger som du må være klar over før du begynner å formatere disker.

I de følgende linjene finner du en grundig sammenligning mellom ZFS, Btrfs og EXT4 , som forklarer alt fra hva et filsystem er og hvilken rolle det spiller i en NAS, til reelle brukstilfeller, kapasitetsgrenser, ytelse, ressursforbruk og praktiske anbefalinger, avhengig av om du setter opp en hjemme-NAS, en liten bedriftsserver eller et mer seriøst miljø med høye krav til tilgjengelighet.

Hva er et filsystem, og hvorfor er det så viktig i en NAS?

Et filsystem er i hovedsak måten operativsystemet organiserer, lagrer og henter data på harddisker, SSD-er og eksterne stasjoner. Uten dette settet med regler og strukturer ville systemet bare se strenger med nuller og enere uten noen rekkefølge, uten å vite hvor en fil begynner, hvor den slutter eller hvilke tillatelser den har.

De grunnleggende funksjonene inkluderer å tildele plassblokker til hver fil, administrere ledig plass og strukturere kataloger for å sikre raskest og mest pålitelig datatilgang. I tillegg kontrollerer filsystemet metadata (størrelse, datoer, eier), tillatelser og tilgangskontrolllister (ACL-er), antifragmenteringsmekanismer, journalføring og i mange tilfeller alternativer som diskkvoter per bruker eller gruppe.

Hver dataenhet lagres i fysiske blokker eller sektorer med en spesifikk adresse , og partisjonstabellen definerer den logiske strukturen til den lagringen. Maksimal størrelse som kan håndteres avhenger av "ordbredden" som brukes av filsystemet: flere biter for adressering av minne resulterer i større volum og filkapasitet.

Når vi snakker om en NAS, blir alt dette enda viktigere fordi filsystemet bestemmer maskinens maksimale kapasitet, stabilitet, faktiske hastighet og avanserte funksjoner : øyeblikksbilder, dataintegritet, RAID, replikering, komprimering, deduplisering osv. Det er her de største aktørene i Linux-verdenen og NAS-servere kommer inn i bildet: EXT4, Btrfs og ZFS.

EXT4: den robuste veteranen for generell bruk og hjemme-NAS

EXT4 (Fourth Extended Filesystem) er de facto-standarden i de fleste generelle Linux-distribusjoner. Den oppsto som en direkte utvikling av EXT3 med mål om å tilby større kapasitet, forbedret ytelse og redusert fragmentering, samtidig som den opprettholdt påliteligheten som hadde gjort den så populær på servere og stasjonære datamaskiner.

Det er et journalføringssystem for transaksjonsfil : det fører oversikt over ventende skriveendringer for å minimere risikoen for korrupsjon i tilfelle strømbrudd eller plutselig krasj. Det når ikke nivået av kopieringsbeskyttelse (CoW) som Btrfs eller ZFS, men for normal bruk er det ganske robust.

Viktige funksjoner inkluderer teoretiske grenser: volumer opptil 1 EiB og filer opptil 16 TiB ved bruk av 4K-blokker, maksimalt omtrent 4.000 milliarder filer og filnavn opptil 255 byte. Dette gjør den mer enn tilstrekkelig for de aller fleste hjemmebrukere og mange små og mellomstore bedrifter.

EXT4 inneholder teknikker for å redusere fragmentering og forbedre ytelsen , som utvidelser (gruppering av sammenhengende blokker), allocation-on-flush (som bestemmer hvilke blokker som skal brukes rett før skriving), og muligheten til å reservere sammenhengende plass for filer uten å fylle den med nuller. Det tillater også defragmentering på nett uten å demontere volumet, selv om systemet blir tregere under prosessen.

En annen praktisk fordel er bakoverkompatibiliteten : det er mulig å oppgradere et EXT3-system til EXT4 samtidig som den eksisterende strukturen opprettholdes, slik at begge kan forstå den. Når den først er opprettet som EXT4, kan du imidlertid ikke gå tilbake til EXT3. Når det gjelder sikkerhet, støtter den transparent datakryptering, journalføring og typiske Linux ACL-er.

I NAS-verdenen fortsetter en rekke produsenter (QNAP, Synology, Asustor i mange modeller) å velge EXT4 som standardvalg i lav- og mellomklasseutstyr , der målet er stabilitet, kompatibilitet og best mulig ytelse med begrensede CPU- og RAM-ressurser.

Btrfs: den moderne etterfølgeren med snapshots, CoW og integrert RAID

Btrfs (B-tree File System) ble designet fra starten av som den "naturlige etterfølgeren" til EXT4 på Linux . Det ble lansert i 2007 av Oracle med ambisiøse mål: å overvinne kapasitets- og funksjonalitetsbegrensningene til EXT4 og å introdusere i Linux, som standard, alt som tidligere bare var sett i avanserte løsninger, for eksempel snapshots, CoW, avansert RAID og integrert volumadministrasjon.

Når det gjelder begrensninger, er Btrfs på nivå med ZFS: maksimalt volum og filstørrelser på opptil 16 EiB , et maksimalt antall filer som skyter i været til rundt 18 billioner, og filnavn på 255 byte. I praksis er det et system med så godt som ingen begrensninger for nesten alle moderne miljøer.

Den viktigste funksjonen er at den opererer utelukkende med kopiering-ved-skriving for både data og metadata. Når noe endres, overskrives ikke de tidligere dataene; i stedet skrives en ny kopi til et annet område, og pekeren oppdateres. Dette gir nesten umiddelbare øyeblikksbilder og forhindrer mange former for stille korrupsjon fordi en konsistent versjon alltid opprettholdes inntil endringen er utført.

Btrfs lar deg lage lese- og skrive-snapshots , samt snapshots av snapshots, og administrere dem fleksibelt ved hjelp av undervolumer. Den inkluderer også innebygd RAID på filsystemnivå (RAID 0, 1, 10 og nivå 5/6, sistnevnte anses fortsatt som sensitivt i noen miljøer), speilings- og stripeteknikker og dynamisk inode-allokering, slik at det ikke er nødvendig å spesifisere et maksimalt antall filer når du oppretter systemet.

En annen viktig fordel er transparent innebygd komprimering (ved bruk av algoritmer som zlib, LZO eller Zstd), som bidrar til å spare plass og noen ganger til og med forbedrer lese-/skriveytelsen ved å redusere det fysiske datavolumet. Den støtter også deduplisering (vanligvis via eksterne verktøy), skrubbing for å verifisere og reparere data ved å sammenligne sjekksummer, og en SSD-optimalisert modus.

Ikke alt som glitrer er gull. Sammenlignet med EXT4 bruker Btrfs vanligvis mer CPU og minne , og i mange tester tilbyr den lavere rå lese- og skriveytelse under de samme maskinvareforholdene. Kostnaden for CoW-logikk, sjekksummer og avanserte funksjoner kommer med en pris når det gjelder ressurser, noe man bør vurdere på beskjedne NAS-enheter.

I NAS-økosystemet har Btrfs blitt Synologys og mange bedriftsorienterte løsningers store satsning , spesielt på grunn av integrerte snapshots, alternativet for trinnvis replikering (send/motta), hyppige sikkerhetskopier og hvor enkelt det er å tilbakestille upassende endringer i løpet av sekunder.

ZFS: «tanken» for dataintegritet, skalerbarhet og krevende miljøer

ZFS (Zettabyte File System) startet hos Sun Microsystems for Solaris og ble utgitt i 2005 som en del av OpenSolaris. I dag distribueres det primært via OpenZFS og har blitt portert til FreeBSD, Linux og andre systemer. Det er uten tvil et av de mest avanserte filsystemene som er tilgjengelige for Unix-lignende systemer.

En av hovedfunksjonene er at den kombinerer volumbehandleren og filsystemet i ett enkelt lag . I stedet for å montere et filsystem oppå en ekstern disk eller RAID-array, oppretter ZFS lagringsbassenger (zpools) som består av virtuelle enheter (vdevs). Datasett (filsystemer) og zvols (blokkenheter) defineres oppå dette bassenget, alt integrert og administrert av de samme verktøyene.

Når det gjelder kapasitet, bruker ZFS 128-bits adressering, som betyr volumer og filer på opptil 16 EiB , filnavn på opptil 255 byte og et maksimalt antall filer på hundrevis av milliarder. Det er et system designet for å skaleres sømløst til massive lagringsnivåer.

I likhet med Btrfs opererer ZFS etter et kopi-ved-skriv-prinsipp med sjekksummer i hver blokk . Før skriving beregner den en sjekksum (vanligvis 256 bits) som kontrolleres ved hver lesing. Hvis den oppdager korrupsjon og redundans (for eksempel i RAID-Z eller speiling), kan den reparere det automatisk og transparent, en prosess kjent som dataselvreparasjon.

For å redusere virkningen av CoW-modellen på synkrone skrivinger (f.eks. databaser), bruker ZFS ZFS Intent Log (ZIL) , som kan ligge på raske SSD-er for å akselerere kritiske operasjoner. I tillegg har den lesebuffering i RAM (ARC) og eventuelt i SSD-er (L2ARC), noe som forbedrer ytelsen betydelig, men også øker RAM-kravene.

Ulempen er ressursforbruk: ZFS er designet for maskiner med rikelig med RAM (16 GB er et rimelig utgangspunkt) og en anstendig CPU. Spesielt deduplisering kan øke minnebruken betydelig, så det er best å bare aktivere det når plassbesparelsene virkelig er berettiget.

På administrasjonsfronten introduserer ZFS de velkjente RAID-Z-arraysene (RAID-Z1, RAID-Z2, RAID-Z3) , som er utviklet for å unngå vanlige RAID 5/6-problemer som «skrivehullet», og tilbyr enkle, speilede og avanserte RAID-kombinasjoner. Det muliggjør kapasitetsutvidelse ved å legge til nye enheter i poolen og umiddelbar bruk, noe som gir langt større fleksibilitet enn tradisjonelle RAID-arrays.

Blant de avanserte funksjonene finner vi øyeblikksbilder, lette kloner, transparent komprimering, intern deduplisering og svært detaljerte kvoter per datasett eller bruker. Øyeblikksbilder kan telle i billioner og opprettes nesten umiddelbart, ettersom bare referanser til eksisterende blokker lagres.

Ulempen er ressursforbruk: ZFS er designet for maskiner med rikelig med RAM (16 GB er et rimelig utgangspunkt, og mer hvis deduplisering er aktivert) og en anstendig CPU. Spesielt deduplisering kan øke minnebruken betydelig, så det er best å bare aktivere det når plassbesparelsene virkelig er berettiget.

Produsenter som QNAP satser på ZFS i sine avanserte NA-er med QuTS Hero-systemet , der mulighetene utnyttes fullt ut: RAID-Z, kontinuerlig integritetsverifisering, komprimering, massive snapshots og muligheten til å administrere alt fra et relativt brukervennlig grafisk grensesnitt for avanserte brukere.

Andre vanlige filsystemer: NTFS, FAT32, exFAT og XFS

Selv om vi her fokuserer på ZFS, Btrfs og EXT4 i server- og NAS-miljøer, dukker det også opp andre filsystemer med svært spesifikke bruksområder i hverdagen . Å forstå dem bidrar til å unngå å blande konsepter når man kobler disker mellom forskjellige operativsystemer.

NTFS (New Technology File System) har vært standard filsystem for Windows i flere tiår. Det støtter svært store filer, avanserte tillatelser, journalføring og mange andre funksjoner, men kompatibiliteten utenfor Windows er begrenset : macOS monterer det som skrivebeskyttet som standard, og selv om Linux støtter det godt, er det ikke det beste alternativet for disker som skal deles mellom mange enheter, inkludert spillkonsoller.

FAT32 er et klassisk, svært kompatibelt format, ideelt for rimelige USB-stasjoner, mediespillere og eldre enheter. Den største ulempen er filstørrelsesgrensen på 4 GB , noe som gjør det uegnet for moderne sikkerhetskopier, diskbilder eller videoer av høy kvalitet. Likevel er det fortsatt relevant fordi nesten alle enheter på planeten kan lese det.

Det vanlige FAT-formatet er enda eldre og mer begrenset, med liten feiltoleranse, ingen sikkerhetstillatelser og designet for små kapasiteter (i størrelsesorden titalls GB). Det er imidlertid fortsatt svært kompatibelt med eldre systemer og noen innebygde enheter, selv om det i praksis sjelden brukes til noe seriøst i disse dager.

exFAT ble opprettet som etterfølgeren til FAT32 for flyttbare medier, og fjernet dermed filstørrelsesgrensen på 4 GB. Den brukes mye på SD-kort, USB-minnepinner og eksterne harddisker som brukes på tvers av Windows og macOS. Selv om den allerede har solid støtte i Linux, legger den ikke til funksjoner som øyeblikksbilder eller robust journalføring, så den er ikke det ideelle valget for NAS-enheter.

Til slutt er XFS et høytytende filsystem designet for svært store filer , mye brukt i avanserte Linux-servere og store databaser. Det tilbyr avansert journalføring og utmerket parallell ytelse, men mangler innebygde snapshots og innebygd komprimering, så det har en tendens til å konkurrere mer med EXT4 i spesifikke scenarier enn med ZFS eller Btrfs.

ZFS vs Btrfs vs EXT4-sammenligning: muligheter, funksjoner og begrensninger

Hvis vi sammenligner ZFS, Btrfs og EXT4 side om side, dukker det opp flere viktige forskjeller i maksimal kapasitet, avanserte funksjoner og databeskyttelsesnivåer . Når det gjelder teoretiske grenser, er både ZFS og Btrfs i samme liga med 16 EiB for volum og 16 TiB per fil, mens EXT4 er begrenset til 1 EiB for volum og 16 TiB per fil (med 4K-blokker).

Når det gjelder filstørrelser, støtter Btrfs og ZFS astronomiske mengder (billioner i tilfellet med Btrfs og opptil ²⁴⁸ i ZFS), mens EXT4 opererer i størrelsesorden milliarder av tilgjengelige inoder . Alle tre deler en filnavngrense på 255 byte, tilstrekkelig for så å si ethvert scenario.

Det tydeligste skillet sees i avanserte funksjoner . ZFS og Btrfs tilbyr kopiering-ved-skriving, innebygde snapshots, transparent komprimering og deduplisering (native i ZFS, tilgjengelig med verktøy i Btrfs). EXT4, derimot, integrerer ikke CoW, har ingen innebygde snapshots og mangler innebygd komprimering og deduplisering.

Når det gjelder kryptering , implementerer ZFS kryptering på datasettnivå med dyp systemintegrasjon. Avhengig av konfigurasjonen kan Btrfs stole på eksterne mekanismer som LUKS for å kryptere enheten, og EXT4 kombineres også ofte med LUKS eller andre krypteringslag for å beskytte hele volumet.

Når man ser på snapshots, støtter ZFS et ekstremt høyt maksimalt antall (i størrelsesorden 2 ^⁴⁸ ), Btrfs tillater også enorme mengder, og EXT4 håndterer dem ikke innebygd . Dette gjør at ZFS og Btrfs skiller seg ut i strategier for hyppige sikkerhetskopier, rask gjenoppretting fra menneskelige feil og replikering mellom servere.

Konseptuelt sett er ZFS den mest integrerte og sammenhengende alt-i-ett-løsningen : volum + filsystem + RAID + kvotehåndtering og kontinuerlig verifisering. Btrfs integrerer også mange lag (filsystem og RAID, delvolumer, levering av øyeblikksbilder), men den er vanligvis avhengig av eksterne verktøy for kryptering eller noen avanserte oppgaver. EXT4, derimot, kombineres tradisjonelt med LVM, mdadm og andre komponenter for å bygge komplette løsninger.

Ytelse og ressursforbruk: i hvilket scenario yter hver av dem best?

Et poeng som sjelden nevnes i teorien, men som er svært merkbart i praksis, er ytelse og ressursbruk i den virkelige verden . Ulike sammenlignende tester (for eksempel de fra Phoronix) viser at EXT4 vanligvis er det raskeste filsystemet for sekvensielle og tilfeldige lese- og skriveoperasjoner under de samme maskinvareforholdene, bortsett fra i svært spesifikke tilfeller.

Totalt sett tilbyr EXT4 svært høy ytelse med lav CPU- og RAM-bruk , noe som gjør den ideell for hjemme-NAS og små bedrifter der det viktigste er å flytte data raskt og enkelt, uten behov for kraftige snapshots eller deduplisering.

ZFS, derimot, har en tendens til å være tregest i rene I/O-benchmarks , spesielt når man sammenligner tilsvarende konfigurasjoner med andre systemer på samme maskinvare. Dette er fordi CoW-modellen, sjekksumverifiseringen, komprimeringen, pooladministrasjonen og integritetsfunksjonene bruker CPU- og minnetid, noe som kompenseres for i miljøer der den absolutte prioriteten er databevaring.

Btrfs havner vanligvis et sted midt imellom: den er ikke like rask som EXT4 direkte , men den er heller ikke like krevende for maskinvare som ZFS. I mange arbeidsbelastninger som bruker SSD-er og all-flash RAID-arrayer, kan den tilby en god balanse mellom ytelse og avanserte funksjoner, selv om oppførselen kan variere betydelig avhengig av kjerneversjon og spesifikk konfigurasjon.

Hvis NAS-en eller serveren din er av lav eller mellomklassen, med begrenset RAM og en beskjeden prosessor, er EXT4 vanligvis det mest fornuftige valget . På kraftigere maskiner er Btrfs et godt alternativ for å dra nytte av snapshots, komprimering og integrert RAID uten kravene til ZFS. Og når du har en kraftig maskin med mye RAM og krever maksimal dataintegritet og selvreparasjon, blir ZFS stjernen.

Anbefalte brukstilfeller: Hjemme-NAS, små og mellomstore bedrifter og bedriftsmiljøer

Etter å ha vurdert all teorien, er det virkelige spørsmålet: hvilket filsystem bør jeg velge for mitt spesifikke tilfelle? En NAS for filmer og sikkerhetskopiering av familien er ikke det samme som et kritisk databasemiljø eller en virtualiseringsserver med dusinvis av maskiner.

For personlig bruk, hjemmekontorer og små kontormiljøer (SOHO) er EXT4 generelt det mest balanserte alternativet. Det er grundig testet, støttes av alle distribusjoner uten problemer, tilbyr utmerket ytelse og krever ikke spesiell maskinvare. Hvis du vil dele filer, utføre noen sikkerhetskopier og sette opp en eller to enkle RAID-arrayer, vil EXT4 fungere perfekt.

For bedrifter som krever hyppige snapshots, fleksibilitet og et høyt nivå av databeskyttelse , er Btrfs et godt valg. Synology bruker det for eksempel i mange av sine NAS-enheter for å tilby planlagte snapshots, replikering på tvers av enheter, integritetsverifisering og komprimering, alt med et brukervennlig grensesnitt. Videre forenkler den innebygde integrasjonen med Linux-kjernen administrasjon og reduserer eksterne avhengigheter.

For bedriftsmiljøer, stormaskiner, datasentre og store databaser er ZFS konge. Kombinasjonen av kopiering-ved-skriving, 256-bits kontrollsummer, RAID-Z, selvreparasjon, transparent komprimering og deduplisering gjør det til et ideelt verktøy når du rett og slett ikke har råd til stille datakorrupsjon eller tap på grunn av diskfeil under en RAID-gjenoppbygging.

I high-end NAS-segmentet bringer QNAP med QuTS hero ZFS til stasjonære og rack-PC-er med kraftige CPU-er og store mengder RAM , og bringer funksjoner som er typiske for profesjonelle servere nærmere mellomstore bedrifter som ønsker å gå et skritt videre innen databeskyttelse uten å sette opp en enorm klynge.

Vertsoperativsystemet må også vurderes . På Linux lastes ZFS vanligvis inn som en ekstern modul (på grunn av lisensproblemer), mens Btrfs er integrert i kjernen, noe som noen ganger tipper vektskålen når man søker 100 % "rene Linux"-løsninger. På FreeBSD har ZFS spesielt robust integrasjon, mens Btrfs sjelden brukes.

Hva du bør vurdere når du velger et filsystem for NAS-en din

I tillegg til de tekniske spesifikasjonene, er det flere praktiske kriterier å vurdere før du velger ZFS, Btrfs eller EXT4 for NAS-en eller serveren din. Kompatibilitet er en av de første: du må sørge for at det valgte filsystemet støttes av NAS-operativsystemet og verktøyene du skal bruke daglig.

Stabiliteten og modenheten til filsystemet spiller også stor rolle. EXT4 har vært i masseproduksjon i årevis og er sannsynligvis den mest stabile totalt sett. ZFS kan også skryte av enorm modenhet, spesielt i Solaris-, FreeBSD- og OpenZFS-miljøer. Btrfs har utviklet seg betydelig, men noen konfigurasjoner (som RAID 5/6) anses fortsatt som sensitive, og det er lurt å undersøke dem grundig før man bruker dem i produksjon.

Hastighet og effektivitet vil være avgjørende hvis NAS-en din skal håndtere store datamengder daglig. EXT4 vinner vanligvis på rå ytelse, mens ZFS og Btrfs tilbyr flere funksjoner, men til en høyere ressurskostnad. Du må bestemme hva som er viktigst for deg: enkelhet og hastighet, eller avanserte funksjoner selv om toppytelsen er litt lavere.

Ekstrafunksjonene utgjør også en forskjell: øyeblikksbilder, komprimering, deduplisering, automatisk dataverifisering og reparasjon, kvotehåndtering, RAID-integrasjon, osv . ZFS og Btrfs skinner her, mens EXT4 må kombineres med andre verktøy for å oppnå noe lignende.

Til slutt er fremtidig skalerbarhet nøkkelen. Hvis du forventer å legge til disker, øke kapasiteten eller endre hvordan du bruker NAS-en din, vil du ha et system som lar deg utvide lagringsbassenger, omfordele data og håndtere enorme volumer uten å måtte omstrukturere alt fra bunnen av. I denne forbindelse er ZFS og Btrfs klart foran EXT4.

Med alt det ovennevnte på bordet, er bildet ganske klart: EXT4 passer best for rimelige NAS-enheter og generell bruk , Btrfs er svært attraktivt for bedrifter og avanserte brukere som bor på Linux og ønsker godt integrerte snapshots og replikering, og ZFS er det foretrukne alternativet når fokuset er på dataintegritet, selvreparasjon og skalerbarhet i stor skala, forutsatt at maskinvaren er opp til oppgaven.