Sammenligning av ZFS vs. Btrfs vs. EXT4 på NAS- og Linux-servere

Informatec Digital » Ressurser » Sammenligning av ZFS vs. Btrfs vs. EXT4 på NAS- og Linux-servere

Hvis du sliter med valget av ZFS, Btrfs eller EXT4 for din NAS eller Linux-serverDu er ikke alene. Ved første øyekast virker de veldig like (øyeblikksbilder, RAID, dataverifisering…), men når du skraper i overflaten, ser du at hver av dem ble laget med forskjellige mål, har veldig klare styrker og også viktige kompromisser som du må vite før du begynner å formatere disker.

I de følgende linjene finner du en Dybdegående sammenligning mellom ZFS, Btrfs og EXT4Forklarer alt fra hva et filsystem er og hvilken rolle det spiller i en NAS, til brukstilfeller i den virkelige verden, kapasitetsgrenser, ytelse, ressursforbruk og praktiske anbefalinger, avhengig av om du setter opp en hjemme-NAS, en server for små bedrifter eller et mer seriøst miljø med høye krav til tilgjengelighet.

Hva er et filsystem, og hvorfor er det så viktig i en NAS?

Et filsystem er i bunn og grunn måten operativsystemet organiserer, lagrer og henter data på på harddisker, SSD-er og eksterne stasjoner. Uten dette settet med regler og strukturer ville systemet bare se strenger med nuller og enere uten noen rekkefølge, uten å vite hvor en fil begynner, hvor den slutter eller hvilke tillatelser den har.

Blant de grunnleggende funksjonene er tildel plassblokker til hver fil, administrer ledig plass og strukturer mapper slik at datatilgang er så rask og pålitelig som mulig. I tillegg administrerer filsystemet metadata (størrelse, datoer, eier), tillatelser og tilgangskontrolllister (ACL-er), antifragmenteringsmekanismer, journalføring og i mange tilfeller alternativer som diskkvoter per bruker eller gruppe.

Hver dataenhet lagres i fysiske blokker eller sektorer med en spesifikk adressePartisjonstabellen definerer den logiske strukturen til den lagringen. Maksimal størrelse som kan håndteres avhenger av "ordbredden" som brukes av filsystemet: flere bits for adressering av minne resulterer i større volum og filkapasitet.

Når vi snakker om en NAS, blir alt dette enda viktigere fordi filsystemets forhold maksimal kapasitet, stabilitet, faktisk hastighet og avanserte funksjoner av maskinen: øyeblikksbilder, dataintegritet, RAID, replikering, komprimering, deduplisering osv. Herfra kommer de store aktørene i Linux-verdenen og NAS-servere inn i bildet: EXT4, Btrfs og ZFS.

EXT4: den robuste veteranen for generell bruk og hjemme-NAS

EXT4 (fjerde utvidede filsystem) er de facto standard i de fleste Linux-distribusjoner for generell bruk. Den ble født som en direkte utvikling av EXT3 med mål om å tilby mer kapasitet, bedre ytelse og mindre fragmentering, samtidig som den opprettholdt påliteligheten som hadde gjort den så populær på servere og stasjonære datamaskiner.

Det er et filsystem transaksjonell med journalføringDen fører oversikt over ventende skriveendringer for å minimere risikoen for korrupsjon i tilfelle strømbrudd eller plutselig krasj. Den når ikke nivået av kopieringsbeskyttelse (CoW) som Btrfs eller ZFS, men for normal bruk er den ganske robust.

Blant de viktigste egenskapene skiller de teoretiske begrensningene seg ut: Volumer opptil 1 EiB og arkiver opptil 16 TiB Ved bruk av 4K-blokker, maksimalt omtrent 4.000 milliarder filer og filnavn på opptil 255 byte. Dette gjør det mer enn tilstrekkelig for de aller fleste hjemmebrukere og mange små og mellomstore bedrifter.

EXT4 inneholder teknikker for redusere fragmentering og forbedre ytelsenFunksjonene inkluderer «extents» (gruppering av sammenhengende blokker), lat allokering (Allocate-on-flush) som bestemmer hvilke blokker som skal brukes rett før skriving, og muligheten til å reservere sammenhengende plass for filer uten å fylle den med nuller. Det tillater også online defragmentering uten å demontere volumet, selv om systemet blir tregere under prosessen.

En annen praktisk fordel er dens bakoverkompatibilitetDet er mulig å oppgradere et EXT3-system til EXT4 samtidig som strukturen opprettholdes slik at begge kan forstå den. Når den først er opprettet som EXT4, kan du imidlertid ikke gå tilbake til EXT3. Når det gjelder sikkerhet, støtter den transparent datakryptering, journalføring og typiske Linux ACL-er.

I NAS-verdenen fortsetter en rekke produsenter (QNAP, Synology, Asustor i mange modeller) å velge EXT4 som standardvalg i lav- og mellomregisterutstyrder målet er stabilitet, kompatibilitet og best mulig ytelse med begrensede CPU- og RAM-ressurser.

Btrfs: den moderne etterfølgeren med snapshots, CoW og integrert RAID

Btrfs (B-tree File System) ble designet fra starten av som «naturlig etterfølger» til EXT4 i LinuxDet startet i 2007 med Oracle og ambisiøse mål: å overvinne begrensningene i kapasitet og funksjonalitet til EXT4 og å introdusere i Linux som standard alt vi tidligere bare så i avanserte løsninger, som snapshots, CoW, avansert RAID og integrert volumadministrasjon.

Når det gjelder grenser, spiller Btrfs i samme liga som ZFS: Maksimalt volum og filstørrelser opptil 16 EiBMaksimalt antall filer kan nå opptil 18 billioner, og filnavnene er 255 byte lange. I praksis er det et system med så godt som ingen grenser for nesten alle moderne miljøer.

Den viktigste egenskapen er at Det fungerer utelukkende med kopiering ved skriving Dette gjelder både data og metadata. Når noe endres, overskrives ikke de tidligere dataene; i stedet skrives en ny kopi til et annet område, og pekeren oppdateres. Dette gir nesten umiddelbare øyeblikksbilder og forhindrer mange former for stille korrupsjon fordi en konsistent versjon alltid opprettholdes inntil endringen er utført.

Btrfs lar deg lage lese og skrive øyeblikksbildersamt snapshots av snapshots, og administrere dem fleksibelt ved hjelp av undervolumer. Den inkluderer også innebygd RAID på filsystemnivå (RAID 0, 1, 10 og nivå 5/6, sistnevnte anses fortsatt som sensitivt i noen miljøer), speilings- og stripeteknikker, og dynamisk inode-allokering, slik at det ikke er behov for å angi et maksimalt antall filer når du oppretter systemet.

En annen viktig ressurs er Gjennomsiktig komprimering på nett (ved hjelp av algoritmer som zlib, LZO eller Zstd), noe som bidrar til å spare plass og noen ganger til og med forbedrer lese-/skriveytelsen ved å redusere det fysiske datavolumet. Den støtter også deduplisering (vanligvis ved bruk av eksterne verktøy), skrubbing for å verifisere og reparere data ved å sammenligne sjekksummer, og en optimalisert SSD-modus.

Alt som glitrer er ikke gull. Sammenlignet med EXT4, Btrfs bruker vanligvis mer CPU og minneOg i mange tester tilbyr den lavere rå lese- og skriveytelse under de samme maskinvareforholdene. Kostnaden for CoW-logikk, sjekksummer og avanserte funksjoner betales i form av ressurser, noe man bør vurdere på beskjedne NAS-enheter.

I NAS-økosystemet har Btrfs blitt den Synologys store satsing og mange forretningsorienterte løsningerspesielt på grunn av de innebygde øyeblikksbildene, alternativet for inkrementell replikering (send/motta), hyppige sikkerhetskopier og hvor enkelt det er å tilbakestille unødvendige endringer i løpet av sekunder.

ZFS: «tanken» for dataintegritet, skalerbarhet og krevende miljøer

ZFS (Zettabyte File System) startet hos Sun Microsystems for Solaris og ble utgitt i 2005 som en del av OpenSolaris. I dag distribueres det primært via OpenZFS og har blitt portert til FreeBSD, Linux og andre systemer. Det er uten tvil en av de de mest avanserte filsystemene som finnes for Unix-lignende systemer.

En av dens grunnpilarer er at Den kombinerer volumbehandleren og filsystemet i ett lag.I stedet for å montere et filsystem oppå en ekstern disk eller RAID-array, oppretter ZFS lagringsbassenger (zpools) som består av virtuelle enheter (vdevs). Datasett (filsystemer) og zvols (blokkenheter) defineres oppå dette bassenget, alt integrert og administrert av de samme verktøyene.

Når det gjelder kapasitet, bruker ZFS 128-bits adressering, som betyr volumer og filer opptil 16 EiBDen støtter filnavn på opptil 255 byte og et maksimalt antall filer på hundrevis av milliarder. Det er et system som er designet for å skaleres sømløst til massive lagringsnivåer.

I likhet med Btrfs baserer ZFS driften sin på kopier-på-skriv med sjekksummer i hver blokkFør skriving beregner den en sjekksum (vanligvis 256 bits) som kontrolleres ved hver lesing. Hvis den oppdager korrupsjon og redundans (for eksempel i RAID-Z eller speiling), kan den reparere det automatisk og transparent, en prosess kjent som selvreparasjon av data.

For å redusere virkningen av CoW-modellen på synkrone skrivinger (f.eks. databaser), bruker ZFS ZFS-intensjonslogg (ZIL)som kan ligge på raske SSD-er for å akselerere kritiske operasjoner. Den har også lesebuffer i RAM (ARC) og eventuelt i SSD (L2ARC), noe som forbedrer ytelsen betydelig, men også øker RAM-kravene.

Ulempen er ressursforbruk: ZFS er designet for maskiner med mye RAM (16 GB som en rimelig basis) og en anstendig CPU. Spesielt deduplisering kan øke minnebruken betydelig, så det bør bare aktiveres når det er virkelig berettiget å spare plass.

Når det gjelder ledelse, introduserer ZFS den berømte RAID-Z (RAID-Z1, RAID-Z2, RAID-Z3)Den er utviklet for å unngå klassiske RAID 5/6-problemer som «skrivehullet», og tilbyr enkle, speilede og avanserte kombinasjoner av pools. Den lar deg utvide kapasiteten ved å legge til nye enheter i poolen og begynne å bruke dem umiddelbart, med langt større fleksibilitet enn tradisjonelle RAID-er.

Blant de avanserte funksjonene finner vi øyeblikksbilder, lette kloner, transparent komprimering, intern deduplisering og svært detaljerte kvoter per datasett eller bruker. Øyeblikksbilder kan telle i billioner og opprettes nesten umiddelbart, siden bare referanser til eksisterende blokker lagres.

Ulempen er ressursforbruk: ZFS er designet for maskiner med tilstrekkelig RAM (16 GB som et rimelig grunnlag og mer hvis deduplisering er aktivert) og en anstendig CPU. Spesielt deduplisering kan øke minnebruken betydelig, så det bør bare aktiveres når det er virkelig berettiget å spare plass.

Produsenter som QNAP satser på ZFS i sine Avanserte NAS-enheter med QuTS Hero-systemder dens funksjoner utnyttes fullt ut: RAID-Z, kontinuerlig integritetsverifisering, komprimering, massive snapshots og muligheten til å administrere alt fra et relativt brukervennlig grafisk grensesnitt for avanserte brukere.

Andre vanlige filsystemer: NTFS, FAT32, exFAT og XFS

Selv om vi her fokuserer på ZFS, Btrfs og EXT4 i server- og NAS-miljøer, dukker også andre filsystemer opp i daglig bruk. filsystemer med svært spesifikke bruksområderÅ forstå dem bidrar til å unngå å blande konsepter når man kobler disker mellom forskjellige operativsystemer.

NTFS (New Technology File System) har vært standard filsystem for Windows i flere tiår. Det støtter svært store filer, avanserte tillatelser, journalføring og mange andre funksjoner, men Kompatibiliteten utenfor Windows er begrenset.macOS monterer den som skrivebeskyttet som standard, og selv om Linux støtter det godt, er det ikke det beste alternativet for stasjoner som skal deles mellom mange enheter, inkludert konsoller.

FAT32 Det er en klassisk, ultrakompatibel enhet, ideell for billige minnepenner, mediespillere og eldre enheter. Det største problemet er... 4 GB grense per filDette utelukker det for moderne sikkerhetskopier, diskbilder eller videoer av høy kvalitet. Likevel er det fortsatt levedyktig fordi nesten alle enheter på planeten kan lese det.

FAT Standardversjonen er enda eldre og mer begrenset, med liten toleranse for feil, ingen sikkerhetstillatelser og designet for liten kapasitet (i størrelsesorden titalls GB). Til gjengjeld, Den er fortsatt svært kompatibel med eldre systemer. og noen innebygde systemer, selv om det i praksis er sjelden å bruke det i dag til noe seriøst.

exFAT Den ble opprettet som etterfølgeren til FAT32 for flyttbare medier, og fjernet dermed filstørrelsesgrensen på 4 GB. Den er mye brukt i SD-kort, USB-minnepinner og eksterne harddisker som vil flytte mellom Windows og macOS. Den har allerede solid støtte på Linux, men den legger ikke til funksjoner som snapshots eller kraftig journalføring, så den er heller ikke det ideelle alternativet for NAS.

Endelig, XFS Det er et filsystem orientert mot Høy ytelse med svært store filerDen er mye brukt i avanserte Linux-servere og store databaser. Den tilbyr avansert journalføring og utmerket parallell ytelse, men den mangler innebygde snapshots og integrert komprimering, så den har en tendens til å konkurrere mer med EXT4 i spesifikke scenarier enn med ZFS eller Btrfs.

ZFS vs Btrfs vs EXT4-sammenligning: muligheter, funksjoner og begrensninger

Hvis vi sammenligner ZFS, Btrfs og EXT4 side om side, dukker det opp flere viktige forskjeller. maksimal kapasitet, avanserte funksjoner og nivå av databeskyttelseNår det gjelder teoretiske grenser, spiller både ZFS og Btrfs i samme liga med 16 EiB for volum og fil, mens EXT4 holder seg på 1 EiB volum og 16 TiB per fil (med 4K-blokker).

Når det gjelder filstørrelse, støtter Btrfs og ZFS astronomiske mengder (billioner for Btrfs og opptil 2⁴⁸ i ZFS), mens EXT4 beveger seg i rekkefølgen av milliarder av inoder tilgjengeligAlle tre deler en grense på 255 byte for filnavnet, som er tilstrekkelig for praktisk talt ethvert scenario.

Der et tydelig skille sees er i avanserte funksjonerZFS og Btrfs tilbyr kopiering-ved-skriving, innebygde snapshots, transparent komprimering og deduplisering (native i ZFS, tilgjengelig med verktøy i Btrfs). EXT4, derimot, integrerer ikke CoW, har ikke egne snapshots og mangler innebygd komprimering og deduplisering.

Som til krypteringZFS implementerer kryptering på datasettnivå med dyp systemintegrasjon. Btrfs kan, avhengig av konfigurasjonen, stole på eksterne mekanismer som LUKS for å kryptere enheten, og EXT4 kombineres også ofte med LUKS eller andre krypteringslag for å beskytte hele volumet.

Når man ser på øyeblikksbilder, støtter ZFS et ekstremt høyt maksimumstall (i størrelsesorden 2⁴⁸Btrfs tillater også enorme mengder, og EXT4 Den håndterer dem ikke naturlig.Dette gjør at ZFS og Btrfs skiller seg ut i strategier for hyppige sikkerhetskopier, rask gjenoppretting fra menneskelige feil og replikering mellom servere.

På et konseptuelt nivå er ZFS den mest integrert og sammenhengende som en «alt-i-ett»-løsningVolum + filsystem + RAID + kvotehåndtering og kontinuerlig verifisering. Btrfs integrerer også mange lag (filsystem og RAID, delvolumer, levering av øyeblikksbilder), men det er vanligvis avhengig av eksterne verktøy for kryptering eller noen avanserte oppgaver. EXT4, derimot, kombineres tradisjonelt med LVM, mdadm og andre komponenter for å bygge komplette løsninger.

Ytelse og ressursforbruk: i hvilket scenario yter hver av dem best?

Et poeng som sjelden nevnes i teorien, men som er svært merkbart i praksis, er faktisk ytelse og ressursbrukUlike sammenlignende tester (for eksempel de fra Phoronix) viser at EXT4, bortsett fra i svært spesifikke tilfeller, vanligvis er det raskeste filsystemet i sekvensielle og tilfeldige lese- og skriveoperasjoner under de samme maskinvareforholdene.

Totalt sett tilbyr EXT4 svært høy ytelse med lav CPU- og RAM-belastningDette gjør den ideell for hjemme-NAS og små bedrifter der det viktigste er å flytte data raskt og enkelt, uten behov for kraftige øyeblikksbilder eller deduplisering.

ZFS, derimot, har en tendens til å være den tregeste i rene I/O-benchmarksDette gjelder spesielt når man sammenligner tilsvarende konfigurasjoner med andre systemer på samme maskinvare. Årsaken er at CoW-modellen, sjekksumverifiseringen, komprimeringen, pooladministrasjonen og integritetsfunksjonene bruker CPU- og minnetid, noe som forskyves i miljøer der den absolutte prioriteten er databevaring.

Btrfs plasseres vanligvis i midten: Den er ikke like rask som rå EXT4.Den er imidlertid ikke like krevende for maskinvare som ZFS. I mange arbeidsbelastninger som bruker SSD-er og all-flash RAID, kan den tilby en god balanse mellom ytelse og avanserte funksjoner, selv om oppførselen kan variere mer avhengig av kjerneversjon og spesifikk konfigurasjon.

Hvis NAS-en eller serveren din er lav- eller middels kraftig, med lite RAM og en beskjeden prosessor, EXT4 er vanligvis det mest fornuftige veddemåletPå kraftigere maskiner er Btrfs et godt alternativ for å dra nytte av snapshots, komprimering og integrert RAID uten kravene til ZFS. Og når du har en kraftig maskin med mye RAM og krever maksimal integritet og selvreparasjon, blir ZFS stjernen.

Anbefalte brukstilfeller: Hjemme-NAS, små og mellomstore bedrifter og bedriftsmiljøer

Med tanke på all teorien er det virkelige spørsmålet: Hvilket filsystem bør jeg velge for mitt spesifikke tilfelle? En NAS for filmer og sikkerhetskopiering av familien er ikke det samme som et kritisk databasemiljø eller en virtualiseringsserver med dusinvis av maskiner.

Til personlig bruk, hjemmekontor og lite kontor (SOHO)EXT4 er generelt det mest balanserte alternativet. Det er ekstremt godt testet, støttes av alle distribusjoner uten problemer, tilbyr utmerket ytelse og krever ingen spesiell maskinvare. Hvis du vil dele filer, ta noen sikkerhetskopier og sette opp en eller to enkle RAID-arrayer, vil EXT4 fungere perfekt.

En Bedrifter som trenger hyppige øyeblikksbilder, fleksibilitet og et godt nivå av databeskyttelseBtrfs passer utmerket. Synology bruker det for eksempel i mange av sine NAS-enheter for å tilby planlagte øyeblikksbilder, replikering på tvers av enheter, integritetsverifisering og komprimering, alt med et brukervennlig grensesnitt. Videre forenkler den innebygde integrasjonen med Linux-kjernen administrasjon og reduserer eksterne avhengigheter.

Til bedriftsmiljøer, stormaskiner, datasentre og store databaserZFS er konge. Kombinasjonen av kopiering-ved-skriving, 256-bits kontrollsummer, RAID-Z, selvreparasjon, transparent komprimering og deduplisering gjør det til et ideelt verktøy når du rett og slett ikke har råd til stille datakorrupsjon eller tap på grunn av diskfeil under en RAID-gjenoppbygging.

I high-end NAS-segmentet bringer QNAP med QuTS hero ZFS til stasjonære og rack-PC-er med kraftige CPU-er og store mengder RAMbringe typiske profesjonelle serverfunksjoner nærmere mellomstore bedrifter som ønsker å gå et skritt videre innen databeskyttelse uten å sette opp en enorm klynge.

Vi må også vurdere vertsoperativsystemZFS, i Linux, lastes vanligvis inn som en ekstern modul (på grunn av lisensproblemer), mens Btrfs er integrert i kjernen, noe som noen ganger tipper vektskålen når man søker 100 % "rene Linux"-løsninger. I FreeBSD har ZFS en spesielt polert integrasjon, mens Btrfs knapt brukes.

Hva du bør vurdere når du velger et filsystem for NAS-en din

I tillegg til de tekniske spesifikasjonene, er det flere praktiske kriterier å vurdere før du bestemmer deg for ZFS, Btrfs eller EXT4 for NAS-en eller serveren din. kompatibilitet Det er noe av det første du må gjøre: sørg for at det valgte filsystemet støttes av NAS-operativsystemet og verktøyene du skal jobbe med daglig.

La stabilitet og modenhet Filsystemet har også stor betydning. EXT4 har vært i masseproduksjon i årevis og er sannsynligvis det mest stabile totalt sett. ZFS kan også skryte av enorm modenhet, spesielt i Solaris-, FreeBSD- og OpenZFS-miljøer. Btrfs har utviklet seg betydelig, men noen konfigurasjoner (som RAID 5/6) anses fortsatt som sensitive, og det er lurt å undersøke dem grundig før man bruker dem i produksjon.

La hastighet og effektivitet Disse faktorene vil være avgjørende hvis NAS-en din skal håndtere store datamengder daglig. EXT4 tilbyr vanligvis overlegen rå ytelse, mens ZFS og Btrfs tilbyr flere funksjoner, men til en høyere ressurskostnad. Du må bestemme hva som er viktigst for deg: enkelhet og hastighet, eller avanserte funksjoner selv om toppytelsen er litt lavere.

Las ekstra funksjoner Andre funksjoner som utgjør en forskjell inkluderer øyeblikksbilder, komprimering, deduplisering, automatisk dataverifisering og reparasjon, kvotehåndtering, RAID-integrasjon og mer. ZFS og Btrfs utmerker seg her, mens EXT4 må kombineres med andre verktøy for å oppnå noe lignende.

Endelig fremtidig skalerbarhet Dette er nøkkelen. Hvis du tenker at du skal legge til disker, øke kapasiteten eller endre hvordan du bruker NAS-en din, vil du ha et system som lar deg utvide lagringsbassenger, omfordele data og håndtere enorme volumer uten å omstrukturere alt fra bunnen av. I denne forbindelse er ZFS og Btrfs klart foran EXT4.

Med alt det ovennevnte i tankene blir bildet ganske tydelig: EXT4 passer best for budsjettvennlige NAS-enheter og generell bruk.Btrfs er svært attraktivt for bedrifter og avanserte brukere som bruker Linux og ønsker godt integrerte snapshots og replikering, og ZFS er det foretrukne alternativet når fokuset er på dataintegritet, selvreparasjon og skalerbarhet i stor skala, forutsatt at maskinvaren er opp til oppgaven.