PCIe-filoptimalisering i NAS, spilling og hjemmelab

Informatec Digital » Ressurser » PCIe-filoptimalisering i NAS, spilling og hjemmelab

Å bygge en hjemme-NAS eller et kraftig hjemmelaboratorium med stasjonær maskinvare har én klar fordel: den utrolige fleksibiliteten som PCIe-spor tilbyr for å utvide systemet med grafikkort, NVMe SSD-er, høyhastighets nettverkskort og mye mer. Problemet oppstår når du begynner å legge til komponenter: GPU-er, flere NVMe-disker, kontrollere, 10 GbE, opptakskort ... og du lurer på hvordan i all verden PCIe-banene er tildelt og hva som ofres underveis.

I denne sammenhengen er det viktig å forstå hvordan hovedkortets PCIe-baner, M.2-sokler og SATA-porter fungerer for å maksimere hver båndbreddebane uten å skape flaskehalser . Vi vil bryte ned dette trinn for trinn ved hjelp av virkelige scenarier (som en NAS/hjemmelab med en GTX 1080, flere NVMe-disker og et 10GbE SFP+-kort) og kombinere det med en grundig forklaring av PCI Express-teknologi, dens generasjoner, baner og praktiske begrensninger.

Virkelig scenario: NAS / hjemmelab med flere PCIe-, NVMe- og SATA-disker

Tenk deg at du vil sette opp en hjemmeserver med et X470-hovedkort som Fatal1ty X470 Gaming K4, og du har et system i tankene som er lastet med periferiutstyr : mellom 5 og 6 SATA-harddisker for masselagring, 2 NVMe SSD-er i RAID1 hvor du kan kjøre unRAID- og Docker-containere, et GTX 1080 for spilling og testing av LLM-er, og et 10 GbE SFP+-kort for høyhastighetsnettverk.

Dette X470-hovedkortet tilbyr som standard to PCI Express 3.0 x16-spor (konfigurerbare som x16 i det første sporet, eller x8/x8 hvis begge brukes), i tillegg til fire PCIe 2.0 x1-spor for små utvidelseskort. For lagring har det seks SATA3-porter med RAID 0-, 1- og 10-støtte, og to M.2-sokler (en Ultra M.2 M2_1 og en M2_2) med forskjellige hastigheter: den første kan operere opptil PCIe Gen3 x4 (avhengig av CPU-en), og den andre når opptil Gen2 x2.

Ideen om å installere 6 SATA-harddisker + 2 NVMe-disker + et GPU + 10 GbE er gjennomførbar, men du må være veldig forsiktig med tildelingen av baner. Det første PCIe 3.0 x16-sporet er direkte koblet til Ryzen CPU-en: i GPU-kun-modus opererer den på x16; hvis du legger til et andre stort grafikkort i det andre x16-sporet, vil begge falle til x8/x8. M.2-sokkelene drives også av PCIe-baner, og i mange design deaktiverer bruk av visse PCIe x4-moduser i M.2 noen fysiske SATA-porter på hovedkortet.

Dette betyr at du, avhengig av hvordan du konfigurerer M.2- og PCIe-sporene, kan ende opp uten noen SATA-porter eller uten full båndbredde til GPU-en din . Derfor er det viktig å sjekke hovedkortets manual for å se nøyaktig hvilke kombinasjoner som deaktiverer hvilke porter, og ikke installere det blindt.

Hvordan påvirker PCIe-filallokering GPU-er, NVMe og nettverk?

På plattformer som X470 med Ryzen tilbyr CPU-en et begrenset antall PCIe-baner som deles mellom den primære GPU-en, M.2-sokler og, i mindre grad, andre spor . Brikkesettet tilbyr ekstra baner, men disse er vanligvis PCIe 2.0 eller 3.0 med en indirekte bane til CPU-en, og de deler intern båndbredde.

I praksis er det første PCIe x16-sporet vanligvis reservert for grafikkortet. Når du setter inn et andre kort i det andre x16-sporet, konfigurerer hovedkortet det som x8/x8 for å fordele de 16 tilgjengelige banene . Dette har vanligvis en ubetydelig innvirkning på moderne PCIe 3.0 GPU-er: hoppet fra x16 til x8 er knapt merkbart når det gjelder spillytelse eller typiske arbeidsbelastninger.

Hvis du prøver å sette opp to NVMe-disker i RAID 1 med en M.2 Gen3 x4 og en M.2 Gen2 x2, vil arrayet bli begrenset av den tregere disken . Den brukbare båndbredden vil være den til Gen2 x2-sokkelen, som fortsatt kan være tilstrekkelig for en hjemme-NAS, men det er en viktig faktor å vurdere. Noen ganger er det mer effektivt å bruke et PCIe-adapterkort for NVMe i et x4- eller x8-spor på brikkesettet og la M2_1-sporet være ledig for systemets SSD.

10GbE SFP+ nettverkskortet kan installeres i et PCIe x4- eller x8-spor uten problemer; den faktiske båndbredden er langt fra å mette en PCIe 3.0 x4. Det viktigste er å avgjøre om det skal plasseres i det andre x16-sporet som deles med GPU-en (tvinger x8/x8-modus) eller i et av de mindre sporene, hvis hovedkortet støtter dem med et tilstrekkelig antall baner.

Konkret eksempel: Hvordan maksimere PCIe-baner og SATA-porter?

For en NAS/hjemmelab med en Fatal1ty X470 Gaming K4 og en kompatibel Ryzen-prosessor, kan en fornuftig konfigurasjon for å maksimere baner og holde alle mulige SATA-porter i drift følge denne generelle logikken (sjekk alltid den nøyaktige manualen til hovedkortet):

• GPU (GTX 1080) i det første PCIe 3.0 x16-sporet (PCIE1), som jobber på x16 hvis det ikke er noe andre stort kort.
• Første NVMe SSD i M2_1, og utnytter PCIe Gen3 x4 som oppstartsdisk og for system/unRAID.
• 10 GbE SFP+-kort i det andre PCIe x16-sporet (PCIE4), og aksepterer at GPU og NIC deler linjer og forblir på x8/x8, noe som er mer enn nok for et GTX 1080.
• HDD SATA opptar de 5–6 SATA-portene, forutsatt at aktivering av PCIe x4-modus på M2_1 ikke deaktiverer enkelte spesifikke porter (sjekk tabellen i håndboken).
• reise M2_2 Gen2 x2 enten for en sekundær NVMe-disk med lavere prioritet, eller rett og slett gratis hvis det ikke er behov for ekstra ytelse.

I dette oppsettet ofrer du full x16-modus på GPU-en, men du får et stort PCIe-spor for 10 GbE og beholder en veldig rask NVMe-disk i M2_1-sporet. Hvis du vil ha RAID1 NVMe, har du to alternativer: akseptere flaskehalsen til M2_2 Gen2 x2, eller kjøpe et PCIe-kort for flere NVMe-disker og sette det i det andre x16-sporet, og flytte nettverkskortet til et mindre spor hvis hovedkortet tillater det.

Uansett er nøkkelen å forstå at det faktiske ytelsestapet når man nedgraderer GPU-en til x8 på PCIe 3.0 er svært lavt, mens tap av SATA-porter eller begrensninger i NVMe kan skade mye mer i en NAS eller server som er avhengig av disk-I/O.

Fra stasjonær til utvidelsesplattform: hva kan legges til via PCIe

En av de største fordelene med stasjonære PC-er fremfor bærbare datamaskiner eller konsoller er at PCIe-spor gjør datamaskinen til en slags maskinvare-"Lego"-byggekloss . Nesten alle avanserte funksjoner du måtte trenge kan legges til med et PCIe-utvidelseskort.

Typiske utvidelser som kobles til PCIe inkluderer videoopptakskort, dedikerte lydkort, grafikkort, nettverkskort, USB-kontrollere og NVMe-lagringsadaptere . Mange av disse installeres i løpet av sekunder og gjenkjennes av systemet ved oppstart, ofte med innebygd støtte eller minimale drivere.

Hvis du for eksempel vil ta opp signalet fra en konsoll eller et profesjonelt kamera, tilbyr et PCIe-opptakskort bedre båndbredde og lavere latens enn de fleste USB-løsninger. Det samme gjelder når du er ute etter lyd av høy kvalitet: et PCIe-lydkort gir deg flere innganger og bedre kontroll enn integrert lyd, ideelt for podkaster eller musikkinnspilling.

Innen grafikkbransjen er PCIe x16-sporet standarden for spill- og profesjonelle GPU-er. Bare sørg for at grafikkortets kraft er balansert med CPU-en for å unngå flaskehalser; det vil si at prosessoren ikke ikke klarer å levere nok data til kortet.

Det er også veldig vanlig å installere PCIe-kort for å legge til USB-A- eller USB-C-porter når hovedkortet har kommet til kort, eller til og med TV-tunerkort, avanserte WiFi-nettverkskort eller kort med flere M.2 SSD-er for å utvide høyytelseslagring utover M.2-en som er integrert på hovedkortet.

PCIe-spor: hva de er og hvilke typer finnes

Et PCIe-spor (Peripheral Component Interconnect Express) er det nåværende standardgrensesnittet for tilkobling av høyhastighets utvidelseskort til hovedkortet. I motsetning til eldre PCI- eller AGP-busser bruker PCIe en punkt-til-punkt seriell arkitektur : hver enhet har sin egen dedikerte kobling til hovedkortet, uten å dele en felles buss med andre komponenter.

Grafikkortspor varierer i fysisk størrelse og antall baner, som bestemmer den tilgjengelige båndbredden. De vanligste formatene er x1, x4, x8 og x16 . Flere baner betyr flere pinner og et lengre spor. En stasjonær GPU bruker vanligvis x16, mens et lyd- eller nettverkskort kan fungere utmerket i x1 eller x4.

Det interessante er at et kortere kort fysisk sett kan passe inn i et lengre spor: for eksempel fungerer et x1-kort perfekt i et x16-spor , selv om det bare bruker én bane. Det motsatte er ikke mulig, fordi et x16-kort rett og slett ikke passer inn i et x1-spor.

På generasjonsnivå har PCIe utviklet seg fra 1.0 til 6.0 (med 7.0 på vei), og doblet båndbredden per bane med hver versjonsoppgradering. Dette gir en dramatisk økning i effektiv ytelse fra generasjon til generasjon, samtidig som det samme antallet fysiske baner opprettholdes.

Hvordan PCIe-baner, båndbredde og versjoner fungerer

PCIe-arkitekturen er basert på individuelle fulldupleks-baner , som hver består av et par differensiallinjer for sending av data og en annen for mottak av data. En bane overfører data i begge retninger samtidig, og spor bygges ved å legge til baner: x1 har 1, x4 har 4, x8 har 8, og x16 har 16.

Den totale båndbredden til en PCIe-kobling avhenger av to viktige variabler: antall baner og PCIe-versjonen . For eksempel, i PCIe 3.0 har hver bane en teoretisk båndbredde på omtrent 984,6 MB/s; derfor kan et x16 PCIe 3.0-spor håndtere rundt 15,8 GB/s. I PCIe 4.0 øker båndbredden per bane til omtrent 1969 MB/s, noe som bringer x16 til nesten 31,5 GB/s, og så videre.

• PCIe 1.0~250 MB/s per kjørefelt.
• PCIe 2.0~500 MB/s per kjørefelt.
• PCIe 3.0~984,6 MB/s per kjørefelt.
• PCIe 4.0~1969 MB/s per kjørefelt.
• PCIe 5.0~3938 MB/s per kjørefelt.
• PCIe 6.0~8 GB/s per kjørefelt (takk til PAM4 og FLIT).

Siden det er bakoverkompatibelt, fungerer et PCIe 3.0-kort i et PCIe 4.0- eller 5.0-spor, men begrenset av kortets hastighet. Og omvendt: et PCIe 4.0-kort i et 3.0-spor vil operere med 3.0-hastighet. Dette forenkler oppgraderinger betraktelig og forlenger levetiden til hovedkort.

PCIe-historie og utvikling: fra PCI til 7.0

Før PCIe var den dominerende standarden PCI, introdusert av Intel tidlig på 90-tallet som en erstatning for busser som ISA, MCA, EISA og VESA. Selv om VESA var konkurransedyktig rent hastighetsmessig, vant PCI på grunn av kostnad, fleksibilitet og enkel integrering , noe som muliggjorde CPU-oppgraderinger uten å måtte redesigne hele hovedkortet.

I årevis utviklet PCI seg og økte båndbredden, men til slutt møtte det på begrensningene til den delte bussen, spesielt med fremveksten av kraftige grafikkort. Mellomløsningen var AGP, en dedikert port for GPU-en, inntil PCI Express endelig kom rundt 2004 som en fullstendig erstatning og redesign av tilkoblingsfilosofien.

PCIe 1.0 introduserte punkt-til-punkt serielle lenker med 2,5 GT/s (gigaoverføringer per sekund) per bane og 8b/10b-koding, noe som ga 250 MB/s brukbar gjennomstrømning. PCIe 2.0 doblet hastigheten til 5 GT/s og 500 MB/s per bane. Den største revolusjonen kom med PCIe 3.0, som byttet til 128b/130b-koding , noe som reduserte overhead betraktelig og økte gjennomstrømningen til nesten 1 GB/s per bane.

PCIe 4.0 og 5.0 fortsatte trenden med å doble hastigheten samtidig som de opprettholdt 128b/130b-kodingen, og økte x16-båndbredden til henholdsvis 31,5 GB/s og 63 GB/s. Disse versjonene har blitt essensielle innen AI, datasentre, 400/800 GbE-nettverk og ultrarask lagring.

PCIe 6.0 introduserer PAM4-signalering og FLIT (Flow Control Unit)-transport, som sammen med FEC (Forward Error Correction) tillater hastigheter på opptil 64 GT/s med en teoretisk gjennomstrømning på 256 GB/s ved x16, samtidig som bakoverkompatibilitet opprettholdes. PCIe 7.0, som for tiden er under utvikling, sikter mot hastigheter på opptil 128 GT/s og opptil 512 GB/s ved x16, også ved bruk av PAM4 og svært effektiv 1b/1b-koding.

Produsenter som Synopsys har allerede annonsert komplette IP-løsninger for PCIe 7.0 , med integrerte kontrollere, PHY-er og sikkerhetsmoduler, designet for avanserte produksjonsprosesser og tett knyttet til CXL og massive AI-applikasjoner. Selv om det fortsatt vil ta år før det når forbrukermarkedet, indikerer det tydelig retningen høyytelses-sammenkobling er på vei.

Trenger du virkelig mer PCIe-hastighet for GPU-en din?

Et veldig vanlig spørsmål er om et grafikkort yter bedre rett og slett fordi det er i et nyere PCIe-spor eller et med flere baner. Realiteten i dag er at ingen forbruker-GPU metter båndbredden til en PCIe 4.0 x16-lenke , og i de fleste tilfeller ikke engang den til en PCIe 3.0 x16-lenke.

Et moderne grafikkort bruker hovedsakelig sin egen VRAM, som vanligvis er raskere enn system-RAM. PCIe-bussen brukes hovedsakelig til å overføre teksturer, kommandodata, kommunisere med CPU-en og få tilgang til delt minne i spesifikke scenarier . Derfor resulterer det vanligvis bare i noen få prosentpoeng forskjell å redusere hastigheten fra x16 til x8 i PCIe 3.0, ofte innenfor feilmarginen.

Det finnes tilfeller der begrensningen er merkbar, for eksempel med GPU-er som kun har x8 per design, eller når et kraftig kort tvinges til å jobbe med x4 på en eldre versjon av standarden. Et Radeon RX 5500 XT, begrenset til PCIe 4.0 x8 eller 3.0 x8, opplever et mye større ytelsestap når det faller til 3.0 x8 sammenlignet med 4.0 x8 fordi det ikke bruker alle 16 banene og er mer avhengig av båndbredden per bane.

I tester med high-end-kort som RTX 5090 har det vist seg minimal forskjell i ytelse å kjøre på PCIe 5.0 x16 versus x8, mens en drastisk reduksjon til PCIe 3.0 x4 forårsaker ytelsesfall på rundt 25 % i visse renderings- og AI-arbeidsbelastninger. Med andre ord: bekymre deg mer for å unngå nedgradering til x4 på en eldre versjon enn om GPU-en din kjører på x16 eller x8.

Virkningen av bruk av riserkabler og vertikal GPU-montering

Glasssidede tårn har popularisert vertikal grafikkortmontering ved hjelp av PCIe-riserkabler . Det ser spektakulært ut, men det er en betydelig risiko: ikke alle riserkabler er skapt like, og en billig modell kan begrense deg til PCIe 3.0 x4 eller introdusere signalproblemer, noe som resulterer i ytelsestap.

For å montere GPU-en vertikalt med trygghet, anbefales det å se etter PCIe-forlengere som er sertifisert for minst PCIe 4.0 x16 , og på plattformer av nyeste generasjon, til og med PCIe 5.0 x16. Kabler av høy kvalitet opprettholder signalintegriteten og gjør det faktiske ytelsestapet praktisk talt ikke-eksisterende, utover en minimal, umerkelig margin.

Motsatt kan en billig riserkabel med dårlig skjerming eller utdaterte spesifikasjoner føre til at hovedkortet og GPU-en må forhandle om en tilkobling med lavere hastighet eller færre baner, noe som resulterer i FPS-fall, mikrostakking eller til og med ustabilitet . Det er alltid lurt å sjekke kabelens offisielle spesifikasjoner før kjøp.

Hvis du vil sjekke hastigheten og antall baner grafikkortet ditt kjører på i ditt nåværende system, viser verktøy som GPU-Z feltet «Bussgrensesnitt» , der du kan se i sanntid om GPU-en kjører på PCIe 3.0 x16, 4.0 x8 osv. Dette er veldig nyttig for å oppdage uventede begrensninger forårsaket av et riserkort, et sekundært spor eller en feil BIOS-konfigurasjon.

M.2-konfigurasjon og forhold til SATA-porter

En detalj som ofte går ubemerket hen, er at M.2-sokler deler ressurser med SATA-porter på mange hovedkort. Dette betyr at aktivering av en M.2-disk i PCIe x4-modus kan deaktivere visse fysiske SATA-porter . Denne informasjonen finnes vanligvis i håndboken og noen ganger også i BIOS/UEFI-meldinger.

For eksempel, på hovedkort som ASUS ROG Maximus IX Formula, advarer BIOS om at SATA-port 5 og 6 er deaktivert hvis PCIe x4-modus er aktivert for M.2-sporet . UEFI viser til og med en spesifikk "M.2-båndbreddekonfigurasjon"-skjerm som tydelig indikerer ytelseskompromissene som er involvert i hver modus.

Moralen i historien er at før man blindt distribuerer en NVMe-disk i en M.2-konfigurasjon, anbefales det å få tilgang til UEFI, finne M.2-konfigurasjonsdelen og sjekke driftsmodusen: PCIe x4, x2 eller SATA . Bytte mellom moduser påvirker ikke bare NVMe-ytelsen, men bestemmer også hvilke SATA-porter som forblir aktive.

I en NAS/hjemmelab med flere harddisker er dette kritisk. Feil konfigurasjon kan føre til at to disker forsvinner fra RAID-arrayet når en andre NVMe-disk installeres, fordi brikkesettet har kuttet portene sine for å frigjøre baner for M.2-disken. Sjekk alltid kompatibilitetstabellen i håndboken for å unngå overraskelser.

Fysisk installasjon og vedlikehold av PCIe-kort

Det er ganske enkelt å installere et PCIe-kort, men det er alltid lurt å følge en bestemt rekkefølge for å unngå kontakt eller strømproblemer . Først slår du av PC-en, kobler fra strømkabelen og åpner kabinettet. Finn riktig PCIe-spor (for eksempel det øverste x16-sporet for GPU-en) og fjerner den tilhørende bakplaten.

Deretter justerer du kortet med sporet og trykker det godt, men forsiktig, til det klikker på plass. Mange hovedkort har en liten lås på enden av sporet som klikker når kortet er ordentlig på plass. Skru deretter kortets metallbrakett til kabinettet for å feste det.

For grafikkort eller andre enheter som krever ekstra strøm, kobler du PCIe-kablene fra strømforsyningen. Når alt er satt sammen, lukker du kabinettet, kobler til datamaskinen og starter den opp. Operativsystemet vil vanligvis oppdage det nye kortet automatisk , installere generiske drivere eller la deg installere produsentens drivere.

Når det gjelder vedlikehold, er det viktigste å holde sporene og kortene støvfrie, helst med trykkluft . Å kontrollere regelmessig at skruene ikke har løsnet og at det ikke er tegn til korrosjon eller fysisk skade, bidrar til å forhindre periodiske feil. Det er også god praksis å holde BIOS/UEFI oppdatert, ettersom mange versjoner forbedrer kompatibiliteten og ytelsen til PCIe-banene. Hvis du er i tvil om strømforsyningen, kan du se veiledningen vår om hvordan du finner ut om en strømforsyning er god og har tilstrekkelig kapasitet.

Typiske PCIe-problemer og hvordan du løser dem

De vanligste problemene når du installerer PCIe-kort er vanligvis relatert til feil kortplassering, utilstrekkelig strøm eller feil drivere . Hvis systemet ikke gjenkjenner kortet, er det første du må gjøre å slå av datamaskinen, ta ut kortet og sette det forsiktig inn igjen. Sørg for at det er helt justert og skjøvet helt inn.

Hvis det aktuelle kortet er et kraftig GPU eller en kraftig kontroller, anbefales det å sjekke at alle PCIe-strømkontakter er riktig tilkoblet , og at strømforsyningen har tilstrekkelig effekt. Noen ganger vil en strømforsyning med akkurat nok effekt føre til at systemet starter opp, men kortet fungerer uregelmessig.

Ytelsesproblemer kan oppstå fordi kortet opererer i et begrenset spor (for eksempel en GPU i et x4-brikkesettspor) eller fordi BIOS har konfigurert koblingen til en eldre PCIe-versjon. Verktøy som GPU-Z eller Enhetsbehandling kan hjelpe deg med å se koblingshastigheten og antall aktive baner.

I noen tilfeller kan visse kombinasjoner av hovedkort og grafikkort kreve en BIOS-oppdatering for å rette opp feil i PCIe-tilkoblingen. Hvis problemet vedvarer etter å ha kontrollert sporet, kablene og driverne, er det lurt å teste kortet i et annet spor eller til og med i en annen datamaskin for å finne ut om problemet ligger hos hovedkortet eller selve kortet.

Slik planlegger du en PCIe-konfigurasjon med fremtiden i tankene

Hvis du bygger en PC, NAS eller arbeidsstasjon nå og vil at den skal vare i årevis, er det fornuftig å velge et hovedkort som tilbyr flere PCIe-spor med høy hastighet og støtte for nyere versjoner , for eksempel PCIe 4.0 eller 5.0, selv om den nåværende maskinvaren din ikke utnytter dem fullt ut ennå.

Utover GPU-en, bør du vurdere potensielle fremtidige oppgraderinger: flere NVMe-disker, 10/25/40 GbE-kort, opptakskort, HBA-kontrollere osv. Et godt hovedkort med tilstrekkelig med baner, godt fordelte fysiske spor og en tydelig layout mellom CPU og brikkesett vil gi deg plass til alle disse oppgraderingene uten å måtte endre plattform.

Det er også viktig å dimensjonere strømforsyningen riktig fra starten av, med nok takhøyde for fremtidige krevende grafikkort. Og sørg for at kabinettet har tilstrekkelig luftstrøm for flere utvidelseskort, spesielt hvis du kombinerer en kraftig GPU, et nettverkskort med høy effekt og flere varmegenererende NVMe-disker.

Med alt vi har sett, er det tydelig at det å vite hvordan PCIe-baner er distribuert, hvilke begrensninger hver versjon har, og hvordan M.2-, SATA- og utvidelsesspor samhandler, lar deg bygge svært komplette systemer: fra en beskjeden hjemme-NAS med 6 harddisker, 2 NVMe-disker og et 10 GbE-nettverk til arbeidsstasjoner med flere GPU-er og høyytelseslagring, alltid få mest mulig ut av alle tilgjengelige baner og unngå overraskelser når du legger til ny maskinvare.