Опоравак RAID-а: Критичне грешке, решења и најбоље праксе

Информатек Дигитал » Средства » Опоравак RAID-а: Критичне грешке, решења и најбоље праксе

Када RAID систем откаже, првих неколико минута је критично. У том позиву „златни сат“ након пресуде Већина људских грешака које претварају проблем који се може поправити у неповратну катастрофу дешавају се у овим ситуацијама. Слепо замењивање дискова, стална поновна покретања или покушаји поновне изградње без сазнања шта није у реду често су најбржи пут до потпуног губитка података.

Зашто је опоравак RAID-а тако осетљив?

У многим критичним инцидентима, губитак информација није узрокован почетним кваром хардвера, већ накнадним кваровима хардвера. исхитрене акције током првог сатаТај период је кључан: диск мења позицију, иницијализација се покреће грешком, поновна изградња се присилно изводи или се систем покреће са непотпуне резервне копије на истом низу за складиштење, и оно што је некада био сложен, али управљив проблем постаје готово немогућа загонетка.

Најчешће ризичне ситуације укључују замена дискова погрешним редоследом (у RAID 0, 1, 5, 6, 10, итд.), замена контролера другим моделом без клонирања или документовања конфигурације, форсирање дискова „онлајн“ без анализе стварног стања, иницијализација погрешних томова или покретање реконструкција које остају недовршене и додатно квари унутрашњу структуру низа.

Такође су посебно опасни резервна копија враћа директно на оштећени системМиграције складишта типа VMware Storage vMotion са нестабилним низом и било која операција која уписује нове метаподатке конфигурације RAID-а на дискове са потенцијално обновљивим информацијама.

RAID низ је основа већине физичких сервера, NAS уређаја и SAN мрежа, и није увек јасно од самог почетка да проблем потиче из самог низа. Стога, када сте у недоумици, најмудрије деловање је... заустави свако писање на дисковеДокументујте шта се догодило што је детаљније могуће и потражите савет од стручњака за опоравак података пре него што се дотакнете било чега другог.

Типичне људске грешке и основне добре праксе

Када RAID уђе у деградирано стање, један или више дискова откаже или NAS неће да се покрене, инстинктивна реакција је обично да се наставе покушавати „док нешто не проради“. Овај приступ скоро увек на крају погорша проблем јер Свака акција оставља траг на дисковима. и може пребрисати паритете, метаподатке или још увек нетакнуте корисничке податке.

Међу најчешћим грешкама које компликују опоравак су радње као што су Конфигуришите нови RAID користећи исти контролер и исте дисковеПокушај уметања дискова у други одељак за уређај да би се „видело да ли их препознаје“ или промена физичког редоследа лежишта је још једна тактика. У великом проценту случајева, ове радње преписују оригиналну конфигурацију, уништавају траке парности и драстично смањују шансе за успех.

Још једна уобичајена лоша пракса је небележење било чега што се дешава. У сложеном сценарију квара, ово је од виталног значаја. хронолошки забележите све догађаје: нестанак струје, системске порукеПромене диска, покушаји поновне обнове, ажурирања фирмвера итд. Ове информације затим помажу специјализованим техничарима да склопе слагалицу.

Подједнако је важно документовати и сачувати тачна позиција сваког диска у низуМењање лежишта за дискове „на око“ или бацање наводно мртвих дискова је непромишљено: ако касније треба да поново изградите RAID у лабораторији, знање који је диск био у ком слоту и поседовање свих оригиналних дискова (чак и замењених) може направити велику разлику.

Као опште правило, у случају квара RAID-а, треба следити следећу процедуру: Зауставите рачунар, немојте ништа реконфигурисати, држите све дискове означенеПрикупите што више информација о инциденту и, ако су подаци важни, контактирајте професионалну службу за опоравак пре него што наставите са експериментисањем.

Како професионалци приступају опоравку RAID система

Компаније специјализоване за опоравак података на RAID-у раде са високо структуриране процедуре јер Свака техничка одлука мора минимизирати ризик од додатне штетеУ типичном случају са више дискова и терабајтима података у питању, сваки импровизовани корак може бити скуп.

Веома илустративан пример из стварног света је RAID низ са дванаест дискова и приближно 12 TB података. Резервна копија није била правилно управљана, тако да је једино одрживо решење било прибегавање... Професионална компанија за опоравак података са RAID системаСлучај је био хитан; операције је требало наставити што је пре могуће, а низ је већ ушао у критично стање након што су два диска отказала током реконфигурације.

У таквим ситуацијама, стручњаци обично почињу са клонирајте све дискове који и даље реагују и увек раде на копијама, а не на оригиналима. Истовремено, покушавају да поправе, колико је то могуће, физички оштећене јединице, било кроз лабораторијске интервенције (чишћење комора, замена глава, донорска електроника итд.) или напредним техникама делимичног очитавања.

У случају 12 TB, највећи проблем је био тај што је Реконфигурација RAID-а је започета пре другог квараКонтролер је већ делимично поново израчунао нове паритете. Релативна предност је била у томе што је други диск отказао у раним фазама процеса, тако да је велики део старе логичке структуре остао реконструисан.

Након опоравка једног од оштећених дискова и креирања комплетне копије, изазов је био ручно реконструишите логичку структуру низаРедослед дискова, величина блокова, расподела паритета, могуће промене током процеса… Овај рад, који може трајати неколико дана анализе, омогућио нам је да опоравимо око 90% података, што се, с обзиром на околности, сматра високом стопом успеха у опоравку RAID-а.

Професионалне услуге: шта обично нуде и како функционишу

Компаније специјализоване за опоравак података на RAID-у обично нуде брза дијагноза без почетних трошковапосебно када су у питању критични сервери или NAS уређаји у продукцији. У неким случајевима, обавезују се да ће проценити проблем у року од неколико сати, послати извештај о изводљивости и понуду са фиксном ценом, и применити политику „без опоравка, без накнаде“.

Типична услуга почиње када купац затражи Бесплатна понуда за опоравак вашег RAID-аУ овој почетној фази, прикупљају се информације о типу низа (RAID 0, 1, 5, 6, 10, JBOD, итд.), броју дискова, систем датотека (на пример ext4, Btrfs, XFS, HFS+, NTFS…), укључени хардвер (Synology NAS, QNAP, брендирани сервери, SAN низови…) и детаљан опис симптома и до сада предузетих радњи.

Када је студија прихваћена, компанија обично управља Бесплатно преузимање опреме или дискова, са прецизним упутствима за паковање: користите антистатичко или подстављено паковање, ставите уређај у чврсту кутију са материјалом који апсорбује ударце, спречите померање дискова током транспорта и добро обележите бројем апликације.

Када стигну у лабораторију, техничари изводе физичка и логичка дијагноза сваког дискаОни креирају слике бит по бит кад год је то могуће, процењују стање сектора и одлучују како да виртуелно реконструишу RAID. Тек тада се представља коначна понуда са процењеним процентом опорављивих података и индикативним временским роковима рада.

Ако клијент одобри, почиње стварни процес опоравка. Након стабилизације дискова и подешавања RAID-а у контролисаном окружењу, стручњаци генеришу листу доступних датотека. До тог тренутка, купац обично још ништа није платио.Само ако је листа задовољавајућа, подаци се копирају на нови медијум (екстерни диск, заменски NAS итд.) и шаљу назад купцу, скоро увек са укљученом доставом.

Основе: како RAID функционише изнутра

RAID систем је, једноставно речено, скуп физичких дискова који се оперативном систему представљају као једна логичка јединицаКључ лежи у начину дистрибуције података и, на крају, паритету између дискова како би се добиле перформансе, капацитет или толеранција на грешке, или комбинација свега овога.

RAID технологија омогућава дистрибуирајте информације у опсезима или блоковима Ови подаци се паралелно записују на више дискова, што убрзава приступ комбиновањем преноса. Поред тога, редундантни подаци (паритет) се чувају на одређеним нивоима како би се поново израчунале информације на неисправном диску без прекида услуге, под условом да се не прекораче ограничења отказа наведена у дизајну низа.

Још једна важна предност је могућност да замена дискова током рада У многим системима, неисправан диск се може физички уклонити и заменити без искључивања сервера или низа за складиштење података, што омогућава контролеру да реконструише изгубљене податке на новом диску у позадини док систем наставља да ради.

Не постоји један „савршен RAID ниво“ за све сценарије. Сваки ниво даје приоритет другачијој равнотежи између перформансе, безбедност и употребљив капацитетЗато је толико важно разумети која је врста RAID-а подешена пре него што покушате било какву поправку или опоравак.

Када нешто крене наопако, сам RAID обично може да реконструише податке ако је испуњена планирана толеранција на грешке. Међутим, када се узастопно појави неколико физичких, логичких или људских проблема, низ може изгубити кохерентност и постати неспособан да се сам опорави, што захтева стручну интервенцију.

Уобичајени RAID нивои и њихове карактеристике

Сваки RAID ниво управља партиционисање података и паритет између дисковаТо се претвара у веома јасне разлике у понашању у случају кварова. Разумевање ових разлика помаже у процени стварног ризика од квара и вероватноће успешног опоравка.

RAID 0, познат по својим високим перформансама, дистрибуира податке у тракама на најмање два диска без чувања било каквих сувишних информација. То значи да Губитак једног диска подразумева губитак целог волуменајер су делови сваке датотеке расути по свим дисковима. Његова главна предност је брзина, али са становишта безбедности података, веома је крхак.

RAID 1, или огледало, одржава идентичне копије информација на два дискаАко један откаже, други наставља да ради без проблема. Једноставан је, поуздан и нуди добре брзине читања, иако жртвује употребљиви капацитет, јер је расположиви простор еквивалентан простору једног диска у пару. Приликом опоравка, ако је барем један од дискова нетакнут, ствари обично знатно олакшавају.

Постоје и нивои попут RAID 3 и RAID 4, данас мање распрострањени, који комбинују дискове са подацима са диском намењеним паритет складиштаУ RAID 3 конфигурацији, приступ дисковима са подацима је истовремен и диск за проверу парности постаје потенцијално уско грло, док је у RAID 4 дозвољен независнији приступ сваком диску са подацима, што побољшава перформансе под одређеним оптерећењима.

RAID 5 је вероватно најшире коришћен у серверским и NAS окружењима. Дистрибуира податке у тракама на више дискова. распршује блокове парности распоређене међу свим јединицамабез намене диска искључиво за ту функцију. Ова организација омогућава толерисање квара диска и реконструкцију његових информација на новом заменском диску, под условом да се током реконструкције не догоди други квар.

RAID 6 безбедност подиже на виши ниво. сачувајте два блока парности за сваки скуп податакаОво му омогућава да издржи истовремени квар до два диска без губитка података. Потребан је већи капацитет диска за паритет и већа рачунарска снага, али заузврат нуди много већу маргину грешке у случају уланчаних кварова, што је веома цењена карактеристика код великих низова.

Поред ових „класичних“ нивоа, постоје комбинације као што су RAID 10 (огледало + пругање), RAID 50 или 60, и линеарне или JBOD конфигурације, где Дискови су једноставно спојени да би формирали једну велику запреминубез стварне редундантности. Ни у једном од ових случајева RAID не замењује добро осмишљен систем резервних копија.

Типични кварови RAID система и када опоравак постане компликован

RAID системи имају репутацију робусности, и то с правом, али нису имуни на проблеме. У пракси се јављају проблеми. физички, логички и људски неуспесикоје се често мешају и доводе до деликатних ситуација са становишта опоравка.

Са логичког становишта, једна од најозбиљнијих препрека је губитак или оштећење паритетних опсегаКада се метаподаци који указују на то како се подаци дистрибуирају и паритет између дискова деградирају, RAID више не може сам да регенерише информације и потребна је спољна интервенција да би се те траке лоцирале и обновиле ручно или полуаутоматски.

Што се тиче хардвера, статистика показује да мали проценат дискова у било којој датој инфраструктури може физички да откаже сваке године, око 2-3%. У низу са много дискова, то значи да шансе за отказ бар једног нису занемарљиве. Механички кварови, скокови напона, неисправан фирмвер, екстремне температуре или компоненте лошег квалитета То су уобичајени узроци физичких инцидената.

Проблеми се погоршавају када се догоди други квар током поновне изградње, посебно у RAID 5 или конфигурацијама са много дискова. Ако, док систем регенерише податке са неисправног диска, други диск почне да има озбиљне грешке, низ може прећи из деградираног у потпуно неприступачан. Када дискови откажу више него што је очекиваноУнутрашња логика RAID-а више није довољна и морају се користити напредне технике опоравка.

Људска грешка употпуњује све: одлагање замене чврстог диска који је већ давао упозорења, игнорисање аларма контролера, Неправилно искључивање система током поновљених нестанака струје, инсталирајте погрешне драјвереПрисиљавање сталних поновних покретања или примена процедура одржавања без скорашњих резервних копија су праксе које значајно повећавају ризик од губитка података.

Употреба специјализованог софтвера: практичан пример са R-Studio-ом

Када RAID више није доступан преко оригиналног контролера, једна од техничких опција је виртуелно реконструишите низ помоћу специјализованог софтвераАлати попут R-Studio-а вам омогућавају да детектујете RAID-ове који су и даље конзистентни као да су нормални томови, а у озбиљнијим случајевима, да подесите виртуелне RAID-ове са дискова или слика дискова.

Принцип рада се састоји у стварању виртуелни RAID заснован на физичким дисковима или њиховим копијама сликаОво се ради ручним уносом параметара као што су број дискова, величина блока, почетни офсет, тип RAID-а (0, 1, 4, 5, 6, 10, JBOD, ZFS RAIDZ, RAIDZ2, итд.) и редослед дискова. Када софтвер детектује важећи фајл систем, овај виртуелни RAID се представља као навигациони волумен са којег се датотеке могу навести и опоравити.

На пример, за једноставан RAID 5 низ од три диска са блоковима од 64 KB и „асинхроним левим“ редоследом парности, било би довољно да Изаберите три диска исправним редоследомНаведите величину блока, подесите одговарајући офсет и пустите алат да идентификује партицију. Одатле можете отворити волумен, прегледати фасцикле, прегледати датотеке (посебно велике) и проверити да ли је структура правилно монтирана.

У сложенијим конфигурацијама, као што је RAID 5 са ​​блоковима од 4KB и прилагођеним шаблоном парности, неопходно је ручно дефинишите табелу редоследа блоковаОво подразумева унос, ред по ред, који диск садржи сваки блок података или вредност парности, потврђујући да је секвенца конзистентна. Софтвер вас упозорава када открије недоследности у овој табели како би се оне могле исправити пре примене промена.

Једна важна мера предострожности је да су ови виртуелни RAID-ови чисто логички објекти унутар софтвераОни не записују ништа на оригиналне дискове са којих су креирани. Ово омогућава експериментисање са различитим комбинацијама параметара док се не пронађе она која исправно обнавља фајл систем без ризика од погоршања штете.

У случајевима када недостаје физички диск, неки алати вам омогућавају да га замените „недостајућим диском“ или празним блоком простора, симулирајући понашање деградираног RAID-а. Упркос томе, да би опоравак датотека био поуздан, сви параметри морају бити исправни; једна погрешна величина блока или погрешно израчунат офсет могу оштетити издвојене датотеке, па је отуда важност техничке стручности.

RAID типови и њихово понашање у случају губитка података

Поред класичних нивоа, данашњи RAID системи подржавају широк избор хибридних и линеарних конфигурацијаСваки од њих представља различите изазове када је у питању опоравак информација након критичног квара.

У RAID 0 (чисто стрипинг) низу, подаци су фрагментирани у мале групе које се секвенцијално записују на све дискове у низу. Укупан капацитет је збир свих дискова, али Нема никаквог редундантног пословањаАко један од дискова откаже, цео волумен постаје неупотребљив, а једина опција опоравка укључује напредне технике које покушавају да реконструишу оно што се може спасити са преживелих дискова.

RAID 1 увек одржава идентичне копије свих података на сваком диску огледалаОва једноставност је велика предност у процесима опоравка, јер ако један од дискова остане нетакнут, његовим подацима се може директно приступити као да је у питању независан диск, или се његов садржај може копирати на нови диск, а огледало касније поново направити.

У RAID нивоима као што су RAID 4 и RAID 5, где је паритет распоређен различито, употребљиви капацитет је обично збир свих дискова умањен за капацитет еквивалентан једном од њих. потребно је математички реконструисати податке на диску из паритета То је оно што компликује опоравак када се кварови дешавају узастопно и губи се више дискова него што дизајн дозвољава.

Линеарне или JBOD (Just a Bunch Of Disks - само гомила дискова) конфигурације групишу неколико дискова истих или различитих величина како би формирале једну, већу логичку јединицу без паралелне дистрибуције података. Оне не нуде значајна побољшања перформанси или редундантност. Ако било који диск откаже, губи се приступ целом волумену.У овим случајевима, опоравак подразумева рад на сваком диску и ручну реконструкцију садржаја из сегмената који нису погођени.

Сви ови сценарији истичу да, колико год напредне биле технологије складиштења, Спољне и верификоване резервне копије остају неопходне.RAID смањује или елиминише застоје у случају одређених кварова, али не штити од случајних брисања, логичке корупције, напада злонамерног софтвера или грешака у конфигурацији које уништавају информације на нивоу датотечног система.

Кључни савети за минимизирање ризика и заштиту ваших података

Прва препорука, колико год очигледна изгледала, јесте одржавајте редовну политику прављења резервних копија то не зависи од самог RAID-а. Ово укључује сервере, радне станице, паметне телефоне, NAS системе и било који други уређај где се чувају вредни подаци. Само на овај начин, у случају озбиљног квара, услуга се може обновити без ослањања на успех форензичког опоравка.

Ако се инцидент и даље догоди, а нема употребљиве резервне копије, најразумнији начин деловања је избегавајте сваки покушај „кућних“ поправки Без јасног разумевања корака и њихових последица, препоручљиво је консултовати се са стручњацима за опоравак података пре покретања алата за поправку система датотека, покретања аутоматске реконструкције или замене дискова између лежишта. Детаљно им објасните ситуацију.

Такође је неопходно обратите пажњу на ране знаке неуспехаДискови који почињу да приказују прерасподељене секторе, контролери који генеришу упозорења, системски логови са упозорењима о улазно/излазним операцијама, низови за складиштење који означавају низ као деградиран... Игнорисање ових симптома из лењости или страха од заустављања сервиса је обично увод у много озбиљнији и скупљи квар.

Коначно, када је вредност података велика, корисно је унапред идентификовати поуздани добављач услуга опоравка податакаКада дође време, директан контакт скраћује време реакције, омогућава примање прецизних упутстава од самог почетка и повећава шансе за чување што више информација.

Искуство акумулирано у безброј случајева показује да је комбинација одговарајућег RAID дизајна, поузданих резервних копија, мирног реаговања на квар и стручне подршке када је потребно оно што заиста прави разлику између контролисаног страха и катастрофалног губитка података.