Стари системи за съхранение и еволюцията на устройствата за данни

Информатек Дигитал » Ресурси » Стари системи за съхранение и еволюцията на устройствата за данни

През цялата история човечеството е измисляло всякакви трикове и устройства за съхранение на информация : от глинени плочки и перфокартони до облаци от данни, разпръснати по целия свят. Обемът на данните, които генерираме днес, е толкова потресаващ, че мозъците ни, колкото и да са еволюирали, не успяват и се нуждаят от технологична помощ.

Разбирането как сме преминали от няколко килобайта в метален шкаф до терабайти в джобовете си и зетабайти в разпределени центрове за данни не е просто исторически куриоз: то обяснява защо работим по начина, по който го правим, как консумираме дигитално забавление и какви рискове имаме от загуба на спомени, документи или знания, ако изберем грешен носител за съхранение.

От човешката памет до първите машини за съхранение на данни

Преди да обсъдим дискове, ленти или облаци, си струва да се помни, че първото устройство за съхранение е човешкият мозък, с неговата ограничена и несъвършена биологична памет . Еволюцията е увеличила неговия размер и капацитет: видове като Australopithecus afarensis са имали мозък от около 400-500 cm³, Homo habilis е достигал 600-700 cm³, Homo erectus е достигал 800-1100 cm³, а неандерталците са били около 1200-1600 cm³ . Съвременните хора, Homo sapiens, имат мозък от около 1230 cm³.

Този скок ни позволи да произвеждаме инструменти, да създаваме култури, ритуали и сложни езици , но паметта остава крехка: ние забравяме, изкривяваме спомените и не сме в състояние да се справим с настоящата лавина от данни. Оттук идва и необходимостта от разработване на външни устройства, които съхраняват информацията стабилно , без да зависят от нашите неврони.

Перфокарти: езикът на дупките

Първият голям скок към цифровото съхранение е механичен: перфокарти . През 1725 г. французинът Базил Бушон разработва система от перфорирани карти за управление на станове. Това не е изчисление в съвременния смисъл, но е метод за кодиране и повторно използване на инструкции.

През 1837 г. британският математик Чарлз Бабидж проектира своята известна Аналитична машина - изчислителна машина с движещи се части, която използва перфокарти както за команди, така и за резултати. Дупките действат като превключватели за включване/изключване , предвиждайки двоичен код.

По-късно американецът Херман Холерит приложил тази идея на практика със своята „Аналитична машина за преброяване“: перфорираните отвори представлявали инструкции, а също и данни, които машината можела да чете автоматично. В продължение на десетилетия перфокартите били стандартният носител за съхранение на програми и данни в много компютри.

От 60-те години на миналия век нататък те започват да бъдат измествани от магнитни технологии, въпреки че продължават да се използват чак до 80-те години на миналия век за задачи като стандартизирани тестове или електронно гласуване върху перфорирана хартия.

Началото на магнетизма: ленти, барабани и сърцевини

През 50-те години на миналия век светът на компютрите възприе магнетизма за съхранение на информация. Основната идея е проста: покриване на среда с намагнитващ се материал и организиране на малки домейни (диполи), които представляват битове.

През 1928 г. немският инженер Фриц Пфльомер патентова магнитна лента , вдъхновен от магнитния кабел на Валдемар Поулсен. През 1965 г. Mohawk Data Sciences представя енкодер с магнитна лента, предназначен постепенно да замени перфокартите . Лентите предлагат по-голям капацитет на по-ниска цена, въпреки че достъпът остава последователен.

През 1932 г. австриецът Густав Таушек изобретява магнитния барабан - цилиндър, покрит с магнитен материал. Тези барабани могат да съхраняват около десет хиляди думи и са директни предшественици на съвременните твърди дискове, предлагайки по-бърз достъп от лентите.

Приблизително по същото време се появяват технологии за основна памет. Между края на 40-те и 50-те години на миналия век е разработена памет с магнитно ядро , наричана още тороидна памет: малки пръстени от феромагнитен материал, през които преминават проводими проводници. Всяко ядро ​​съхранява един бит и магнитното му състояние може да се чете и записва бързо.

През 1953 г. MIT придобива патента и създава компютъра Whirlwind , пионер в използването на магнитно-ядрена памет като RAM. Той е много по-бърз и по-надежден от перфокартите, но производството му е сложно и скъпо , изискващо много прецизен и трудоемък монтаж.

Електронни памети: от тръбата на Уилямс до полупроводника

Преди транзисторите да революционизират всичко, е имало междинни решения за електронно съхранение. През 1946 г. професор Фредерик К. Уилямс и Том Килбърн разработват така наречената тръба на Уилямс в университета в Манчестър. Това е модифицирана катодно-лъчева тръба, която позволява съхраняването на двоични данни като зарядни модели на екрана . Тя е била използвана като RAM в ранните компютри със съхранявана програма.

През 1948 г. се появява друга необичайна технология: Selectron , термоионна клапа, способна да функционира като памет с произволен достъп . Тя е разработена от Ян А. Райхман и неговия екип в Radio Corporation of America (RCA). Въпреки че е технически интересна, сложността и цената ѝ значително ограничават приемането ѝ.

През 1949 г. е въведена паметта със закъснителна линия , базирана на използването на времето, необходимо на сигнала да се разпространи през физическа среда (например живак или кварц). Битовете са кодирани като импулси, които циркулират непрекъснато през средата; това е гениално решение, но не много гъвкаво в сравнение с по-късната RAM памет.

В края на 50-те години на миналия век, магнитната памет се превръща в доминираща RAM памет, докато полупроводниците не започват да се появяват през 60-те и 70-те години на миналия век . През 1966 г. новосформираната Intel започва да продава 2000-битови полупроводникови чипове памет , където всяка клетка съдържа миниатюрни транзистори или кондензатори.

През 1966 г. се появява и DRAM (динамична памет с произволен достъп) . В DRAM всеки бит се съхранява като електрически заряд в кондензатор . Това е енергозависима памет: ако захранването се прекъсне, информацията се губи. Въпреки това, тя е много плътна и евтина, така че се превръща в стандартна основна памет в персоналните компютри и сървърите.

За разлика от това, ROM (Read-Only Memory) е програмирана постоянно и запазва данни дори когато устройството е изключено, което е много полезно за съхранение на фърмуер и процедури за зареждане.

Усъвършенствани магнитни иновации: Twistor и Bubble Memory

През 1957 г. изследователят Андрю Бобек изобретява Twistor памет в Bell Labs . Тази технология увива магнитна лента около проводим проводник , вместо да използва тороидални сърцевини, което намалява теглото, консумацията на енергия и производствените разходи.

Bell Labs представи Twistor като превъзходна алтернатива на магнитните ядра: по-евтина, по-лека и по-лесна за производство . Търговският му прозорец обаче беше кратък, тъй като скоро се появиха по-компактни и мащабируеми полупроводникови RAM чипове.

Въз основа на това изследване, Бобек разработва известната технология „Памет на мехурчетата“ през 1980 г. Тази технология използва много тънък филм от магнитен материал, в който се образуват малки намагнетизирани области, „мехурчета“ , всяка от които представлява бит. Тя е енергонезависима и доста здрава , макар и трудна за производство в голям мащаб.

Магнитни дискове и ленти: от IBM 350 до флопи диска

Големият скок към това, с което сме познати днес, дойде с магнитните дискове . През 1951 г. UNIVAC I вече включваше лентови устройства, способни да съхраняват до 128 думи на инч. Но кралят на съвременното парти беше твърдият диск.

През 1956 г. IBM пуска на пазара IBM 350 , считан за първия модерен твърд диск. Той е имал капацитет от около 4,4 MB , състоял се е от петдесет 24-инчови плаки, въртящи се със скорост 1200 оборота в минута, и е бил с размерите на хладилник, тежащ над тон. Въпреки това, той е предлагал много бърз произволен достъп в сравнение с лентите.

С течение на времето подобренията в технологията за магнитен запис доведоха до увеличаване на капацитета на твърдите дискове, намаляване на цената им и миниатюризиране , което в крайна сметка доведе до днешните настолни и лаптопови твърди дискове с няколко терабайта във формат 3,5 или 2,5 инча, решение, което сега се сравнява със SSD спрямо външен твърд диск.

Наред с големите твърди дискове, IBM също така промотира флопи дискове . През 1971-1972 г. се появяват 8-инчови флопи дискове с първоначален капацитет от около 80 KB. Те се състоят от диск от гъвкав материал, покрит с магнитен оксид, вътре в защитен калъф.

През 1975 г. Алън Шугарт разработва 5,25-инчовата флопи дискета , която е по-лесна за работа с персонални компютри. Тези дискове са имали капацитет от около 110 KB в ранните си версии и са били по-бързи и по-евтини от 8-инчовите дискове. До 1978 г. вече е имало около десет производители, произвеждащи 5,25-инчови устройства.

В началото на 80-те години на миналия век, класическата 3,5-инчова флопи дискета се появи на сцената , с твърд корпус и метален езичец, предпазващ магнитната повърхност. Тя беше по-издръжлива, по-компактна и имаше по-голям капацитет от предшествениците си. Тя стана толкова популярна, че дори днес в много програми иконата „Запазване“ все още е флопи диск.

Въпреки че са практически остарели в битовата сфера, някои критични инфраструктури, като например определени военни или ядрени системи, поддържат флопидискови устройства в продължение на изненадващо много години, именно поради тяхната простота и изолация – практика, свързана с начина за съхранение на стари компютри.

Магнитна лента в компютрите: от архивиране до дълготрайност

Въпреки че последователният достъп на магнитната лента я прави по-бавна от дисковете, ниското съотношение цена/капацитет и издръжливостта ѝ я запазват като водещ носител за масивни архиви.

През 80-те години на миналия век се появяват формати като аудиокасета , адаптирана за данни, широко използвана в домашните микрокомпютри, а по-късно и специфични резервни ленти като DAT (Digital Audio Tape) , разработена от Sony през 1987 г. Това е преработена касета с 4 мм лента в компактен патрон.

През 1989 г. Sony и Hewlett-Packard пуснаха стандарта DDS (Digital Data Storage) , еволюция на DAT, фокусирана върху съхранението на компютърни данни. Той предлагаше нарастващ капацитет в относително малки формати , идеални за бизнеса.

Оптични дискове: CD, DVD и Blu-ray

Докато магнитният запис доминираше, друг революционен подход се оформяше: оптично съхранение с помощта на лазери . През 60-те години на миналия век изобретателят Джеймс Т. Ръсел работеше върху идеята за използване на светлина за записване и възпроизвеждане на музика. В продължение на години това се смяташе за малко повече от новост.

През 1975 г. Sony и Philips инвестират сериозно в неговия проект и финансират неговото разработване. Резултатът е компактдискът (CD) , пуснат на пазара през 1980 г. За аудио, той може да съхранява около 700 MB данни в компютърен формат, огромно количество по онова време в сравнение с флопи дисковете.

През 1984 г. се появява CD-ROM (Compact Disc Read-Only Memory) , който използва същия физически формат като аудио CD-то, но кодира компютърни данни. Микро-вдлъбнатини и плоски области (lands) са гравирани върху пластмасовата повърхност на диска , които лазерът интерпретира като битове.

По-късно се появиха записваеми варианти: CD-R само за запис и презаписваемият CD-RW , въведен през 1995 г. Това позволяваше на всеки потребител да записва и изтрива данни многократно на един и същ диск.

През 1995 г. се появява DVD (Digital Versatile Disc) , който значително увеличава капацитета за съхранение на данни. Еднослойният DVD побира 4,7 GB , а двуслойните DVD-та - два пъти повече. Той се превръща в стандарт за домашно видео и разпространение на голям софтуер.

Като опит за конкурент, форматът HD-DVD се появи през 2005 г. , популяризиран от Toshiba, NEC и Sanyo. Той предлагаше висока разделителна способност, но търговската битка в крайна сметка беше спечелена от Blu-ray , пуснат на пазара през 2003 г. и базиран на по-къса дължина на вълната синьо-виолетов лазер , който позволява съхраняването на повече информация в едно и също физическо пространство.

Blu-ray се утвърди като носител за видео с висока разделителна способност и съхранение с висока плътност , с капацитет от 25 GB на слой и многослойни варианти, достигащи десетки гигабайта на диск.

Магнитооптични носители и хибридни формати

Между чистия магнетизъм и оптичните дискове се появи хибридно семейство: магнитооптични дискове . Въведени около 1990 г., те комбинираха магнитни и оптични техники за съхраняване и четене на данни.

Тези дискове, често с размер 3,5 или 5,25 инча в касети, използваха лазер за локално нагряване на повърхността и магнитно поле за ориентиране на плочите. Четенето се основаваше на вариации в поляризацията на отразената светлина (ефект на Кер) . Те предлагаха добра издръжливост и възможности за презаписване , въпреки че бяха по-скъпи и сложни от CD-тата или DVD-тата.

90-те години също така бяха свидетели на някои краткотрайни, но интересни формати. През 1992 г. Sony пусна на пазара MiniDisc , предназначен да замени аудиокасетите и да съхранява данни (във версиите MD Data), с капацитет около 140 MB. През 1994 г. Iomega пусна на пазара Zip , а по-късно и Jaz , сменяеми дискове с висок капацитет за времето си (от 100 MB до 1 GB), които се опитаха да запълнят празнината между флопи диска и първите външни твърди дискове.

Флаш памет и USB устройства: големият скок към преносимостта

В края на 90-те години на миналия век настъпи тиха революция: флаш паметта , вид енергонезависима електронна памет. Въпреки че първоначално е била проектирана за фотоапарати и преносими устройства , скоро се е разпространила върху всичко.

През 1993 г. е представена CompactFlash (CF) карта, която интегрира флаш памет в стабилен формат. Тя е широко използвана като вътрешна памет в цифрови фотоапарати и някои вградени компютри . Малко след това се появяват SmartMedia (Toshiba, 1995) и Multimedia Card (MMC) от Siemens и SanDisk през 1997 г.

През 1999 г. IBM пусна на пазара Microdrive , мини твърд диск с размерите на компактна карта, а през 2000 г. картите Secure Digital (SD) станаха популярни с вградено криптиране и стандартни размери 32 x 32 x 2,1 мм. SD картите се превърнаха в де факто стандарт за мобилни телефони, фотоапарати и множество преносими устройства.

Основният повратен момент за средностатистическия потребител беше USB флаш устройството . Около 2000 г. сингапурската компания Trek 2000 International представи ThumbDrive , считано за първото комерсиално успешно USB флаш устройство. То използваше NAND флаш памет и се свързваше директно към USB порт , без да е необходимо външно захранване или сложни контролери, въпреки че понякога е полезно да се знае за потенциалните проблеми с USB хъбовете . Тези устройства, наричани още USB флаш устройства, USB стикове или флаш памети , предлагаха капацитет, започващ само от няколко мегабайта и скоро нарастващ до десетки гигабайти. Те нямаха движещи се части, можеха да издържат на хиляди цикли на запис и бяха силно устойчиви на удари и електромагнитни смущения . С това те замениха флопи дисковете и започнаха да засенчват CD-тата и DVD-тата като носител за съхранение.

Твърдотелни устройства (SSD) и SMR: Ускоряване и увеличаване на капацитета

Същата технология за флаш памет доведе до появата на твърдотелни устройства (SSD) . Тези устройства функционират като твърди дискове от гледна точка на операционната система, но вътрешно те представляват взаимосвързани комплекти флаш чипове , без плати или глави за четене/запис; ако се интересувате от разликата с други технологии, като NVMe съхранение , тя е доста показателна.

Първите търговски успешни SSD дискове дойдоха от компании като SanDisk и бързо се разпространиха в лаптопите и настолните компютри, измествайки твърдите дискове, където скоростта на достъп и намалената консумация на енергия са ключови. Техните чипове се различават от тези, които обикновено се срещат в USB флаш паметите, предлагайки по-висока производителност, издръжливост и устойчивост на износване , което се изразява в по-висока цена на гигабайт.

Междувременно традиционните твърди дискове продължават да се развиват. Една от последните технологии е Shingled Magnetic Recording (SMR) . Вместо да записват отделни песни, те се припокриват частично като керемиди на покрива , като по този начин песните се отрязват, без да се губи съответното съдържание.

Това позволява увеличен капацитет в същото физическо пространство , като същевременно се поддържат ниски разходи и се използва съществуващата HDD инфраструктура. SMR вече присъства в много съвременни твърди дискове, особено в тези с висок капацитет, предназначени за масово съхранение и архивиране.

От физически склад до център за данни: силози, езера и големи данни

Експлозивният растеж на дигиталната информация накара организациите да създадат големи логически системи за съхранение. Това доведе до появата на силози за данни , които представляват набори от информация, съхранявана за конкретен отдел или система, несъвместими или трудни за интегриране с останалата част от компанията.

Първоначално тези силози са били възприемани като странни острови от данни; с течение на времето те се превърнали в ценен източник на информация за големи данни , позволявайки комбинирането и анализа на големи обеми от исторически данни. По-късно се появила концепцията за езеро от данни.

Езерото с данни съхранява информация в оригиналния ѝ, необработен формат , обикновено управлявана с помощта на NoSQL бази данни. Тези системи приемат структурирани, полуструктурирани и неструктурирани данни, което позволява на анализатори и алгоритми с изкуствен интелект да обработват информацията при поискване.

Според инициативи като BBVA OpenMind, езерата от данни използват плоски архитектури , без твърди йерархични структури, за да улеснят гъвкавия достъп и да намалят разходите. Те са се превърнали в основни компоненти за проекти за големи данни и изкуствен интелект.

Облакът и онлайн съхранението: данни навсякъде

Следващата голяма промяна не беше толкова нов физически носител, колкото промяна в модела благодарение на високоскоростните мрежи . Подобрената честотна лента и по-евтиното дисково пространство направиха възможно изграждането на огромни центрове за данни, достъпни през интернет.

Така се раждат облачните изчисления , а с тях и облачното съхранение . От гледна точка на потребителя, облакът предлага практически неограничен капацитет, достъпен от всяко устройство и място , срещу заплащане или дори безплатно, ако се приемат ограничения.

На практика „облакът“ е огромна колекция от сървъри, дискови масиви, SSD дискове, ленти и вътрешни мрежи . Използва се както за архивиране , така и за основно съхранение на документи, снимки и видеоклипове . Ако използвате имейл, социални медии или стрийминг услуги, вече използвате облачно съхранение ежедневно.

Доставчиците трябваше да засилят сигурността чрез криптиране, удостоверяване и контрол на достъпа, тъй като споделената архитектура създава предизвикателства, свързани с поверителността. Сектори като банковото дело са обект на строги регулации за смекчаване на тези рискове.

В допълнение към онлайн хранилището с общо предназначение, има и специфични решения за безжично домашно съхранение . Исторически пример е Apple AirPort Time Capsule , Wi-Fi устройство, което интегрира рутер и твърд диск с капацитет до 3 TB, предназначено за автоматично архивиране и безжичен достъп до данни от устройства на Apple.

Нови граници: холограми, ДНК и ултра-дълготрайни материали

Изправени пред цунамито от данни, очаквано през следващите десетилетия, изследванията в областта на съхранението на данни проучват пътища, много различни от дисковете или флаш паметите. Един от тях е холографската памет , която съхранява цифрови данни в обема на материал, като кристали или фотополимери , вместо да е ограничена до неговата повърхност.

Голямото предимство на холографската памет е, че тя може да използва дебелината на носителя за съхранение на информация в 3D (обем на Браг), постигайки огромна плътност. Въпреки че съществуват прототипи, тя все още не е широко използвана технология, но се очертава като едно от възможните дългосрочни решения за архивиране с много висока плътност.

Друга завладяваща област е съхранението на ДНК . ДНК, молекулата на живота, може да кодира изумително количество информация: приблизително 2,2 петабайта на грам . На теория всички данни, генерирани от човечеството, биха могли да се поберат в една лъжица ДНК.

Освен това, ДНК е изключително дълготрайна среда , способна да съхранява информация в продължение на хиляди години, ако се съхранява правилно. Настоящият проблем е цената и скоростта: кодирането на по-малко от 100 KB данни може да струва около 1500 долара, а процесите на синтез и секвениране остават бавни.

Използването на изкуствена ДНК или модифицирани биомолекули се изследва за намаляване на разходите и скоростта на тези операции, но все още е в експериментален етап. Идеята обаче е ясна: да се премине от дискове и чипове към наистина молекулярно съхранение.

Успоредно с това, нанотехнологиите отварят врати за приложения като използването на въглеродни изотопи (например, въглерод-12 атоми за „0“ и въглерод-13 атоми за „1“) или особено стабилни минерални материали. През 2023 г. компанията Cerabyte обяви система, която използва лазер за гравиране на триизмерни масиви от данни, подобни на QR кодове, върху минерален субстрат , устойчив на екстремни температури, пожар, наводнения и пренапрежения, с очакван живот над 5000 години.

Надеждност, битова грешка и копия: по-малко бляскавата страна на съхранението

Независимо от носителя за съхранение, всички те имат един общ проблем: имат ограничен живот и са податливи на повреди . Твърдите дискове могат да бъдат повредени от удари, лентите могат да се демагнетизират, оптичните дискове могат да се влошат, а флаш паметта може да загуби заряда си с течение на времето.

Често споменаван феномен е „битовото затихване“ – тихата деградация, при която някои битове променят стойността си, без това да е веднага забележимо . Това засяга особено дългосрочни носители за съхранение, като например стари твърди дискове, ленти или флаш памети, които прекарват много години, без да бъдат прочетени.

Поради това се препоръчва периодичен достъп до носители за съхранение (например, четене на USB устройство от време на време) и репликиране на информацията на нов носител на всеки няколко години. Системи като RAID с кодове за коригиране на грешки позволяват възстановяването на повредени данни чрез въвеждане на излишък, но никога не елиминират напълно риска.

Що се отнася до класификацията, обикновено правим разлика между първично хранилище (RAM, кеш), което е ултрабързо, но енергонезависимо и директно достъпно за процесора, и вторично хранилище (дискове, SSD, ленти, облачно съхранение), което е по-бавно, но енергонезависимо. В рамките на вторичното хранилище допълнително правим разлика между последователен достъп (ленти) и произволен достъп (дискове, SSD, флаш съхранение), в зависимост от това дали можем да преминем директно към желаните данни или трябва да сканираме всички данни от самото начало.

Независимо от технологията, единствената реална защита срещу загуба на данни остава излишъкът и добре планираните резервни копия . А когато се работи с чувствителна информация, на помощ идва криптографията , както с публичен ключ (RSA и др.), така и със симетричен ключ (AES, DES), което е особено важно в контекста на облачното съхранение.

Като цяло, историята на съхранението на данни ни е отвела от огромни машини с капацитет от няколко килобайта до миниатюрни чипове, способни да обработват терабайти, и разпределени системи, управляващи зетабайти; и въпреки това, ние продължаваме да търсим нови, по-плътни, по-издръжливи и по-сигурни носители за съхранение , от холограми до ДНК или екзотични минерални материали. Всичко подсказва, че както досега, следващите скокове ще комбинират физически иновации с все по-интелигентни мрежови архитектури, за да продължим да ни позволяват да съхраняваме и извличаме, почти без да го осъзнаваме, огромното количество данни, които произвеждаме всеки ден.