- Veľké dáta: súbory dát tak rozsiahle alebo zložité, že presahujú možnosti tradičných nástrojov na správu a analýzu.
- Štyri veličiny typu V: objem, rozmanitosť, rýchlosť a pravdivosť opisujú veľkosť, typy, mieru zmeny a spoľahlivosť údajov.
- Zahŕňa štruktúrované dáta (číselné databázy) a neštruktúrované dáta (web, e-maily, sociálne siete), rozširujúce sa zdroje a komplexnosť analýzy.
- Aplikácie: zdravotníctvo, zlepšovanie služieb, verejná bezpečnosť a optimalizácia podnikania; cloud uľahčuje ukladanie a škálovateľnosť v porovnaní s tradičnými RDBMS.
Veľké údaje sú široký pojem pre súbory údajov také veľké alebo zložité, že tradičné aplikácie na spracovanie údajov sú nedostatočné. Veľké dáta môžu zahŕňať akýkoľvek typ informácií, štruktúrovaných aj neštruktúrovaných.
Príklady a definície veľkých dát
Veľké súbory údajov
Veľké údaje sú široký pojem pre súbory údajov také veľké alebo zložité, že tradičné aplikácie na spracovanie údajov sú nedostatočné. Rozsah veľkých dát môže byť ľubovoľnej veľkosti, od terabajtov po petabajty (1 bilión bajtov) a viac. Vo všeobecnosti rozsah veľkých dát zahŕňa štruktúrované aj neštruktúrované typy informácií.
Veľké dáta označujú obrovské množstvo informácií generovaných internetom, sociálnymi médiami a inými zdrojmi . Veľké dáta označujú súbory údajov, ktorých veľkosť presahuje kapacitu tradičných nástrojov na správu databáz, ktoré ich umožňujú efektívne zachytiť, uložiť, spravovať a analyzovať pomocou štandardných systémov správy relačných databáz (RDBMS).
Odhaduje sa, že 98 % celosvetových údajov bolo vytvorených len za posledné dva roky.
Údaje rastú exponenciálne. V skutočnosti sa odhaduje, že 98 % celosvetových údajov bolo vytvorených len za posledné dva roky. A ak sa pýtate, čo sa stalo so zvyšnými 2 %, tak to nevieme ani my.
Ako sa dokážeme vyrovnať s týmto exponenciálnym rastom? Potrebujeme nový model ukladania dát , ktorý nám umožní ukladať všetky naše informácie a potom zistiť, čo s nimi neskôr (alebo nie) robiť.
Preto väčšina organizácií používa cloudové úložiská ako Amazon Web Services (AWS), Google Cloud Platform (GCP) alebo Microsoft Azure, namiesto budovania vlastnej infraštruktúry od základov alebo používania tradičných relačných databáz ako Oracle DBMS alebo Microsoft SQL Server DBMS, ktoré vyžadujú každoročné platenie drahých licencií len na ukladanie všetkých tých gigabajtov a gigabajtov digitálnych aktív.
Štyri Vs veľkých dát
Štyri V veľkých dát sú objem, rozmanitosť, rýchlosť a pravdivosť.
Objem sa vzťahuje na veľkosť údajov, ktoré vaša spoločnosť spracováva. Rozmanitosť sa vzťahuje na všetky ich typy: štruktúrované (ako sú tabuľky) a neštruktúrované (ako obrázky). Rýchlosť sa vzťahuje na to, ako rýchlo sa informácie menia v priebehu času: ak ide o niečo ako údaje o predaji internetového obchodu, ktoré sa menia približne každú hodinu, potrebujete systém, ktorý dokáže tieto zmeny spracovať dostatočne rýchlo, aby významne neovplyvnili obchodné rozhodnutia.
Nakoniec je tu pravdivosť, teda presnosť: do akej miery sú informácie spoľahlivé? Ak pochádza z externého zdroja, ako sú sociálne siete ako Twitter alebo Facebook, kde môže ktokoľvek a kedykoľvek uverejniť čokoľvek bez predchádzajúceho overenia, nemusí to byť také spoľahlivé.
Štruktúrované a neštruktúrované dáta.
Veľké dáta môžu zahŕňať akýkoľvek typ informácií, štruktúrovaných aj neštruktúrovaných.
Príklady štruktúrovaných údajov: čísla sociálneho poistenia, čísla kreditných kariet a telefónne čísla.
Príklady neštruktúrovaných údajov: webové stránky, e-maily, tweety a ďalší obsah sociálnych médií.
Technológia veľkých dát sa môže použiť na analýzu ľudského genómu a nájdenie genetických markerov chorôb.
Technológia veľkých dát sa dá použiť na analýzu ľudského genómu a nájdenie genetických markerov chorôb. Sekvenovanie DNA je príkladom technológie veľkých dát, ktorá sa používa v medicínskom výskume od jej vzniku na začiatku 2000. storočia. Identifikáciou jednotlivých génov a ich variácií môžu výskumníci presne určiť genetické faktory, ktoré prispievajú k chorobám, ako je rakovina alebo cukrovka.
Štúdie asociácie v celom genóme (GWAS) využívajú techniku nazývanú microarrays, ktorá umožňuje vedcom analyzovať tisíce vzoriek naraz pri hľadaní špecifických vzorcov v úrovniach génovej expresie. Tento proces im umožňuje identifikovať genetické varianty spojené s chorobami, ako je Alzheimerova choroba alebo schizofrénia; Väčšina výsledkov GWAS však zostáva nepresvedčivá do značnej miery, pretože sú založené na malých veľkostiach vzoriek (v mnohých prípadoch menej ako 100 jedincov).
Keďže počet ľudí zúčastňujúcich sa na týchto štúdiách rastie, a najmä ak títo účastníci súhlasia s dodatočným testovaním, mali by sme očakávať zvýšenie miery presnosti spolu s lepším pochopením toho, ako špecifické faktory prostredia interagujú s našimi génmi počas vývojových štádií neskôr v životnej ceste.
Používa sa pre veľké dáta
V súčasnosti existuje mnoho spôsobov využitia veľkých dát, ktoré menia spôsob, akým žijeme a pracujeme.
Veľké dáta sa dajú využiť na zlepšenie zdravotnej starostlivosti, služieb zákazníkom a vzdelávania . Môžu tiež pomôcť orgánom verejnej bezpečnosti lepšie chrániť svoje komunity a podnikom získať prístup k novým príležitostiam využitím veľkých dát na zlepšenie obchodných procesov.
Zdravotníctvo : Lekári a zdravotné sestry používajú záznamy o pacientoch na rozhodovanie o liečbe, ale s toľkými informáciami dostupnými o každom pacientovi je ťažké nájsť to, čo potrebujú, keď to potrebujú. Vďaka nástrojom na analýzu veľkých dát budú mať lekári prístup k širšej škále informácií o zdravotnej anamnéze svojich pacientov ako kedykoľvek predtým, vrátane informácií o tom, či liek spôsobil nežiaducu reakciu alebo či existujú iné lieky, ktoré by mohli navzájom negatívne interagovať (napríklad lieky na krvný tlak). To by mohlo zachrániť životy, pretože lekári by na základe predchádzajúcich skúseností okamžite vedeli, ktoré liečby by fungovali najlepšie, namiesto toho, aby strácali čas skúšaním rôznych kombinácií, kým niečo nezaberie dostatočne dobre.
Big Data majú dnes mnoho využití, o ktorých si možno ani neuvedomujete.
Veľké dáta sa používajú na analýzu ľudského správania mnohými rôznymi spôsobmi. Môže sa použiť na analýzu toho, ako ľudia používajú svoje mobilné zariadenia, ako medzi sebou interagujú a dokonca aj na to, ako míňajú svoje peniaze.
Tu je niekoľko príkladov aplikácií veľkých dát:
- Analyzujte sociálne siete a zistite, čo sa deje vo svete okolo vás, o čom si možno ani neuvedomujete (napríklad trendy v móde alebo technológiách).
- Využívanie senzorov a kamier umiestnených v mestách na monitorovanie dopravy, aby vlády mohli lepšie plánovať verejné práce alebo zlepšiť verejnú dopravu.
Záver
Big data je termín používaný na opis obrovského množstva údajov, ktoré môžeme zbierať, analyzovať a používať v našom každodennom živote. Tieto informácie možno použiť na mnoho rôznych účelov, ako je hľadanie genetických markerov chorôb alebo analýza ľudských genómov, aby sa lepšie pochopilo, ako fungujú. Je dôležité si uvedomiť, že s touto technológiou sú spojené aj negatívne dôsledky, ako napríklad obavy o súkromie ľudí, ktorí majú prístup k vašim osobným údajom.