דוגמאות והגדרה של ביג דאטה

אינפורמטק דיגיטל » ניתוח נתונים » דוגמאות והגדרה של ביג דאטה

ביג דאטה הוא מונח רחב למערכות נתונים כה גדולות או מורכבות עד שיישומי עיבוד נתונים מסורתיים אינם מתאימים. ביג דאטה יכול לכלול כל סוג של מידע, גם מובנה וגם לא מובנה.

דוגמאות והגדרה של ביג דאטה

ערכות נתונים גדולים

ביג דאטה הוא מונח רחב למערכות נתונים כה גדולות או מורכבות עד שיישומי עיבוד נתונים מסורתיים אינם מתאימים. היקף הנתונים הגדולים יכול להיות בכל גודל, מטרה-בייט ועד פטה-בייט (טריליון בתים) ומעלה. באופן כללי, היקף הביג דאטה כולל מידע מובנה ובלתי מובנה כאחד.

ביג דאטה מתייחס לכמויות עצומות של מידע שנוצרות על ידי האינטרנט, המדיה החברתית ומקורות אחרים . ביג דאטה מתייחס למערכי נתונים שגודלם עולה על היכולת של כלי ניהול מסדי נתונים מסורתיים ללכוד, לאחסן, לנהל ולנתח אותם ביעילות באמצעות מערכות ניהול מסדי נתונים יחסיות סטנדרטיות (RDBMS).

ההערכה היא ש-98% מהנתונים בעולם נוצרו רק בשנתיים האחרונות.

הנתונים גדלים באופן אקספוננציאלי. למעשה, ההערכה היא ש-98% מהנתונים בעולם נוצרו בשנתיים האחרונות בלבד. ואם אתם תוהים מה קרה ל-2% הנותרים, ובכן, גם אנחנו לא יודעים את זה.

כיצד נוכל להתמודד עם הצמיחה האקספוננציאלית הזו? ובכן, אנו זקוקים למודל אחסון נתונים חדש שיאפשר לנו לאחסן את כל המידע שלנו ואז להבין מה לעשות איתו מאוחר יותר (או לא).

זו הסיבה שרוב הארגונים משתמשים בשירותי אחסון ענן כמו Amazon Web Services (AWS), Google Cloud Platform (GCP) או Microsoft Azure, במקום לבנות תשתית משלהם מאפס או להשתמש במסדי נתונים יחסיים מסורתיים כמו Oracle DBMS או Microsoft SQL Server DBMS, הדורשים תשלום עבור רישיונות יקרים מדי שנה רק כדי להמשיך לאחסן את כל הג'יגה-בייט על גבי ג'יגה-בייט של נכסים דיגיטליים.

ארבעת הנגדים של ביג דאטה

ארבעת ה-Vs של ביג דאטה הם נפח, מגוון, מהירות ואמיתות.

נפח מתייחס לגודל הנתונים שהחברה שלך מעבדת. מגוון מתייחס לכל סוגיו: מובנים (כמו גיליונות אלקטרוניים) ולא מובנים (כמו תמונות). מהירות מתייחסת למהירות שבה המידע משתנה לאורך זמן: אם מדובר במשהו כמו נתוני המכירות של חנות מקוונת שמשתנים בערך כל שעה, אתה זקוק למערכת שיכולה להתמודד עם שינויים אלה במהירות מספקת כדי שלא ישפיעו באופן משמעותי על החלטות עסקיות.

לבסוף, יש אמיתות, כלומר דיוק: עד כמה המידע אמין? אם זה מגיע ממקור חיצוני, כמו רשתות חברתיות כמו טוויטר או פייסבוק, שבהן כל אחד יכול לפרסם כל דבר בכל עת ללא אימות מוקדם, ייתכן שהוא לא אמין באותה מידה.

נתונים מובנים ולא מובנים.

ביג דאטה יכול לכלול כל סוג של מידע, גם מובנה וגם לא מובנה.

דוגמאות לנתונים מובנים: מספרי תעודת זהות, מספרי כרטיסי אשראי ומספרי טלפון.

דוגמאות לנתונים לא מובנים: דפי אינטרנט, מיילים, ציוצים ותוכן אחר של מדיה חברתית.

ניתן להשתמש בטכנולוגיית ביג דאטה כדי לנתח את הגנום האנושי ולמצוא סמנים גנטיים של מחלות.

ניתן להשתמש בטכנולוגיית ביג דאטה כדי לנתח את הגנום האנושי ולמצוא סמנים גנטיים למחלות. ריצוף DNA הוא דוגמה לטכנולוגיית ביג דאטה שנמצאת בשימוש במחקר רפואי מאז הקמתה בתחילת שנות ה-2000. על ידי זיהוי גנים בודדים והוריאציות שלהם, חוקרים יכולים לאתר גורמים גנטיים התורמים למחלות כמו סרטן או סוכרת.

מחקרי אגודות רחבי גנום (GWAS) משתמשים בטכניקה הנקראת מיקרו-מערכים המאפשרת למדענים לנתח אלפי דגימות בבת אחת ולחפש דפוסים ספציפיים ברמות ביטוי גנים. תהליך זה מאפשר להם לזהות וריאנטים גנטיים הקשורים למחלות כמו אלצהיימר או סכיזופרניה; עם זאת, רוב תוצאות ה-GWAS נותרות לא חד משמעיות בעיקר משום שהן מבוססות על גודל מדגם קטן (במקרים רבים, פחות מ-100 אנשים).

ככל שמספר האנשים המשתתפים במחקרים אלה גדל, ובמיוחד אם אותם משתתפים מסכימים לבדיקות נוספות, עלינו לצפות לשיעורי דיוק גדלים יחד עם הבנה טובה יותר של האופן שבו גורמים סביבתיים ספציפיים מתקשרים עם הגנים שלנו בשלבי התפתחות בהמשך מסלול החיים.

שימושים עבור Big Data

כיום ישנם שימושים רבים לביג דאטה שמשנים את הדרך בה אנו חיים ועובדים.

ניתן להשתמש בביג דאטה כדי לשפר את שירותי הבריאות, שירות הלקוחות והחינוך . זה יכול גם לעזור לסוכנויות בטיחות הציבור להגן טוב יותר על הקהילות שלהן ולעסקים לגשת להזדמנויות חדשות על ידי שימוש בביג דאטה כדי לשפר תהליכים עסקיים.

שירותי בריאות : רופאים ואחיות משתמשים ברשומות מטופלים כדי לקבל החלטות טיפוליות, אך עם כל כך הרבה מידע זמין על כל מטופל, קשה למצוא את מה שהם צריכים מתי שהם צריכים אותו. בעזרת כלי ניתוח ביג דאטה, לרופאים תהיה גישה למגוון רחב יותר של מידע על ההיסטוריה הרפואית של מטופליהם מאי פעם, כולל מידע האם תרופה גרמה לתגובה שלילית או האם יש תרופות אחרות שעשויות לתקשר שלילית זו עם זו (כגון תרופות ללחץ דם). זה יכול להציל חיים מכיוון שרופאים ידעו מיד אילו טיפולים יעבדו בצורה הטובה ביותר על סמך ניסיון העבר, במקום לבזבז זמן בניסיון שילובים שונים עד שמשהו יעבוד מספיק טוב.

ל-Big Data יש היום שימושים רבים שאולי לא הבנתם.

ביג דאטה נעשה שימוש בדרכים רבות ושונות לניתוח התנהגות אנושית. זה יכול לשמש כדי לנתח איך אנשים משתמשים במכשירים הניידים שלהם, איך הם מקיימים אינטראקציה זה עם זה ואפילו איך הם מוציאים את כספם.

הנה כמה דוגמאות ליישומי ביג דאטה:

• נתח את המדיה החברתית כדי לגלות מה קורה בעולם סביבך שאולי אינך מודע אליו (לדוגמה, מגמות באופנה או טכנולוגיה).
• שימוש בחיישנים ומצלמות המוצבים בערים כדי לנטר את התנועה, כך שממשלות יוכלו לתכנן טוב יותר עבודות ציבוריות או לשפר את התחבורה הציבורית.

מסקנה

ביג דאטה הוא מונח המשמש לתיאור כמויות הנתונים העצומות שאנו יכולים לאסוף, לנתח ולהשתמש בחיי היומיום שלנו. מידע זה יכול לשמש למטרות רבות ושונות, כגון מציאת סמנים גנטיים למחלות או ניתוח גנומים אנושיים כדי להבין טוב יותר כיצד הם פועלים. חשוב לזכור שיש גם השלכות שליליות הקשורות לטכנולוגיה זו, כגון חששות לגבי הפרטיות של אנשים שיש להם גישה למידע האישי שלך.