ארכיטקטורת למבדה (lambda)

מעוניין לשתף?

ביג-דאטה הפך לנושא פופולרי הולך וגדל במהלך השנים האחרונות, ועוסק בעיבוד כמויות גדולות של נתונים במגוון פורמטים אשר לוקח בחשבון זרימת נתונים "חיה" ושימוש בנתונים היסטוריים. טכנולוגיות בסיסי נתונים מסורתיות (SQL) לא מתאימות להתמודד עם נתוני ביג-דאטה הכוללים זרימת נתונים מאסיבית ולכן היה צורך בארכיטקטורה גמישה שתוכל להתמודד עם כמות הנתונים הגדולה. ארכיטקטורת למבדה היא ארכיטקטורה כזו, המסוגלת להתמודד עם קליטה, עיבוד ואנליזה של נתוני ביג-דאטה.
כל הנתונים החדשים שמתקבלים מועברים במקביל לשתי שכבות:
o שכבת עיבוד אשכול (batch) – השכבה האחראית לאחסון כל הנתונים בצורתם "הגסה" (raw data) ואחראית גם על עיבוד הנתונים החדשים וההיסטוריים. שכבה זו מספקת הסתכלות מקיפה ומדויקת על הנתונים, על חשבון הזמן בו לוקח לקבלם. תוצאות העיבוד נשמרות בשכבת ההגשה (serving) בתור תצוגות אשכול (batch views).
o שכבת עיבוד בזמן אמת (או "שכבת מהירות") לעיבוד "חי" של זרמי נתונים. תוצאות העיבוד נשמרות בשכבה בתור תצוגות "חיות" (Real-time views). שכבה זו מספקת זמן קבלת תוצאות מהירה, על חשבון הדיוק.
ארכיטקטורת למבדה מיועדת לאנליזה, והשאילתות עבור קבלת מבט על הנתונים נעשות ישירות על שתי צורות התצוגות, בהתאם לצורך העסקי.

קיימים שירותים רבים בהם ניתן להשתמש על מנת להרכיב ארכיטקטורה מסוג זה. בנוסף לניסיון הרב של דטה סייט בביג-דאטה, מומחי הענן שלנו ידעו להתאים לכם את השירותים בצורה המדויקת ביותר לסביבה שלכם כך שתוכלו כבר מהתחלה לקבל ערך מוסף מהנתונים.

כתבות נוספות שיעניינו אותך

פברואר 3, 2019   •

אנו בדאטה-סייט אוהבים להשתמש ב Azure SQL Databases. זהו שירות בסיס נתונים מנוהל, בו הלקוח לא דואג לתשתית עליה יושב השרת, אלא רק לבסיסי הנתונים שלו, כך שהמיקוד הוא על איכות.

אוגוסט 14, 2019   •

EXPERDA TEAM

איך אומרים? "לכל דבר טוב יש סוף…" וכפי שהתבשרנו זה מכבר גם התמיכה המורחבת ב- SQL Server 2008 ו- 2008R2. מסתיימת בימים אלו. או ליתר דיוק, הסתיימה כבר ב-9 ליולי 2019.