שירות ענן חדש מאיץ מעבר לאנליטיקה בזמן אמת

אפסולבר (Upsolver), חברה המוקדשת להנגשת דאטה בתנועה לכל מי שעוסק בנתונים, הודיעה על זמינות כללית של SQLake. השירות החדש מספק פלטפורמת צנרת נתונים מבוססת SQL בסנכרון עצמי, אשר קולטת ומשלבת אירועים בזמן אמת עם מקורות של נתוני אצווה כדי לבצע אנליטיקה מעודכנת בזמן אמת. השירות זמין במחיר של 99 דולר לכל טרה-בייט של קליטת נתונים, ללא תשלום בעבור עיבוד ההעברה וללא התחייבות מינימלית.

עם SQLake חברות משיגות קפיצה קוונטית ברעננות הדאטה בעבור תרחישי שימוש כגון אימון מודל לימוד מכונה, זיהוי חריגות, בינה מלאכותית ומדע נתונים בזמן אמת. זה גם הופך נתונים לזמינים בקלות לכל משתמש SQL - לא רק למהנדסי נתונים אלא גם למדעני נתונים, אנליסטים, מנהלי מוצר וצרכני דאטה אחרים.

SQLake מגדיר מחדש באופן בסיסי את חוויית הפיתוח של צינור הדאטה. כפלטפורמת צינור הדאטה היחיד שמודע לנתונים, SQLake מציע רמת פשטות חסרת תקדים על ידי מיכון של פונקציות רבות שמצריכות בדרך כלל התערבות אנושית. משתמשים כבר לא צריכים לפתח, לבחון ולתחזק לוגיקה מסונכרנת מורכבת (DAG), לבצע מיטוב נתונים ידני או לשנות ידנית את התשתית שלהם. עם SQLake הכול אוטומטי.

נתונים טריים יותר מביאים להחלטות טובות יותר. לעסקים שרוצים להתרחק מאצוות ליליות לכיוון רעננות הנתונים העדכניים היו רק שתי אפשרויות, כל אחת מלווה באתגרים ממשיים. מצד אחד, הם יכולים לנסות להצמיד עיבוד אצווה לדאטה בתנועה, דבר שיוצר סיוט סנכרון המאופיין במורכבות המונעת ניהול תקין, יוצרת עלויות תפעול גבוהות, יכולת צפייה נמוכה בנתונים וחובות טכניים הולכים וגדלים.

מצד שני, אפשר לבנות "ארכיטקטורת Lambda" המצריכה פריסה וניהול של תשתית הזרמה נפרדת לצד תהליך האצווה. במקרה כזה צריך לשכור מהנדסי ביג דאטה מתמחים, והדבר עלול ליצור חסם גבוה לשירות עצמי לצרכני נתונים בעסק שאינם מהנדסים. יתרה מזאת, עליהם לכוון, לייעל ולהרחיב את פתרון ההזרמה, והדבר גורם להגדלת התקורה התפעולית, להפרות SLA ולתסכול בקרב צרכני הנתונים.

SQLake של Upsolver מתגבר על האתגרים האלו על ידי התייחסות לכל הדאטה כאל נתונים בתנועה הוא קובע אוטומטית את התלות בין כל השלבים בצנרת כדי לסנכרן ולמטב את תזרים הנתונים לאספקה ​​יעילה, גמישה וביצועית. עם SQLake בניית צינור קלה כמו כתיבת שאילתת SQL. יש לכך יתרונות רבים:

* מחזורי פיתוח צינור מתקצרים מחודשים לשבועות או ימים.

* אימוץ נרחב של SQL מאפשר למשתמשי נתונים לשרת בעצמם צינורות כדי לקבל אנליטיקה טרייה. לא נדרשת מומחיות ב-Java, Python, Spark או Airflow.

* צינורות הייצור חזקים יותר מכיוון שכך מבטלים טעויות אנוש, ותרחישי הכשל צפויים מראש ומטופלים.

* כמות הפעולות גודלת אוטומטית בהתאם למצב. שלא כמו מגבלות קנה המידה ב-Apache Spark, אחסון המצב הייחודי של SQLake מטפל ביעילות במיליארדי מפתחות.

"לקוחות אומרים שחציית הפער לקבלת נתונים טריים קשה ביותר, מכיוון שעיבוד התזרים מורכב מדי לרוב המשתמשים, ואינו חזק מספיק כדי להחליף עומסי עבודה של אצווה", אמר אורי רפאל, מנכ"ל ומייסד שותף של Upsolver. "SQLake משנה את המשחק. כעת, כל מי שיודע SQL יכול בקלות לפתח ולפרוס צינורות נתונים הממזגים אירועים בזמן אמת עם נתונים היסטוריים, בקנה מידה עצום."

SQLake מנצל את אותו מנוע עיבוד טבעי לענן המשמש את לקוחות Upsolver כיום, כגון IronSource (התנהגות משתמש באפליקציה לנייד), Proofpoint (אבטחת רשת) ו-Cox Automotive (תזרימי VPC). הוא קולט נתונים מתזרימים ואצוות כאירועים, תומך בפעולות מבוססות מצב כגון צבירה מתגלגלת, פונקציות של חלונות, חיבורים של מערכי נתונים גבוהים ו-UPSERT, ומספק נתונים עדכניים ומותאמים למנועי שאילתות, מחסני נתונים ומערכות אנליטיקה.

"Peer39 היא ספקית מובילה של נתונים מבוססי הקשר המשמשים למיטוב היעילות של מסעות פרסום שיווקיים. אנו משתמשים ב-Upsolver כדי להטמיע ולמטב 20 מיליארד אירועים ביום לתוך אגם הנתונים שלנו ב-AWS, ועקב כך נתונים טריים זמינים תוך דקות ויש האצה של עד פי עשרה בשאילתות לאגם נתונים", אומר בועז גולדשטיין, מנהל מו"פ, ארכיטקטורת נתונים ובינה עסקית ב-Peer39.

"פתרון SQLake של Upsolver מקל על מהנדסי הנתונים ומדעני הנתונים שלנו, שיכולים לפתח צינורות המשלבים תזרימים ונתונים היסטוריים בלי לפתח ולנהל ידנית סנכרון לוגי מורכב או להתאמץ להרחיב את התשתית כדי לעמוד בנפח הנתונים שלנו."

SQLake מגדיר מחדש את קלות השימוש לפיתוח צינורות. גם מהנדסי נתונים וגם צרכני נתונים יכולים לבנות ולפרוס צינור רציף באמצעות SQL בלבד בכמה שלבים פשוטים:

* בחירת מקרה שימוש מגלריית התבניות של SQLake, או התחל צינור מאפס.

* התחברות למקורות נתונים והטמעת נתונים לטבלאות היערכות באגם הנתונים בענן. SQLake מסיק ומפתח אוטומטית את סכמת המקור.

* בדיקה ויצירה של פרופיל הנתונים באמצעות נתונים סטטיסטיים בזמן אמת ושאילתות SQL של ​​טבלאות ההיערכות.

* פיתוח עבודת המרה ליצירת טבלאות פלט מוכנות לאנליטיקה באגם הנתונים או במחסן הנתונים. סנכרון, ניהול נתונים והגדלת תשתית נעשים אוטומטית.

עם השקת SQLake עברה Upsolver למודל תמחור צפוי, מבוסס ערך. התמחור מבוסס אך ורק על נפח הנתונים שנקלטו, ללא הגבלה של מספר הצינורות שבשימוש, לפיכך ההמרה חינמית. בניגוד ל"יחידות עיבוד" אטומות שבהן משתמשים פתרונות ניהול נתונים רבים, העלויות של Upsolver פשוטות להבנה וקשורות לערך ללקוח, ולא לעלויות הספק.

כדי להפוך את SQLake לאטרקטיבי לכל גודל של פרויקט צינור, SQLake זמין תמורת 99 דולר לכל טרה-בייט של נתונים שנקלטו ללא התחייבות מינימלית. מחיר כניסה זה ותוספת של 30 יום ניסיון בחינם, מאפשר לכל משתמש נתונים להתחיל להשתמש ב-SQLake בלי להסתכן. אפשר לרכוש את SQLake של Upsolver ב-AWS Marketplace.