תקציר הפרק

כולם מדברים על דאטה, אבל איך מנהלים נכון את הנתונים ומפיקים מהם ערך עסקי? ואיך נעשה זאת מהר ונכון יותר מהמתחרים שלנו? על איסוף ועיבוד נתונים בעזרת Databricks.

איתנו באולפן

אביעד פניגשטיין, CTO ו-Chief architect בחברת Cloud Valley.

על מה דיברנו בפרק זה?

0:11 – הצגת נושא הפרק והאורח שלנו 

2:28 – אביעד מפרט על האתגרים ש-Big Data מציב כיום לארגונים 

5:40 – האתגר הראשון: על איסוף הנתונים, ואיך Databricks נכנסת לתמונה 

7:51 – למה לא Spark (או: למה דווקא Databricks) והאם יש בכלל הבדל?  

10:40 – למה Open source לא אומר בהכרח 'חינם', ועל מה אני משלם? (רמז: Enterprise ready במלוא מובן המילה) 

13:15 – אבטחת מידע ב-Databricks: על פתרונות היברידיים כמענה לצרכי אבטחה ורגולציה שונים 

15:23 – הטוב מכל העולמות: Azure databricks 

19:26 – חווית Storage layer עם Delta lake 

20:20 – ניהול מחזור חיים מלא מאיסוף נתונים לעיבוד נתונים מתקדם והפקת תובנות בעזרת ML flow 

23:18 – דברי סיכום מפי אביעד. 

מחפשים מומחה שילווה אתכם במעבר לענן? מומחי Cloud Valley ישמחו לייעץ וללוות אתכם, משלב התכנון ועד ליישום הפרויקט בשטח.