צוות הפתוח של Outbrain העלה לאחרונה מערכת דוחות חדשה, מבוססת Hadoop ו- Hiveדניאל וגבי מצוות הפיתוח של Outbrain התארחו אצלנו וסיפרו חוויות על המערכת החדשה
- הזכרנו לכל המאזינים מי הוא Hadoop עליו דיברנו גם בפרק 2
מה הן היכולות שמוסיף Hive והסבר קצר על MapReduceגבי סיפרה איך המערכת עבדה בעבר, מה הוליד את הצורך להחליף את המערכת הישנהדניאל סיפר שאחרי טעינת המידע ל- Hadoop, בניגוד למערכת הישנה, ניתן להריץ שאילתות כבדותמה עושה חברת Cloudera והתמיכה שלהם ב- Hadoopשימוש ב- Hadoop ו- Hive וכתיבת ממשק בפרוטוקול Thriftכלי ניטור וממשקי משתמש ל- Hadoop ו- Hive וכלי Cloudera שמשלימים את התמונהתמיכה ומגבלות בשאילתות SQL ותוספות לשפה כגון multi-insertהאפשרות לגדול – כאשר נגמר המקום בדיסק או כשיש יותר מדי תהליכיםCascading כממשק נוסף ומטמון ל- MapReduceהצורך להיכרות טובה עם Hadoop בכדי לעבוד עם Hive
הקובץ נמצא כאן האזנה נעימה