התייחסו לקטע הבא ואז ענו על השאלה שאחריו באותה שפה כמו הקטע:  מעבר: בשנת 2004, גוגל פרסמה מאמר על תהליך שנקרא MapReduce שמשתמש בארכיטקטורה דומה. קונספט MapReduce מספק מודל עיבוד מקביל, ויישום קשור שוחרר לעיבוד כמויות עצומות של נתונים. עם MapReduce, שאילתות מחולקות ומופצות על פני קשרים מקבילים ומעובדות במקביל (שלב המפה). התוצאות נאספות ומסופקות (צעד הפחתת). המסגרת הייתה מוצלחת מאוד, כך שאחרים רצו לשכפל את האלגוריתם. לכן, יישום של מסגרת MapReduce אומץ על ידי פרויקט קוד פתוח Apache בשם Hadoop. אפצ'י ספארק פותח בשנת 2012 בתגובה להגבלות בפראדיגמת MapReduce, שכן הוא מוסיף את היכולת להגדיר פעולות רבות (לא רק מפה ואחריו הפחתה).  שאלה: מה היה הרעיון החדשני של עיבוד הנתונים?
מודל עיבוד מקביל