مرکز پردازش داده Spark سال ۲۰۰۹ میلادی به عنوان پروژه تحقیقاتی دانشگاه UC Berkeley فعالیت خود را آغاز کرد تا بتواند ضعف‌های سیستم Hadoop در چارچوب پردازش خوشه‌ای را از میان بردارد. این سیستم پس از تکمیل نهایی در سال ۲۰۱۰ به صورت عمومی عرضه شد و از سال گذشته بیش از ۴۵۰ شرکت توزیع‌کننده محصولات نرم افزاری آن را در اختیار مشتریان خود قرار دادند.
سیستم Spark نسبت به موتور MapReduce در خدمات Hadoop مزایای فراوان دارد که از جمله آنها می‌توان به سرعت بالاتر در پردازش کلان داده‌ها اشاره کرد.....