Big Data .. باختصار ( 2 )

 في الموضوع السابق شرحت مشكلة قواعد البيانات العلائقة RDBMS مع البيانات الكبيرة .
هنا نتطرق الى الحلول ..
تخيل وانت تكتب تعليق في فيسبوك ان التعليق الذي يسبق تعليقك موجود في سيرفر في اوروبا الغربية و تعليقك تم تخزينه في سيرفر في غرب اميركا و هكذا . لكن بالنسبة لك ترى انها في مكان واحد . هذه فائدة الBig Data .

الموضوع قد يشمل افلام اليوتيوب ايضا .. فالفلم الواحد قد يكون مقسم على اكثر من سيرفر فهي في الاخير بيانات من نوع Binary و قد تكون موزعة ايضا على اكثر من سيرفر .

هناك تقنيات ظهرت جعلت هذه الاشياء ممكنة الحدوث و بسهولة و فوق هذا هي غير مكلفة بل ان تكلفتها صفر .. فهي في الاصل مشاريع Open source .
من هذه المشاريع و اهمها هو مشروع Apache Hadoop و مشروع Apache Spark و مشروع Storm و سأشرح الفرق بينها .
و التي يمكن من خلالها توزيع البيانات على الاف السيرفرات حول الكرة الارضية .
سأركز في دروس لاحقة على هادوب و سبارك فقد .. اما ستورم فهو مفيد للStreams كملفات الافلام و الاصوات و لذا لن اركز عليه .
اما هادوب و ان كنت افضل سبارك .. الا ان هادوب مازال بمثابة السيد لهذه التقنيات و يستعمل في جميع الشركات الكبيرة بلا استثناء , قوقل , فيسبوك , امازون , تويتر, لينكدن و غيرها .. و الطلب على الاختصاصيين في هادوب متزايد .. و يكفي انه ينقلك الى منطقة اخرى ارقى في عالم شركات التقنية .

في الموضوع القادم سأتحدث عن هادوب Hadoop .