تطوير نظام لإدارة البيانات الضخمة بإستخدام الأدوات المفتوحة المصدر

Abstract

في السنوات الاخيرة اصبحت البيانات تتولد بكميات ضخمة بعد دخول مواقع التواصل الاجتماعي والتجارة الألكترونية وعمليات البحث اليومية وعمليات دراسة السلوك..الخ . وأن هذه البيانات يستفاد منها بطرق شتى من الناحية التجارية فإن الشركات بدأت تولي اهتماماً لبياناتها والبيانات التي تتحصل عليها حيث أن هذه البيانات تساعد الشركة في فهم سلوك عملائها وتحليل جودتها وتحسين سمعتها بشكل عام، ولكن التعامل مع هذه البيانات الضخمة ليس بالأمر السهل إذ أن أدوات إدارة البيانات التقليدية لا تستطيع إدارة هذه البيانات بالكفاءة المطلوبة حيث أن هذه الأنظمة تسعى لتحقيق التكاملية والإتساق مما يقلل بشكل واضح من إتاحية البيانات في أغلب الأوقات وأن هذا الأمر قد يزعج العميل بشكل أو بأخر، ولذلك بدأت هذه الشركات في البحث عن أنظمة أخرى أفضل تحقق إتاحية أكبر إلى حد مرضي للعملاء ولكن الانظمة التي ظهرت لحل هذه المشكلة تضحي بالإتساق مما قد يؤدي إلى خسارة الشركة ، وأن معظم الشركات تضطر للإختيار ما بين الإتساق والإتاحية أي ما بين رضا العملاء وربحية الشركة .

في هذا البحث تم اقتراح وتصميم معمارية جديدة توفر حلاً متوازناً ما بين الإتساق والإتاحية ‘ حيث تم الاعتماد في المعمارية المقترحة على أدوات مفتوحة المصدر ومجانية و تم ربطها مع بعضها البعض لإيجاد نظام إدارة البيانات المناسب، ومن ثم تم اختبار النتائج بإستخدام الأداة المطورة في هذا البحث RYM للتأكد من أن النظام يعمل بالكفاء المطلوبة .