ينبع التحدي الكبير للبيانات اليوم من التنوع وليس من الحجم أو السرعة

يكمن التحدي المتمثل في إدارة البيانات الكبيرة والاستفادة منها في ثلاثة عناصر ، وفقًا لدوغ لاني ، نائب رئيس الأبحاث في شركة Gartner. لاحظت لاني لأول مرة منذ أكثر من عقد من الزمان أن البيانات الضخمة تشكل مثل هذه المشكلة للمؤسسة لأنها تقدم حجمًا وسرعة وتنوعًا يصعب إدارتهما. تكمن المشكلة في أن العديد من أقسام تكنولوجيا المعلومات ترمي كل شيء لديها على مسائل حجم البيانات وسرعتها ، متناسين معالجة القضية الأساسية المتمثلة في مجموعة متنوعة من البيانات.

في عام 2001 ، كتب لاني أن "الشركات الرائدة ستستخدم بشكل متزايد مستودع بيانات مركزي لتحديد مفردات العمل المشتركة التي تعمل على تحسين التعاون الداخلي والخارجي." لا تزال مسألة تلك المفردات - والتنوع الذي يمنع الشركات من إنشائها - هي الجانب الأقل معالجة في لغز البيانات الضخمة اليوم. (راجع ما يقوله الخبراء الآخرون. تحقق من خبراء البيانات الضخمة الذين يجب متابعتهم على Twitter.)

ثلاثة مقابل البيانات الكبيرة

لقد وجدت العديد من الشركات أساليب لتسخير زيادة حجم البيانات والسرعة. فيسبوك ، على سبيل المثال ، يمكنه تحليل كميات هائلة من البيانات. بالطبع ، يتم تقديم هذه البيانات مرارًا وتكرارًا ضمن نفس المعايير. أدى هذا إلى ابتكارات تقنية مثل قواعد بيانات الأعمدة ، والتي تستخدم الآن على نطاق واسع من قبل الشركات الأخرى التي تواجه مخازن كبيرة على قدم المساواة من عناصر البيانات المماثلة.