يقول مايك أولسون ، الرئيس التنفيذي لشركة Cloudera ، إن منصة Hadoop analytics تنطوي على بعض القيود المهمة التي تنطوي على السرعة والتعقيد ، كما هي. ومع ذلك ، فإن قادة الصناعة - بما في ذلك في شركته الخاصة - يعملون على تغيير ذلك ، واثقين من أن هذه الأداة البحثية ستتطور بطرق أساسية في السنوات القادمة.
في مؤتمر ستراتا العام الماضي ، طلب أولسون من الجمهور تخيل كيف ، إذا تم إنشاؤه اليوم ، سيتم تصميم Hadoop بشكل مختلف ، لافتراض أن بعض التغييرات المحددة يمكن أن تفتح بوابات جديدة للبحث في مجالات مثل التعليم والطاقة والزراعة. نقلاً عن عالم الكونيات والمؤلف العلمي كارل ساجان ، شدد أولسون على أهمية تحطيم البيانات عالية المستوى لجمهور أكبر.
وقال أولسون "أعتقد أننا مستعدون على حافة الاكتشافات الرئيسية التي تهم الشركات والمجتمع".
وأشار إلى أن أحد الأمثلة على ذلك هو الاكتشاف العلمي الذي أصبح ممكناً بفضل عمل المهنيين العلميين في مصادم هادرون الكبير في سويسرا. وفقًا لأولسون ، إنه التقييم اليومي لـ 37 تيرابايت من البيانات التي أدت إلى تقدم رئيسي مثل اكتشاف هيجز-بوسون لمستجمعات المياه ، والذي كشف عن الجوانب الرئيسية للمادة والطاقة. وأضاف أولسون أن Hadoop يساعد في هذه المشاريع البحثية الأساسية من خلال التقاط كمية هائلة من البيانات في مستودع واحد ، ولكن من الصعب التفاعل مع تلك البيانات في الوقت الحقيقي.
من خلال شرح الطرق التي يمكن أن تساعد بها Hadoop والتقنيات المشابهة العلماء في المجالات الرئيسية ، مثل الرعاية الصحية ، أعلن Olson أيضًا عن مشروع Impala ، وهو الأمر الذي تعمل شركته على تنفيذه لمدة عامين ، مع ربعين من الاختبارات التجريبية بالتنسيق مع التخصص عملاء. وقال أولسون ، إن مشروع إمبالا عبارة عن تقنية "مفتوحة المصدر بنسبة 100٪" مع ترخيص Apache الذي يعمل مع Hadoop باعتباره "محرك بحث في الوقت الفعلي". وقال أولسون إن هذا يسمح لما يسميه "سرعة استفسارات التفكير" ، حيث يمكن للمستخدمين طرح سؤال والحصول على رد وصياغة سؤال جديد لاستخدام مجموعات البيانات الرئيسية بفعالية.
وقال أولسون "إنه يوفر لك طريقة جديدة للحصول على بياناتك" ، موضحا كيف يمكن لهذا النوع من التقدم كسر الفرص الإضافية المتاحة لحل المشاكل الرئيسية في الولايات المتحدة وخارجها.