كيفية التأكد من بحيرة البيانات هادوب الخاص بك لا تصبح مستنقع

وقد كان مصطلح “بحيرة البيانات” شائعا منذ بضع سنوات، ولا سيما في سياق النظم القائمة على هادوب لمعالجة البيانات على نطاق واسع. ولكن كما أشار نائب الرئيس للبحوث كوكبة والمحلل الرئيسي دوغ هينشن في تقرير جديد متعمق، انها ليست مهمة بسيطة لإنشاء بحيرة البيانات التي تصل إلى إمكانات المفهوم

الفكرة الفائقة لبحيرة البيانات هي أن تكون الوجهة الأولى للبيانات بجميع أشكالها، بما في ذلك سجلات المعاملات المنظمة وأنواع البيانات غير المهيكلة وشبه الهيكلية مثل ملفات السجل والنقرات البريدية والبريد الإلكتروني والصور والجداول الاجتماعية والوثائق النصية. بعض التسمية غير منظم وشبه منظم كأنواع بيانات “جديدة”، ولكن معظمها كان لفترة طويلة. لم نكن قادرين على الاحتفاظ أو تحليل هذه المعلومات – حتى الآن.

ويمكن لبحيرات البيانات التعامل مع جميع أشكال البيانات، بما في ذلك البيانات المنظمة، ولكنها ليست بديلا لمستودع بيانات المؤسسة الذي يدعم استعلامات الإنتاج والتقارير التي يمكن التنبؤ بها ضد البيانات المنظمة جيدا. القيمة في بحيرة البيانات هي في استكشاف ومزج البيانات واستخدام قوة البيانات على نطاق واسع للعثور على الارتباطات، والسلوكيات النموذجية، والتنبؤ النتائج، وتقديم توصيات، واتخاذ قرارات وأفعال أكثر ذكاء. التحدي الرئيسي هو أن نشر هادوب لا تتحول سحرية إلى بحيرة البيانات. ومع تزايد عدد حالات الاستخدام وتنوع البيانات بمرور الوقت، يمكن أن تتحول بحيرة بيانات إلى مستنقع إذا فشلت في تخطيط وتنفيذ بنية بيانات مرتبة بشكل جيد.

ديففي حتى أن بحيرة البيانات

نحن نخوض في حيث إن تقنيات عمليات سيكون لها أكبر الأثر وما يعنيه لمستقبل تحليلات البيانات الكبيرة.

من الخطأ أن تقترب من بحيرة بيانات مع وجهة نظرها كمستودع واحد متجانسة، يكتب هنتشن. بدلا من ذلك، يجب تقسيم بحيرة البيانات إلى “مناطق” استنادا إلى ملف تعريف نوع بيانات معين

هذه ليست مسألة بسيطة، يكتب هنشن. من أجل إكمالها سوف تتطلب المؤسسات مجموعة ناضجة من الأدوات ل ابتلاع البيانات والتحول والفهرسة وغيرها من المهام.

المشكلة هنا هي أنه في حين أن مجتمع أباتشي هادوب كان يعمل على مثل هذه الأدوات، فإنها قد تجعل متوسط ​​إدارة تكنولوجيا المعلومات المؤسسة إدارة الصفر المهنية رؤوسهم بسبب عدم الألفة، ويضيف. والخبر السار هو أن النظام البيئي الأوسع قد ظهر حول هادوب، وتبحث لمعالجة المشاكل المرتبطة بإدارة البحيرات البيانات.

تقرير هينشن الكامل يأخذ الغوص أعمق بكثير في إدارة بحيرة البيانات ومبادئ الاستراتيجية. مقتطف متاح في هذا الرابط.

رؤيا كونستيلاتيون

يتم جلب هذه المقالة لك من قبل رؤى كوكبة. كونستلاتيون إنزيتس هي خدمة إخبارية عبر الإنترنت تنشر يوميا لتقديم النصح لأعضاء مجتمع إنزيتس حول أهمية وآثار التطورات في تكنولوجيا المؤسسة. تم تصميم رؤى كونستلاتيون من قبل المحللين الرئيسيين لتجاوز مجرد تقديم التقارير عن الأخبار لتقديم المشورة التفصيلية لأعضاء المجتمع على كيفية تقييم والاستجابة للتغيرات في تكنولوجيا المشاريع. تعرف على المزيد حول كونستلاتيون إنزيتس.

ينكدين يكشف النقاب عن منصة جديدة للتدوين

هل هذا هو عمر أولاب الكبير؟

يهدف داتاروبوت لأتمتة الفاكهة منخفضة شنقا من علم البيانات

مؤسس مابر جون شرودر يتنحى، كو ليحل محل

سوسيال إنتيربريس؛ لينكيدين تكشف النقاب عن منصة جديدة للتدوين؛ تحليلات البيانات الكبيرة؛ هل هذا هو عصر أولاب كبيرة؟؛ تحليلات البيانات الكبيرة؛ يهدف داتاروبوت لأتمتة الفاكهة منخفضة شنقا من علوم البيانات؛ تحليلات البيانات الكبيرة؛ مؤسس مابر جون شرودر يتنحى، كو ليحل محل

Refluso Acido