في هذا الثريد سوف أتحدث عن تقنيتين تستخدم في علم البيانات وهي بحيرة البيانات ومستودع البيانات
بحيرة البيانات Data Lake
بحيرات البيانات هو مصطلح تقني جديد يتحدث مجموعة واسعة وكبيرة من البيانات من مختلف المصادر تكون متواجد من مكان واحد والتي تساعد في تحليل البيانات بمختلف المصادر
بحيرة البيانات Data Lake
بحيرات البيانات هو مصطلح تقني جديد يتحدث مجموعة واسعة وكبيرة من البيانات من مختلف المصادر تكون متواجد من مكان واحد والتي تساعد في تحليل البيانات بمختلف المصادر
وهذه البيانات بعضها بيانات المنظمة والغير منظمة structured data & unstructured data . وتستخدم في حلول كثيرة مثل الذكاء الاصطناعي، انترنت أشياء وغيرها . بحيرة البيانات تحتاج لوحدات تخزين كبيرة لإحتواء كمية البيانات المنبثقة من مصادر المختلفة .
من أشهر منصات المستخدمة :
Hadoop أو Hortonworks
الهدف من بحيرة البيانات هو جمع فريق إدارة البيانات كل البيانات الموجودة سواء بيانات هامة او غير هامة او حتي لو كانت بيانات غير مفهومة،لانه لا يمكن تخمين قيمة تلك المعلومات ومعرفة أهميتها اليوم، لكن مستقبلا قد تكون في غاية الأهمية
Hadoop أو Hortonworks
الهدف من بحيرة البيانات هو جمع فريق إدارة البيانات كل البيانات الموجودة سواء بيانات هامة او غير هامة او حتي لو كانت بيانات غير مفهومة،لانه لا يمكن تخمين قيمة تلك المعلومات ومعرفة أهميتها اليوم، لكن مستقبلا قد تكون في غاية الأهمية
مستودع البيانات Data Warehouse
كفكره هو قريب من مفهوم بحيرة البيانات وذلك بدمج وتخزين مجموعة كبيرة من البيانات من مختلف المصادر في مركز واحد. ويمكن الاستفادة منها بتحليل البيانات واستخلاص رؤى قيّمة من بياناتها لتحسين عملية اتخاذ القرار.
كفكره هو قريب من مفهوم بحيرة البيانات وذلك بدمج وتخزين مجموعة كبيرة من البيانات من مختلف المصادر في مركز واحد. ويمكن الاستفادة منها بتحليل البيانات واستخلاص رؤى قيّمة من بياناتها لتحسين عملية اتخاذ القرار.
وبمرور الوقت، تنشئ سجلاً ضخماً يكون فائق القيمة لعلماء البيانات ومحللي الأعمال وأصحاب المصلحة لتسهيل عملية اتخاذ القرار.
#الذكاء_الإصطناعي #AI
#ذكاء_الأعمال #BI
#تحليل_البيانات
#الذكاء_الإصطناعي #AI
#ذكاء_الأعمال #BI
#تحليل_البيانات
ما هو الاختلاف بين بحيرة البيانات و مستودع البيانات؟
هناك اختلافات جوهرية تفصل مستودعات البيانات عن بحيرات البيانات، والتي تتراوح من نوع البيانات المخزنة إلى طريقة معالجتها.
هناك اختلافات جوهرية تفصل مستودعات البيانات عن بحيرات البيانات، والتي تتراوح من نوع البيانات المخزنة إلى طريقة معالجتها.
مثال على ذلك:
تخزن البيانات المنظمة والغير منظمة في بحيرة البيانات والتي قد لا يستخدم جزء كبيرة منها بعكس مستودع البيانات الذي يشمل فقط البيانات المنظمة وهي البيانات المطلوبة .
تخزن البيانات المنظمة والغير منظمة في بحيرة البيانات والتي قد لا يستخدم جزء كبيرة منها بعكس مستودع البيانات الذي يشمل فقط البيانات المنظمة وهي البيانات المطلوبة .
مثال أخرى :
كذلك مرونة البيانات في بحيرة البيانات في التعديل بعكس مستودع البيانات والذي عادة ما يكون مربوط في قواعد بيانات يصعب تعديلها.
كذلك مرونة البيانات في بحيرة البيانات في التعديل بعكس مستودع البيانات والذي عادة ما يكون مربوط في قواعد بيانات يصعب تعديلها.
السؤال المهم : هل بحيرة البيانات تغني عن مستودع البيانات؟
بالتاكيد لا ، بعض المنظمات والجهات قد تحتاج لتواجد التقنيتين معاً ( قليلة جدا) ، وخاصة أنه بإمكان بحيرة البيانات أن تغذي أكثر من مستودع للبيانات بنفس الوقت
بالتاكيد لا ، بعض المنظمات والجهات قد تحتاج لتواجد التقنيتين معاً ( قليلة جدا) ، وخاصة أنه بإمكان بحيرة البيانات أن تغذي أكثر من مستودع للبيانات بنفس الوقت
وأخيراً موضوع بحيرة البيانات ومستودع البيانات فيها تفاصيل تقنية كثيرة جدا، لم أستطع طرحها في هذا الثريد ، وسوف أتكلم عن كل تقنية بالتفصيل في الأسابيع القادمة.
#تقنية_المعلومات
#تقنية
#أمن_المعلومات
#تقنية_المعلومات
#تقنية
#أمن_المعلومات
جاري تحميل الاقتراحات...