flex-height
text-black

غرفة الخادم في مركز بيانات

ما هو مستودع البيانات؟

مستودع البيانات (DW) هو نظام تخزين رقمي يقوم بتوصيل ومواءمة كميات كبيرة من البيانات من العديد من المصادر المختلفة.

default

{}

default

{}

primary

default

{}

secondary

نظرة عامة على مستودع البيانات

مستودع البيانات (DW) هو مستودع مركزي يجمع ويدمج ويخزن كميات كبيرة من البيانات الحالية والقديمة من مصادر متعددة. ويدعم التحليل الذكي للأعمال (BI) وإعداد التقارير والتحليلات المتقدمة من خلال توفير مصدر واحد ومتسق للحقائق. من خلال دمج البيانات وتوحيدها، يمكن للمؤسسات إنشاء رؤى شاملة موثوق بها وتلبية المتطلبات التنظيمية واتخاذ قرارات مستنيرة معتمدة على البيانات.

عادة ما تتدفق البيانات إلى مستودع بيانات من الأنظمة التشغيلية (مثل تخطيط موارد المؤسسة وإدارة علاقات العملاء) وقواعد البيانات الداخلية والمصادر الخارجية مثل الأنظمة الأساسية للشركاء وأجهزة إنترنت الأشياء وتغذية الطقس والوسائط الاجتماعية. ومع نضج الحوسبة السحابية ، تحول تخزين البيانات من البيئات التقليدية في مكان العمل إلى بُنى سحابية مرنة متعددة السحب وهجينة.

يتم بناء مستودعات البيانات الحديثة لإدارة كل من البيانات المنظمة وغير المنظمة مثل مقاطع الفيديو والصور وتدفقات أجهزة الاستشعار. ويقوم العديد منها بدمج التحليلات المتكاملة والمعالجة في الذاكرة لتمكين استعلامات أسرع والوصول إلى البيانات في الوقت الفعلي والمزيد من كفاءة إعداد التقارير وتدفقات عمل BI. وبدون مستودع بيانات، تصارع المنظمات في تجميع مصادر البيانات غير المتجانسة وإعداد البيانات بشكل صحيح للتحليلات والحفاظ على الرؤية عبر مجموعات البيانات.

ما هو مستودع البيانات

الشكل 1: نظرة عامة على مستودع بيانات

مزايا تخزين البيانات بالمستودع

مستودع البيانات المصمم جيدًا هو العمود الفقري للتحليل الذكي الناجح للأعمال وإعداد التقارير والتحليلات. ومن خلال دمج البيانات في مصدر واحد للحقائق، فإنه يسرع الرؤى الشاملة من أجل اتخاذ قرارات أفضل وأكثر ثقة في جميع قطاعات الأعمال. تتضمن المزايا الأساسية ما يلي:

تدفق مستودع البيانات

الشكل 2: لقطة شاشة مستودع البيانات تُظهر أصل البيانات

ما أنواع البيانات التي يمكن أن تخزن مستودع البيانات؟

عندما ظهرت مستودعات البيانات لأول مرة في أواخر الثمانينيات، تم بناؤها لتخزين البيانات المهيكلة - وهي معلومات منظمة جيدًا مثل تفاصيل العملاء وقوائم المنتجات وسجلات المعامَلات. ومع توسع احتياجات الأعمال، أرادت الشركات أيضًا العمل مع بيانات غير منظمة مثل المستندات والصور ومقاطع الفيديو ورسائل البريد الإلكتروني ومنشورات الوسائط الاجتماعية ومخرجات الاستشعار من الآلات وأجهزة إنترنت الأشياء.

يمكن لمستودعات البيانات الحديثة معالجة كل من البيانات المهيكلة وغير المهيكلة، وجمعها معًا لمنح الشركات عرضًا أكثر اكتمالاً وتكاملاً للحصول على رؤى أقوى.

المفاهيم والمقارنات الرئيسية

هناك الكثير لتعلمه في عالم تخزين البيانات. وهنا بعض أهم المفاهيم. استكشف التعريفات والأسئلة المتكررة الإضافية في قاموس المفردات الخاص بنا.

مستودع البيانات مقابل قاعدة البيانات

تقوم كل من قواعد البيانات ومستودعات البيانات بتخزين البيانات، لكنها تخدم أدوارًا مختلفة. تدير قاعدة بيانات معلومات في الوقت الفعلي لمنطقة أعمال محددة، بينما يجمع مستودع البيانات بين البيانات الحالية والقديمة من جميع أنحاء المنظمة لدعم إعداد التقارير والتحليلات. على الرغم من أنه يعمل على تقنية قاعدة البيانات، إلا أن مستودع البيانات يضيف أدوات لدمج البيانات ونمذجتها وإدارتها مع مرور الوقت.

تحافظ قواعد البيانات على تشغيل العمليات اليومية من خلال معالجة المعامَلات وتحديث السجلات بسرعة. مستودعات البيانات تدعم التحليلات وتساعد الفرق على تحديد الاتجاهات ومقارنة الأداء واتخاذ القرارات الاستراتيجية.

مستودع البيانات مقابل مستودع البيانات

تقوم كل من مستودعات البيانات وبحيرات البيانات بتخزين كميات كبيرة من البيانات ولكن لها أغراض مختلفة. يحتفظ مستودع البيانات بالبيانات البنيوية التي تم تحضيرها لإعداد التقارير والتحليلات، بينما يخزن مستودع البيانات بيانات أولية غير معالَجة والتي يمكن استخدامها لاحقًا. وغالبًا ما يعملون معًا: البيانات الأولية تعيش في البحيرة ويتم تحويلها ونقلها إلى المستودع عند الحاجة للتحليل.

استخدام مستودع بيانات لتخزين البيانات الأولية بشكل مرن ومنخفض التكلفة. استخدام مستودع بيانات لتحليلات سريعة يمكن الاعتماد عليها في بيانات منظمة. وتستفيد معظم المنظمات من كليهما؛ حيث تلتقط البحيرة كل شيء، ويحولها المستودع إلى رؤية ثاقبة.

مستودع البيانات مقابل مستودع البيانات

الشكل 3: مقارنة بين مستودع بيانات ومستودع بيانات

مستودع البيانات مقابل مستودع البيانات الفرعي

مستودع البيانات الفرعي هو قسم فرعي من مستودع بيانات، يتم تقسيمه خصيصًا لقسم أو قطاع أعمال مثل المبيعات أو التسويق أو التمويل. على سبيل المثال، قد يركز مستودع بيانات المبيعات الفرعي على الفرص التسويقية ونشاط خطة المبيعات والصفقات المغلقة، بينما سيتم تركيز مستودع بيانات التمويل الفرعي على الميزانيات والتوقعات ومقاييس الإيرادات.

يتم إنشاء بعض مستودعات البيانات الفرعية لأغراض تشغيلية مستقلة أيضًا. في حين أن مستودع البيانات يعمل بمثابة مخزن البيانات المركزي لشركة بأكملها، يخدم مستودع البيانات الفرعي البيانات ذات الصلة لمجموعة محددة من المستخدمين. يعمل هذا على تبسيط الوصول إلى البيانات وتسريع عملية التحليل ومنحها التحكم في البيانات الخاصة بها. غالبًا ما يتم نشر مستودعات بيانات فرعية متعددة داخل مستودع بيانات.

مستودع البيانات مقابل مستودع البيانات الفرعي

الشكل 4: مخطط يوضح كيفية عمل مستودع بيانات فرعي

المكونات الأساسية لمستودع بيانات

يتضمن مستودع البيانات الحديث أربعة مكونات أساسية: قاعدة بيانات مركزية، وتكامل البيانات وأدوات الاستيعاب، وبيانات التعريف، وأدوات الوصول. فهي توفر معًا تحليلات سريعة وموثوقة على نطاق واسع.

مكونات مستودع البيانات

الشكل 5: مخطط يوضح مكونات مستودع بيانات

  1. قاعدة البيانات المركزية: محرك التخزين الأساسي للمستودع، تقليديا قاعدة بيانات علائقية ولكن بشكل متزايد في الذاكرة أو النظام المحلي السحابي لأداء أعلى.
  2. تكامل البيانات وابتلاكها: يتم جلب البيانات من الأنظمة المصدر باستخدام أساليب الدُفعات مثل ETL وELT، إلى جانب الخيارات في الوقت الفعلي مثل النسخ المتماثل لالتقاط بيانات التغيير وخطوط أنابيب الدفق. كما تعالج هذه العمليات التحويل وعمليات فحص الجودة والإثراء.
  3. بيانات التعريف: المعلومات التي تصف البيانات - أصلها وبنيتها ومعناها وكيفية استخدامها - التي تشمل سياق الأعمال والسياق التقني على حد سواء.
  4. الوصول إلى الأدوات: الأدوات التي تتيح للمستخدمين الاستعلام والتحليل والتفاعل مع بيانات المستودع، بما في ذلك أدوات إعداد التقارير ولوحات المعلومات والأنظمة الأساسية للتحليلات وأدوات تطوير التطبيقات.

بنية مستودع البيانات

تاريخيًا، تم تنظيم مستودعات البيانات في طبقات تتماشى مع كيفية نقل البيانات من خلال النظام. يتضمن مستودع البيانات النموذجي ثلاث طبقات. تعمل المنصات الحديثة على تبسيط البنية لدعم حركة البيانات والتحليلات بشكل أسرع.

مخطط بنية مستودع البيانات

الشكل 6: مخطط بنية مستودع البيانات

تم إنشاء مستودعات البيانات وإدارتها من قبل فرق تكنولوجيا المعلومات، ولكن الأنظمة الحديثة بشكل متزايد تمكن مستخدمي الأعمال من العمل مباشرة مع البيانات. تتضمن الإمكانات الأساسية التي تقود هذا الوردية ما يلي:

كيف يعمل مستودع بيانات؟

يقوم مستودع البيانات بتنظيم المعلومات من جميع أنحاء أعمالك بحيث يمكن استكشافها الموثوق بها وتحليلها بسهولة. وعادة ما تتبع العملية أربع خطوات بسيطة:

  1. استخراج: يتم سحب البيانات من الأنظمة المصدر مثل التطبيقات وقواعد البيانات والخدمات السحابية. في هذه المرحلة، يتم تجميع البيانات كما هي.
  2. التحويل: يتم تنظيف البيانات وتوحيدها وشكلها بحيث تكون متسقة وجاهزة للاستخدام. وقد يتضمن ذلك إزالة الأخطاء أو محاذاة التنسيقات أو تطبيق قواعد الأعمال.
  3. تحميل: يتم تخزين البيانات التي تم تحضيرها في المستودع بتنسيق بنيوي محسَّن لإعداد التقارير والتحليلات السريعة.
  4. التحليل: بمجرد تحميل البيانات، يمكن للفرق استكشافها باستخدام لوحات المعلومات والتقارير والتحليلات المتقدمة لاتخاذ قرارات مستنيرة.

ETL مقابل ELT: ما الفرق؟

ETL (استخراج → تحويل → تحميل): يتم تحويل البيانات قبل إدخالها إلى المستودع. وهذا النهج شائع مع مستودعات البيانات التقليدية التي لديها قدرة معالجة محدودة.

نقل الاستحقاقات والالتزامات (استخراج → تحميل → تحويل): يتم تحميل البيانات الخام إلى المستودع أولاً وتحويلها داخل المستودع. تفضل المنصات السحابية الحديثة هذه الطريقة لأنها يمكنها التعامل بكفاءة مع التحولات الكبيرة على نطاق واسع.

ما الصفات المميزة الأساسية الأربعة لمستودع بيانات؟

يتم إنشاء مستودع البيانات على أساس بعض المبادئ الأساسية التي تضمن له تقديم معلومات موثوقة ومتسقة وقابلة للتحليل عبر الأعمال. الصفات المميزة الأساسية الأربعة هي:

  1. التوجه الموضوعي: منظم حول موضوعات الأعمال الأساسية - مثل العملاء أو المبيعات لدعم التحليل.
  2. متكامل: يتم تنظيف البيانات من أنظمة مختلفة مثل تخطيط موارد المؤسسة وإدارة علاقات العملاء وتوحيدها قياسيًا، لذا فهي تتلاءم مع بعضها البعض بشكل متسق.
  3. متغير الوقت: يخزن البيانات القديمة على مدار فترات طويلة، مما يتيح تحليل الاتجاه والأداء.
  4. غير متطايرة: البيانات مستقرة بمجرد تحميلها - مقروءة ولكن لم يتم تحديثها أو حذفها - ضمان مصدر موثوق للحقيقة.

مزايا مستودع البيانات السحابية

تزداد شعبية مستودعات البيانات السحابية لأنها تقدم مزايا كبيرة على الأنظمة التقليدية في مكان العمل. إليك أهم سبع مزايا لنقل مستودع البيانات الخاص بك إلى السحابة:

  1. سرعة النشر: امتداد التخزين والحوسبة والبيئات الجديدة مثل ماركات البيانات أو صناديق الرمل بالدقائق، من أي مكان.
  2. إجمالي تكلفة الملكية الأدنى: ادفع فقط مقابل الموارد التي تستخدمها. تجنب تكاليف الأجهزة والمرافق والصيانة وتقليل الإنفاق عن طريق فصل التخزين والاحتساب.
  3. المرونة: قم بالتدريج لأعلى أو لأسفل على الفور للتعامل مع أحمال العمل المتغيرة وأحجام البيانات الكبيرة دون جهد يدوي.
  4. الأمن واستعادة القدرة على العمل بعد الكوارث: توفر المنصات السحابية غالبًا ضوابط أمنية وتشفير ونسخ احتياطي تلقائي للحماية من فقدان البيانات.
  5. الأداء في الوقت الفعلي: تقدم المحركات الداخلية والمحركات السحابية الأصلية سرعات معالجة سريعة للحصول على رؤى شاملة في الوقت الفعلي.
  6. الوصول إلى التقنيات الجديدة: يمكنك دمج إمكانات مثل تدريب الآلة والرؤى المؤتمتة والتحليلات المتقدمة بسهولة.
  7. تمكين مستخدمي الأعمال: منح الفرق عرضًا موحدًا للبيانات بالإضافة إلى أدوات بديهية لتحليل المعلومات وربط المصادر الجديدة دون مشاركة كبيرة في تكنولوجيا المعلومات.

لقطة شاشة حل مستودع البيانات

الشكل 7: تخزين البيانات يدعم التحليلات الشاملة للمصاريف

أفضل ممارسات مستودع البيانات

عند إنشاء مستودع بيانات جديد أو توسيع مستودع موجود، يساعدك اتباع الممارسات المثبتة على تحقيق أهدافك مع توفير الوقت والتكلفة. وتركز بعض الممارسات على احتياجات الأعمال، بينما تندرج ممارسات أخرى تحت إشراف أوسع نطاقًا في مجال تكنولوجيا المعلومات. القائمة أدناه هي نقطة انطلاق متينة، وستقوم بتنقيحها أثناء عملك مع شركاء التكنولوجيا والخدمات لديك.

أفضل ممارسات الأعمال

أفضل ممارسات تكنولوجيا المعلومات

ملخص

تلعب مستودعات البيانات الحديثة - وخاصة المستندة إلى الشبكة السحابية - دورًا مركزيًا في التحول الرقمي من خلال توحيد البيانات من المصادر الداخلية والخارجية للحصول على رؤية كاملة في الوقت المناسب للأعمال. فهي تدعم لوحات المعلومات ومؤشرات الأداء الأساسية والتنبيهات والتقارير في جميع أنحاء المؤسسة وتدعم التحليلات السريعة والمعقدة دون التأثير على الأنظمة التشغيلية.

ونظرًا لأنها يمكن أن تبدأ صغيرة ومتطورة بسهولة، فإنها تساعد فرق الشركات ووحدات الأعمال على حد سواء في اتخاذ قرارات أفضل وتحسين الأداء.

الأسئلة المتكررة

ما هو مستودع البيانات الكبير؟
مستودع البيانات هو مكان لتخزين جميع أنواع البيانات الضخمة، سواء كانت بيانات منظمة من تطبيقات الأعمال أو بيانات غير منظمة من تطبيقات الأجهزة المتنقلة أو وسائل التواصل الاجتماعي أو أجهزة إنترنت الأشياء (IoT). لأن البيانات مخزنة في تنسيقها الطبيعي-منظم أو غير منظم أو شبه منظم أو تحويل ثنائي أو تسوية أو معالجة أخرى قد تكون ضرورية لتمكين التحليلات عبر أنواع البيانات المتعددة. معظم بحيرات البيانات تعتمد على السحابة بسبب الأحجام الكبيرة من البيانات التي تخزنها، والحاجة إلى اتصالات عالية السرعة للمصادر الموزعة، والحاجة إلى قابلية التوسع. فقدرتها على تخزين كميات هائلة من البيانات الخام تجعل منها مكملاً مرناً منخفض التكلفة لمستودع بيانات.
ما هو ETL وELT؟
يشير ETL إلى "الاستخراج والتحويل والتحميل". ويشير إلى عملية أخذ البيانات من نظام مصدر، وتنظيفها وتشكيلها إلى تنسيق قابل للاستخدام، ومن ثم تحميلها إلى مستودع بيانات أو مخزن بيانات آخر. تستخدم العديد من الأنظمة الحديثة أيضًا ELT - "الاستخراج والتحميل والتحويل" - حيث يتم تحميل البيانات أولاً وتحويلها بعد ذلك. ويساعد كلا النهجين على تحويل البيانات الأولية إلى شيء يمكن تحليله، سواء كان مصدره أنظمة معاملات أو مصادر أكثر تعقيدًا وغير منظمة.
ما هو مستودع البيانات الفرعي؟
مستودع البيانات الفرعي هو شريحة مركزة من مستودع بيانات مصممة لمنطقة أعمال أو فريق محدد، مثل التمويل أو التسويق. وهو يمنح تلك المجموعة وصولاً سريعًا إلى البيانات الأكثر صلة بعملها ويسمح لها بإدارة مجموعة البيانات المنسَّقة الخاصة بها داخل المستودع الأكبر. على سبيل المثال، قد تتضمن مستودع البيانات المالية الفرعي الميزانيات والتوقعات وبيانات الإيرادات المخصصة لاحتياجات إعداد التقارير الخاصة بالفريق المالي.
ما هو إعداد نماذج البيانات؟
نمذجة البيانات هي عملية تحديد كيفية تنظيم البيانات وتوصيلها بحيث يمكن تخزينها واستخدامها بفعالية. يوضح نموذج البيانات ما تمثله البيانات وكيفية ارتباط القطع المختلفة ببعضها البعض، مما يؤدي إلى إنشاء مخطط للبنية المتسقة عبر الأنظمة. على سبيل المثال، قد يُظهر نموذج بيانات المبيعات كيفية ربط العملاء والأوامر والمنتجات معًا لدعم إعداد التقارير والتحليل.
ما هو مستودع بيانات المؤسسة (EDW)؟
مستودع بيانات المؤسسة (EDW) هو نظام مركزي يقوم بتخزين جميع البيانات الحالية والقديمة للشركة في مكان واحد. وتوفر مصدرًا واحدًا ومتسقًا للمعلومات للتحليلات وإعداد التقارير ومؤشرات الأداء الأساسية على مستوى الشركة. العديد من EDWs تعمل في السحابة لتسهيل الوصول، وقابلية التوسع، والإدارة.
ما هي الأنواع الثلاثة لمستودعات البيانات؟
  1. مستودع بيانات المؤسسة: مستودع بيانات المؤسسة: مستودع بيانات مركزي على مستوى الشركة يقوم بتخزين جميع البيانات الحالية والقديمة في مكان واحد. ويوفر مصدرًا واحدًا ومتسقًا للبيانات للتحليلات وإعداد التقارير ومؤشرات الأداء الأساسية على مستوى المنظمة بأكملها. معظم EDWs الحديثة تعتمد على السحابة لقابلية التوسع وسهولة الوصول.
  2. مخزن البيانات التشغيلية: مخزن البيانات التشغيلية هو مخزن بيانات شبه فوري يستخدم لإعداد التقارير التشغيلية والأنشطة اليومية. وهو يقع بين أنظمة المعاملات وEDW، ويجمع البيانات من مصادر متعددة في شكل أكثر حداثة، ولكن ليس تاريخيًا بالكامل. من المفيد عندما تكون البيانات بحاجة إلى التحديث بشكل متكرر للقرارات التشغيلية السريعة.
  3. مستودع البيانات الفرعي: مستودع البيانات الفرعي هو شريحة أصغر خاصة بموضوع مستودع بيانات، مصممة لفريق معين أو وحدة أعمال معينة، مثل التمويل أو المبيعات أو التسويق. ويوفر وصولاً سريعًا إلى البيانات الأكثر أهمية لتلك المجموعة دون عرض المستودع بأكمله.
ما هي المكونات الأربعة لمستودع بيانات؟
  1. قاعدة البيانات المركزية: طبقة التخزين الأساسية حيث يتم وضع البيانات المهيكلة والمطهرة والمتكاملة. وعادة ما تكون هذه قاعدة بيانات ارتباطية أو أعمدة أو سحابية أصلية محسَّنة للتحليلات.
  2. تكامل البيانات / أدوات الابتلاع: الأدوات والعمليات - مثل ETL (استخراج، تحويل، تحميل)، ELT (استخراج، تحميل، تحويل)، أحمال الدُفعات، والنسخ المتماثل في الوقت الفعلي - التي تجلب البيانات من الأنظمة المصدر إلى المستودع وتحضيره للاستخدام.
  3. بيانات التعريف: المعلومات التي تصف البيانات: من أين جاءت، وكيفية تنظيمها، وما يعنيها، وكيفية استخدامها. تساعد بيانات التعريف المستخدمين على فهم البيانات والثقة بها.
  4. الوصول إلى الأدوات: التطبيقات والواجهات التي تتيح للمستخدمين الاستعلام وعرض واستكشاف وتحليل البيانات، مثل أدوات إعداد التقارير ولوحات المعلومات والأنظمة الأساسية للتحليلات وأدوات استعلام SQL.
هل SQL مستودع بيانات؟
رقم SQL هي لغة تُستخدم للاستعلام عن البيانات وإدارتها، بينما مستودع البيانات هو نظام يقوم بتخزين وتنظيم ومعالجة كميات كبيرة من البيانات للتحليل. SQL هي ببساطة واحدة من الأدوات الرئيسية المستخدمة لاستخدام البيانات داخل مستودع بيانات.
/content/sapcom/countries/ar_sa/fragments/insights/article-details
section-grid-empty-inner-spacing
false
/content/sapcom/countries/ar_sa/fragments/insights/article-read-more
location
document-footer
location
sidebar
section-grid-empty-inner-spacing
false