ما هو سوق البيانات؟ شرح التصميم والأمثلة والتنفيذ

By |2022-03-28T11:35:51+00:00أكتوبر 21st، 2019|

على عكس مستودع البيانات الذي يخزن البيانات على مستوى المؤسسة ، فإن سوق البيانات يتضمن معلومات متعلقة بقسم معين أو مجال معين. على سبيل المثال ، قد يحتوي سوق بيانات المبيعات على بيانات تتعلق بالمنتجات والعملاء والمبيعات فقط. اقرأ هذه المدونة لتطوير فهم أفضل لمستودعات بيانات الأقسام هذه.

ما هي Data Marts؟

مجموعات البيانات هي مجموعة فرعية من مستودع البيانات تتعامل مع مسألة واحدة. غالبًا ما يتم إنشاؤها وإدارتها بواسطة قسم أعمال واحد. نظرًا لأنها موجهة نحو الموضوع ، فإنها تأخذ عادةً البيانات من عدد صغير فقط من المصادر ، والتي يمكن أن تكون أنظمة تشغيل داخلية ، أو بحيرة بيانات ، أو مستودع بيانات مركزيًا ، أو مصادر خارجية. عادةً ما تكون مكثفة وأقل تعقيدًا من مستودعات البيانات ، مما يسهل بنائها وصيانتها.

الآن بعد أن فهمنا ما هي عليه ، سننظر في الأنواع الثلاثة المختلفة لأمثلة سوق البيانات ، واستخداماتها ، وكيف تبسط إدارة البيانات. سنقوم أيضًا بتوضيح دليل مفصل خطوة بخطوة حول كيفية تنفيذ مستودع بيانات خاص بالقسم لشركتك المحددة.

أنواع مخططات البيانات

المصدر: Study.com

كيف تستفيد شركة Data Marts من إدارة قواعد البيانات؟

قبل أن نناقش أنواعها المختلفة ، دعنا نلقي نظرة مختصرة على فوائد مجموعات البيانات وسبب ضرورتها للأعمال التجارية القائمة على البيانات:

  • قم بتمكين الوصول السريع إلى البيانات عن طريق استرداد مجموعة محددة من البيانات لذكاء الأعمال وإعداد التقارير. نتيجة لذلك ، فهي تساعد في تسريع ذكاء الأعمال.
  • إنها أسهل في التنفيذ وأكثر فعالية من حيث التكلفة من بناء مؤسسة مستودع البيانات.
  • مصمم وفقًا لمتطلبات مجموعة معينة من المستخدمين العاملين في قسم معين.
  • إنها أكثر قابلية للتكيف نسبيًا من مستودع البيانات. يمكن دمج أي تغيير في نموذج البيانات بسهولة وسرعة في سوق البيانات نظرًا لصغر حجمه.
  • السماح بحقوق التحكم في الوصول المحبب بسبب التقسيم والتجزئة الواسعين.

باختصار ، تعد متاجر البيانات أسرع بكثير وقابلة للتكيف وفعالة من حيث التكلفة للصيانة من مستودع البيانات. على النقيض من ذلك ، يتم إنشاء مستودعات البيانات لدمج البيانات من عدد لا يحصى من المصادر (غالبًا ليس بتنسيق منظم).

أنواع بيانات البيانات

يمكن تصنيف ساحات البيانات إلى ثلاثة أنواع رئيسية:

1. داتا مارت

يتيح لك سوق البيانات التابع دمج جميع بيانات عملك في ملف واحد مستودع البيانات، مما يمنحك الفوائد النموذجية من المركزية.

في مثال سوق البيانات هذا ، هناك حاجة إلى مخازن بيانات الأقسام وسيتعين عليك بنائها ككيانات تابعة لضمان الاتساق والتكامل عبر جميع أنظمة تخزين البيانات.

يمكن إنشاء مجموعات البيانات المعتمدة باستخدام طريقتين مختلفتين. في النهج الأول ، يتم إنشاء مستودعات بيانات المؤسسة وسوق البيانات بحيث يمكن للمشغل الوصول إلى كليهما عند الحاجة. في النهج الثاني ، المعروف أيضًا باسم النهج الموحد ، يتم تخزين نتائج عملية ETL في منطقة تخزين مؤقتة مثل ناقل بيانات مشترك بدلاً من قاعدة بيانات لذلك يمكن للمشغل الوصول إلى بيانات الإدارات فقط.

المنهجية الأخيرة ليست مثالية لأنها تؤدي في بعض الأحيان إلى مستودع بيانات غير مرغوب فيه تنشأ فيه جميع البيانات من مصدر مشترك ، ولكن يتم تجاهلها في الغالب.

2. سوق البيانات المستقلة

يمكن إنشاء سوق بيانات مستقل دون استخدام مستودع البيانات المركزي. يوصى به في الغالب للوحدات أو المجموعات الأصغر داخل المنظمة. كما يوحي الاسم ، لا يرتبط هذا النوع من المستودعات بمستودع بيانات المؤسسة ولا بأي كيان آخر. يقوم بإدخال البيانات بشكل منفصل ، كما يتم تنفيذ التحليلات بشكل مستقل.

مع إنشاء المزيد والمزيد من مجموعات البيانات المستقلة ، يزداد تكرار البيانات أيضًا عبر المؤسسة. هذا لأن كل مخزن بيانات مستقل يحتاج إلى نسخة مكررة من معلومات العمل الشاملة الخاصة به. نظرًا لأن هذه المخازن المستقلة للبيانات تصل مباشرة إلى الملفات و / أو جداول نظام التشغيل ، فإنها إلى حد كبير الحد من قابلية التوسع في أنظمة دعم القرار (DSS).

3. سوق البيانات الهجين

باستخدام سوق البيانات المختلط ، يمكنك دمج البيانات من العديد من أنظمة المصادر التشغيلية بالإضافة إلى مستودع البيانات. هذه مفيدة بشكل خاص عندما تحتاج إلى تكامل مخصص ، مثل إضافة مجموعة أو منتجات جديدة إلى الأعمال.

كما يشير الاسم ، فإن سوق البيانات المختلط عبارة عن مزيج من النوعين التابع والمستقل. إنه مناسب للشركات التي لديها قواعد بيانات متعددة وتحتاج إلى تحول سريع. تحتاج أمثلة سوق البيانات من هذا النوع إلى تنظيف بسيط للبيانات ، ودعم هياكل التخزين الضخمة ، وهي مرنة لأنها تجمع بين مزايا كل من الأنظمة المستقلة والمستقلة.

تصميم متاجر البيانات لتخزين البيانات

إليك كيف يمكنك البدء في تصميم سوق بيانات لاحتياجات مؤسستك:

1. تصميم

الخطوة الأولى هي إنشاء تصميم قوي. تتضمن بعض العمليات الهامة التي تنطوي عليها هذه المرحلة جمع المتطلبات المؤسسية والتقنية ، وتحديد مصادر البيانات ، واختيار مجموعة فرعية مناسبة من البيانات ، وتصميم التخطيط المنطقي (مخطط قاعدة البيانات) والهيكل المادي.

2. بناء / بناء

الخطوة التالية هي بنائه. وهذا يشمل إنشاء قاعدة البيانات المادية والهياكل المنطقية. في هذه المرحلة ، ستقوم بإنشاء جداول البيانات الفعلية وجداول الأبعاد والحقول والفهارس وعناصر التحكم في الوصول.

3. تعبئة / نقل البيانات

الخطوة التالية هي ملء المتجر ، مما يعني نقل البيانات إليه. في هذه المرحلة ، يمكنك أيضًا ضبط معدل تكرار نقل البيانات ، مثل يوميًا أو أسبوعيًا. يتضمن هذا عادةً استخراج معلومات المصدر وتنظيف البيانات وتحويلها وتحميلها في مستودع الإدارات.

4. الوصول إلى البيانات

في هذه الخطوة ، يتم استخدام البيانات التي تم تحميلها في سوق البيانات في الاستعلام وإنشاء التقارير والرسوم البيانية والنشر. تتمثل المهمة الرئيسية التي تنطوي عليها هذه المرحلة في إعداد طبقة تعريف وترجمة هياكل قواعد البيانات وأسماء العناصر إلى تعبيرات الشركة بحيث يمكن للمشغلين غير التقنيين استخدام سوق البيانات بسهولة. إذا لزم الأمر ، يمكنك أيضًا إعداد API والواجهات لتبسيط الوصول إلى البيانات.

5. إدارة

تتضمن الخطوة الأخيرة الإدارة والمراقبة ، والتي تشمل:

  • التحكم في وصول المستخدم المستمر.
  • تحسين وتحسين النظام المستهدف لتحسين الأداء.
  • إضافة وإدارة البيانات الجديدة في المستودع.
  • تكوين إعدادات الاسترداد والتأكد من توفر النظام في حالة الفشل.

الخط السفلي

يتضمن سوق البيانات قسمًا فرعيًا من البيانات على مستوى المؤسسة ، وهو أمر ذو قيمة لمجموعة مستخدمين معينة في المؤسسة. على عكس مستودع البيانات الذي يعد مكلفًا ومعقدًا لإنشائه ، فإنه يوفر بديلاً فعالاً من حيث التكلفة. كما أنها تتيح الوصول إلى البيانات بشكل أسرع وسهلة الاستخدام ، حيث إنها مصممة بدقة وفقًا لمتطلبات المشغلين وتركز على قسم / مجال واحد.

يمكن لسوق البيانات المساعدة في التعقب السريع لعمليات شركتك ، حيث يستغرق التنفيذ وقتًا أقل من مستودع البيانات. كما أنه يحتوي على البيانات السابقة حتى يتمكن محللو البيانات من تحديد اتجاهات البيانات بسهولة.