تخطَّ إلى المحتوى

اعرف ماذا يعني السهم

متاح أيضًا بـ22 لغة

English · Español (Latinoamérica) · 日本語 · Português (Brasil) · Français · Deutsch · Italiano · 한국어 · 简体中文 · Português (Portugal) · 繁體中文 · Bahasa Indonesia · Türkçe · Polski · Tiếng Việt · ไทย · Nederlands · Українська · हिन्दी · Español (México) · Français (Canada) · Deutsch (Schweiz)

الفصل 9 من دورة Data Architect، الجزء 2: التصميم المعماري على نطاق واسع. السابق: معمارية الاستعلام والاسترجاع.

معظم مشكلات جودة البيانات في الـ org المتصلة بأنظمة أخرى تصل عبر integration (تكامل). سجلات مكررة لأن المفتاح غير موجود. قيم قديمة لأن batch توقف عن العمل بصمت. حقول كتب فوقها نظام لم يكن من المفترض أن يكتب فيها أصلًا. معماري البيانات ليس مطالبًا ببناء التكامل. لكنه هو من يقرر ما المسموح للتكامل أن يفعله بالبيانات.

في سباق التتابع، تضع يدٌ العصا في يدٍ مفتوحة تنتظرها: للحظة، تمسك اليدان بها معًا.

الصورة مُنشأة بالذكاء الاصطناعي.

لذلك هذا الفصل أشبه بطبق تذوّق: لمحة عن التكامل كما يحتاجها معماري البيانات، أما الوجبة الكاملة ففي دورة Integration Architect. يبدأ من حيث توقف الفصل 4: كل سهم على خريطة الأنظمة يحتاج إلى آلية. والآن، كل سهم يحتاج إلى معنى.

  • ابتعد لترى الصورة كاملة، ثم اقترب. ابدأ بخريطة الأنظمة كلها، ثم خذ سهمًا واحدًا في كل مرة واسأل: ماذا يعني هذا السهم للبيانات؟
  • اعرف ما يخطط له معماري التكامل، حتى لو كان شخص آخر هو من يبنيه. شكل حركة البيانات يغيّر تصميم البيانات.
  • من يبدأ المحادثة لا يحدد اتجاه تدفق البيانات، والـ client وحده يرى الرحلة كاملة ذهابًا وإيابًا.
  • حداثة البيانات (freshness) متطلّب، لا قيمة افتراضية. وقاعدة البيانات تخزّن؛ أما العملية (process) فهي التي تستدعي: الـ polling يحتاج إلى process، والـ polling بلا جدوى هدر.
  • سجلات مفردة، أم مجموعات، أم bulk: احترم الأصفار. حجم التكامل يصبح حجم البيانات.
  • مفتاح واحد لكل سجل، بعلاقة واحد إلى واحد، في حقل External ID مُعلَّم بأنه unique. عندما يكون للعميل الواحد عدة سجلات خارجية، أضف سجلات لا حقولًا: تسلسل هرمي، أو حسابات نظيرة، أو كائن فرعي (الفصل 6)، وليس أبدًا حقل مفتاح لكل نظام.
  • المفتاح ليس مرجعية. التكامل يكتب الحقول التي يملكها نظامه، لا «الـ Account» كله. وحتى حركة البيانات في الاتجاهين يبقى فيها مالك واحد لكل حقل.
  • إثبات التسليم (proof of delivery): الـ client يملك المحادثة؛ ومن يعرف ما الذي يجب أن يصل هو من يثبت أنه وصل. سجّل كل استدعاء في log، واستأنف بسلاسة بعد التوقف، وأعد المحاولة بأمان، وأرسل التغييرات فقط (increments)، لا الكون كله.
  • الـ platform events هي العمود الفقري؛ والـ outbound messaging تقنية قديمة (legacy)، ما زالت مدعومة لكنها ليست نقطة البداية لأي تصميم جديد.
  • كل سهم مهم يحصل على contract، يُكتب قبل اختيار الآلية، ويعيش أطول من التقنية.

عقد بيانات التكامل (integration data contract)

Section titled “عقد بيانات التكامل (integration data contract) ”

كل سهم مهم يحصل على عقد واحد، من أحد عشر سطرًا:

السطرالقرار
الطرف البادئ (Initiator)من يبدأ المحادثة؟
اتجاه البياناتفي أي اتجاه تتحرك بيانات العمل؟
الحداثة (Freshness)ما مدى حداثة البيانات المطلوبة، برقم محدد؟
الحجم والشكلكم من البيانات، وهل هي سجلات مفردة أم مجموعات أم bulk؟
المفتاحكيف نتعرّف على السجل نفسه عبر الأنظمة؟
مرجعية الكتابةأي نظام يملك أي الحقول، ويحق له الكتابة فيها؟
النمط (Pattern)Request and Reply، أم Fire and Forget، أم batch، أم events؟
الآلية (Mechanism)ما الذي ينفّذه؟
إثبات التسليممن يثبت أن البيانات وصلت، ومن يملك الاستعادة عند الفشل؟
الحساسية والمسارما مدى حساسية البيانات، وعبر أي أنظمة تمر؟
التغييركيف يتغير العقد دون أن ينكسر الطرف الآخر؟

أربع وحدات، كل منها قائمة بذاتها.

  1. قبل السهم. خريطة أنظمة Steve Trucking، ثم سهم واحد: من يبدأه وفي أي اتجاه تتحرك البيانات، وما مدى حداثتها، وpolling أم listening، وسجلات مفردة أم مجموعات أم bulk، وماذا يحدث عند الفشل.
  2. المفاتيح وملكية الكتابة. مفتاح واحد لكل سجل، والـ upsert وإعادة المحاولة الآمنة، وإضافة سجلات لا حقول، والمرجعية على مستوى الحقل، والحلقات (loops).
  3. إثبات التسليم. من يثبت أن البيانات وصلت، وسجل التكامل (integration log)، والاستئناف وإعادة المحاولة، وإيصال الاستلام، والأشكال الأربعة، والمراقبة.
  4. عقد بيانات التكامل. تسعة عقود على خريطة الأنظمة، وواحد منها سطرًا بسطر؛ المتطلّب أولًا، ثم النمط، ثم الآلية؛ الـ API القياسي أم API خاص بك؛ وأين تمر البيانات؛ ومتى يقول العقد: لا تنقلها.

أما عدم نقل البيانات أصلًا (Salesforce Connect، والـ mashups، والـ zero copy) فموضوع الفصل 14، Virtualization وFederation وZero-Copy (coming soon).

ما الذي يقرره المعماري هنا

Section titled “ما الذي يقرره المعماري هنا ”
  • ماذا يعني كل سهم: الطرف البادئ، والاتجاه، والحداثة، والحجم.
  • كيف تبقى السجلات متطابقة بين الأنظمة، ومن يحق له تغيير أي حقل.
  • من يثبت أن البيانات وصلت كاملة، ومن يتولى الاستعادة (recovery) في كل عملية نقل.
  • هل يجب نقل البيانات أصلًا؟

ما بعد الاختبار: كل مسار يقرأ منه الوكيل أو يكتب فيه هو سهم integration. فالوكيل الذي «يحدّث العميل» يحتاج إلى مفتاح، وعقد كتابة ضيق (write contract)، وإعادة محاولة آمنة (retries)، وobservability (قابلية المراقبة). والسبب أن جهة استدعاء احتمالية (probabilistic) تشغّل عمليات مؤسسية حتمية (deterministic). وتنتهي كل وحدة بما يغيّره الذكاء الاصطناعي.

التالي: Migration and Synchronization