توافقية خدمة DWS

يمكن لخدمة DWS الارتباط بسلاسة بنظام الملفات الموزعة من Hadoop‏ (HDFS)، ما يتيح لك الاستعلام عن البيانات على منصة Hadoop من خلال جداول خارجية. كما يمكن لخدمة DWS تحليل البيانات الضخمة على الملفات بتنسيقات ORC وTXT وCSV وParquet.

يمكن لبنية MPP، والتي لا تدعم مشاركة الموارد، الاستفادة من الموارد بشكلٍ كامل، فضلًا عن أن أداءها الذي يتحسن خطيًا مع توسيع حجم موارد تقنية التجميع، ما يوفر الدعم لما يصل إلى بيتابايتات من البيانات. ربط خدمة DWS بـمنصة Hadoop يوفر الميزات الآتية:

‏- التوافق مع لغة الاستعلامات المهيكلة (SQL) القياسية

تتوافق خدمة DWS مع المعايير 92 و99 و2003 للغة SQL وإجراءاتها المخزّنة، مما يقلل تكلفة تطوير وترحيل التطبيقات.

‏- دعم شامل للعمليات

يمكن إضافة البيانات بتنسيق ORC وحذفها وتعديلها في نظام HDFS. ويضمن تحكم النُسخ المتعددة (MVCC) وإدارة العمليات الموزعة بمرحلتين (2PC) توفر خصائص الدقة، الاتساق، العزل، المتانة (ACID). كما يتيح محرك التخزين الهجين للصفوف والأعمدة ذو الإدراج الذكي تخصيص البيانات بذكاء وتخزينها وتحديثها بسرعة عالية.

‏- استعلام تفاعلي عالي الأداء

باستخدام تقنيات إطار التنفيذ الموزع للمسارات غير المتزامن للمعالجة المتوازية للبيانات على نطاق واسع (MPP)، والمُنفذ المتجهي، وتحويل جُمل الاستعلامات الشرطية، والتصفية والفحص الذكيين، وبرنامج الآلة الافتراضية منخفضة المستوى (LLVM)، تحقق قاعدة البيانات أداءً رائدًا في قطاع الصناعة على مستوى محركات الأنوية وأداءً تفاعليًا على مستوى الاستعلام والتحليل.

مع زيادة حجم البيانات في جميع الصناعات، أصبح مركز البيانات الواحد غير كافٍ من حيث التخزين وقدرات المعالجة للتعامل مع هذا الحجم الضخم من البيانات. كما قد تتضمن عملية استعلام، تُجرى خلال عمليات التنقيب في البيانات وتحليل الارتباطات، بيانات من عدة مراكز بيانات.

يمكن لخدمة DWS الوصول المباشر إلى قواعد البيانات الأخرى، بما في ذلك Oracle وMySQL وHadoop، ما ييسر التحليل التعاوني بين قواعد البيانات المختلفة.

الشكل 5-1 التحليل التعاوني بين مراكز البيانات

يمكن لخدمة DWS العمل مع خدمة التخزين السحابية الأصلية Object Storage Service (OBS) من Huawei Cloud. حيث يمكن لخدمة DWS الوصول إلى البيانات في خدمة OBS بسرعة عالية، كما يمكنها أيضًا أرشفة البيانات القديمة وفصل البيانات غير النشطة عن البيانات النشطة.

في مشروع المدينة الآمنة، تُستخدم نماذج الذكاء الاصطناعي للتعرف على الصور والبحث عن المركبات بناءً على قدرات المقارنة والتحليل متعدد الأبعاد التي توفرها خدمة OBS وخدمة DWS، كما هو موضح في الشكل الآتي.