مستكشف بيانات Azure

Azure Data Explorer عبارة عن منصة سحابية مُدارة بالكامل لتحليلات البيانات الضخمة [ 1 ] ، وخدمة لاستكشاف البيانات [2]، [3] طورتها مايكروسوفت [ 4 ] ، [ 5 ] ، [ 6 ] ، تستقبل البيانات المهيكلة وشبه المهيكلة ( مثل JSON ) وغير المهيكلة ( مثل النصوص الحرة ) [ 7]، [8]، [9]، [10]. ثم تقوم الخدمة بتخزين هذه البيانات والإجابة على استعلامات التحليل المخصصة عليها في غضون ثوانٍ معدودة. وهي قاعدة بيانات لفهرسة واسترجاع النصوص الكاملة ، تتضمن إمكانيات تحليل السلاسل الزمنية [ 6 [ 7 ] ، وتقييم التعبيرات النمطية ، وتحليل النصوص [ 11 ] .

يُقدَّم هذا المنتج كمنصة كخدمة (PaaS) كجزء من منصة مايكروسوفت أزور . وقد أعلنت عنه مايكروسوفت في عام 2018.

تاريخ

بدأ تطوير المنتج في عام 2014 كمشروع تجريبي في مركز البحث والتطوير التابع لشركة مايكروسوفت في إسرائيل ، [ 12 ] تحت الاسم الرمزي الداخلي "Kusto" [ 9 ] [ 7 ] (نسبةً إلى جاك كوستو ، في إشارة إلى "استكشاف محيط البيانات"). وكان هدف المشروع تلبية احتياجات خدمات Azure لتحليلات سريعة وقابلة للتوسع لسجلات البيانات وبيانات القياس عن بُعد.

في عام 2016، أصبحت خدمة البيانات الضخمة والتحليلات الخلفية لشركة Application Insights Analytics. [ 13 ]

تم الإعلان عن المنتج كمنتج معاينة عامة في مؤتمر مايكروسوفت إجنايت 2018، [ 14 ] وتم الإعلان عنه كمنتج متاح بشكل عام في مؤتمر مايكروسوفت إجنايت في فبراير 2019. [ 15 ]

في مارس 2021، أصبح محرك التخزين والاستعلام "Kusto EngineV3"، وهو الجيل التالي من محرك Azure Data Explorer، متاحًا للجميع. وقد صُمم لتوفير أداء لا مثيل له في استيعاب واستعلام بيانات القياس عن بُعد والسجلات وبيانات السلاسل الزمنية. [ 16 ]

سمات

يوفر Azure Data Explorer لغة استعلام محسّنة وخيارات عرض بياناته باستخدام لغة شبيهة بلغة SQL تُسمى KQL ( لغة استعلام Kusto [ 18 ] [ 19 ] [ 20 ] ) . [ 7 ] [ 8 ]

يستطيع Azure Data Explorer استيعاب 200 ميجابايت في الثانية لكل عقدة. [ 14 ] تشمل طرق استيعاب البيانات مسارات البيانات والموصلات بالخدمات الشائعة مثل Azure Event Grid أو Azure Event Hub، [ 21 ] أو الاستيعاب البرمجي باستخدام SDKs .

يمكن تحقيق تصور البيانات باستخدام لوحة المعلومات الأصلية الخاصة بهم ، أو باستخدام أدوات مثل Power BI [ 21 ] [ 22 ] أو Grafana . [ 23 ] [ 24 ]

تصميم

Azure Data Explorer عبارة عن قاعدة بيانات موزعة تعمل على مجموعة من عقد الحوسبة في Microsoft Azure . وهي تعتمد على أنظمة إدارة قواعد البيانات العلائقية (RDBMS) ، وتدعم كيانات مثل قواعد البيانات والجداول والدوال والأعمدة. كما تدعم عوامل تشغيل استعلامات التحليلات المعقدة، مثل الأعمدة المحسوبة، والبحث والتصفية على الصفوف، والتجميع حسب النتائج، والربط . [ 25 ]

تعرض خدمة المحرك نموذج بيانات علائقي : في المستوى الأعلى ( المجموعة ) توجد مجموعة من قواعد البيانات، تحتوي كل قاعدة بيانات على مجموعة من الجداول والوظائف المخزنة. يحدد كل جدول مخططًا (قائمة مرتبة من الحقول المكتوبة).

في Azure Data Explorer، على عكس أنظمة إدارة قواعد البيانات العلائقية التقليدية ، لا توجد قيود مثل تفرد المفاتيح، أو المفاتيح الأساسية ، أو المفاتيح الخارجية . [ 26 ] تُنشأ العلاقات اللازمة عند الاستعلام. [ 27 ] تتبع البيانات في Azure Data Explorer النمط التالي عمومًا: [ 28 ] إنشاء قاعدة البيانات، استيراد البيانات، الاستعلام عن قاعدة البيانات.

مراجع

  1. سيرا، جيمس (14 مارس 2019). "مستكشف بيانات Azure" . مدونة جيمس سيرا . تم الاطلاع عليه بتاريخ 9 أبريل 2020 .
  2. "مايكروسوفت تُطلق Azure Data Lake Storage وAzure Data Explorer" . eWEEK . تم الاطلاع عليه بتاريخ 10 أبريل 2020 .
  3. موجينيس، ماكس. "ما هو مستكشف بيانات Azure؟" . blog.pragmaticworks.com . تم الاطلاع عليه بتاريخ 21-03-2020 .
  4. "إنشاء مجموعة بيانات Azure Data Explorer وقاعدة بيانات في Azure" . www.c-sharpcorner.com . تم الاطلاع عليه بتاريخ 9 أبريل 2020 .
  5. ماكي، كورت (2019-09-20). "أدوات محدّثة لـ Office 365 وMicrosoft Azure ستصل قريبًا -- Redmondmag.com" . Redmondmag . تاريخ الاسترجاع: 2020-04-10 .
  6. 1 2 "مقارنة بين Microsoft Azure Data Explorer و Microsoft Azure SQL Database" . db-engines.com . تم الاطلاع عليه بتاريخ 9 أبريل 2020 .
  7. 1 2 3 4 ماهاجان، غوري (27 فبراير 2020). "مستكشف بيانات Azure للمبتدئين" . SQL Shack - مقالات حول تدقيق قواعد البيانات، وأداء الخادم، واستعادة البيانات، والمزيد . تم الاطلاع عليه بتاريخ 9 أبريل 2020 .
  8. 1 2 "ما هو مستكشف بيانات Azure؟" . docs.microsoft.com . تم الاطلاع عليه بتاريخ 2019-12-06 .
  9. 1 2 ماهاجان، غوري (27 فبراير 2020). "مستكشف بيانات Azure للمبتدئين" . SQL Shack - مقالات حول تدقيق قواعد البيانات، وأداء الخادم، واستعادة البيانات، والمزيد . تم الاطلاع عليه بتاريخ 21 مارس 2020 .
  10. لاي، أليكس (14 يناير 2019). "ما هو مستكشف بيانات Azure ولغة استعلام Kusto (KQL)؟" . أداتيس . تم الاسترجاع في 10 أبريل 2020 .
  11. "مستكشف بيانات Azure - السوق الرقمية" . www.digitalmarketplace.service.gov.uk . تاريخ الاسترجاع: 21 مارس 2020 .
  12. "قسم البحث والتطوير في مايكروسوفت" . www.microsoftrnd.co.il . تاريخ الاسترجاع: 2019-12-06 .
  13. orspod. "تقديم تحليلات Application Insights" . devblogs.microsoft.com . تم الاطلاع عليه بتاريخ 2019-12-06 .
  14. 1 2 "تقديم Azure Data Explorer" . azure.microsoft.com . تم الاطلاع عليه بتاريخ 2019-12-06 .
  15. "التوفر العام: مستكشف بيانات Azure | تحديثات Azure | Microsoft Azure" . azure.microsoft.com . تم الاطلاع عليه بتاريخ 2019-12-06 .
  16. orspod. "Azure Data Explorer Kusto EngineV3" . docs.microsoft.com . تم الاطلاع عليه بتاريخ 13 أبريل 2021 .
  17. بروست، أندرو. "فاستلي ومايكروسوفت تتعاونان في مجال التحليلات الفورية مع Azure Data Explorer" . ZDNet . تم الاطلاع عليه بتاريخ 9 أبريل 2020 .
  18. ماكي، كورت (18 يوليو 2019). "مايكروسوفت تستعرض بيانات بروميثيوس في Azure Monitor للحاويات -- Redmondmag.com" . Redmondmag . تاريخ الاسترجاع: 9 أبريل 2020 .
  19. "البدء باستخدام لغة استعلام Kusto (KQL) - System.Blog.Martens.Ben" . blogs.msdn.microsoft.com . تم الاطلاع عليه بتاريخ 2019-12-06 .
  20. "استكشاف البيانات في مايكروسوفت أزور باستخدام لغة استعلام Kusto ومستكشف بيانات أزور" . www.pluralsight.com . تاريخ الاسترجاع: 21 مارس 2020 .
  21. 1 2 "هندسة خطوط أنابيب البيانات والتحليلات في Azure" . غارتنر . تم الاطلاع عليه بتاريخ 10 أبريل 2020 .
  22. ماهاجان، غوري (27 فبراير 2020). "مستكشف بيانات Azure للمبتدئين" . SQL Shack - مقالات حول تدقيق قواعد البيانات، وأداء الخادم، واستعادة البيانات، والمزيد . تم الاطلاع عليه بتاريخ 10 أبريل 2020 .
  23. "جرافانا مقابل لوحات معلومات أزور - أيهما تستخدم ومتى؟" . كلاود آي كيو تك . 10 ديسمبر 2018. تم الاطلاع عليه بتاريخ 10 أبريل 2020 .
  24. "مكوّن Azure Data Explorer الإضافي لمصدر البيانات لـ Grafana" . مختبرات Grafana . تم الاطلاع عليه بتاريخ 10 أبريل 2020 .
  25. orspod. "البدء باستخدام Kusto - Azure Data Explorer" . docs.microsoft.com . تم الاطلاع عليه بتاريخ 2019-12-06 .
  26. "مقارنة بين GraphDB و Microsoft Azure Data Explorer" . db-engines.com . تم الاطلاع عليه بتاريخ 10 أبريل 2020 .
  27. "Azure Data Explorer: منصة سحابية لتحليلات البيانات الضخمة" (ملف PDF) . مؤرشف (ملف PDF) من النسخة الأصلية بتاريخ 2019-12-06.
  28. سيرا، جيمس (14 مارس 2019). "مستكشف بيانات Azure" . مدونة جيمس سيرا . تم الاطلاع عليه بتاريخ 21 مارس 2020 .