كيف ستفيد منصة Domino's Enterprise MLOps مؤسستك؟

نشرت: 2022-08-09

مقدمة

الذكاء الاصطناعي يغير العالم. ومعه ، نشهد أيضًا ارتفاعًا غير مسبوق في الطلب على متخصصي تطوير الذكاء الاصطناعي. أحد أكبر التحديات التي تواجهها الشركات التي تتبنى الذكاء الاصطناعي لحل مشاكل الأعمال هو إيجاد موارد ماهرة يمكنها بناء ونشر نماذج تعلم الآلة على نطاق واسع. التحدي الآخر هو إدارة بياناتهم بفعالية حتى يتمكنوا من الحصول على أقصى قيمة منها. تعمل منصة MLOps الخاصة بمؤسسة Domino Data Lab على حل هاتين المشكلتين من خلال توفير أتمتة متكاملة تعمل على تسريع مشاريع الذكاء الاصطناعي الخاصة بك وتضمن الامتثال في كل مرحلة منها - بدءًا من تطوير النموذج وحتى النشر والمراقبة

الفوائد التجارية لمنصة Domino Enterprise MLOps

منصة MLOps الخاصة بالمؤسسات من Domino عبارة عن نظام أساسي قائم على السحابة يمكّن المؤسسات من إنشاء نماذج التعلم الآلي ونشرها على نطاق واسع. تتيح المنصة للمؤسسات الاستفادة من البنية التحتية السحابية الحالية ، باستخدام علماء البيانات الحاليين ومهندسي التعلم الآلي. كما أنه يوفر لوحة تحكم مركزية لمراقبة أداء نموذج ML الخاص بك ، بالإضافة إلى طريقة سهلة لإدارة المستخدمين والأذونات.

تم بناء منصة Domino's Enterprise ML Ops فوق Apache Kafka المسماة "Kafka RabbitMQ" والتي توفر توفرًا عاليًا من خلال توفير ضمانات دائمة لتوصيل الرسائل من خلال خوارزميات إجماع ZooKeeper أو Paxos. يمكن لمثيل واحد معالجة عشرات الآلاف من الرسائل في الثانية بينما يكون قادرًا على تخزين كميات كبيرة من البيانات في الذاكرة أو تخزين القرص وفقًا للحاجة عن طريق التوسع أفقيًا عبر أجهزة متعددة في تكوين المجموعة الخاصة به مع عدم حدوث توقف أو سيناريوهات فشل نقطة واحدة أثناء العادي ساعات العمليات اليومية / دورات الليل اعتمادًا على عدد العقد المتاحة داخل المجموعة (المجموعات) المذكورة.

خط أنابيب MLOps

خط أنابيب MLOps هو دورة حياة النموذج من البداية إلى النشر.

يتكون خط أنابيب ML Ops من أربع خطوات:

  • إنشاء النموذج - تبدأ هذه الخطوة بإعداد البيانات وتنتهي بالتدريب أو الاختبار أو التقييم. وهي تشمل المعالجة المسبقة وهندسة الميزات والاختيار ؛ تخفيض الأبعاد؛ تنظيف بيانات النص ؛ التطبيع (ميزة التحجيم) ؛ الترميز / الاشتقاق إذا لزم الأمر وما إلى ذلك ، اعتمادًا على نوع النموذج الذي تريد بنائه.
  • التدريب - تتضمن هذه الخطوة التعلم من بيانات التدريب الخاصة بك باستخدام تقنيات التعلم الخاضعة للإشراف مثل الانحدار الخطي أو الشبكات العصبية حيث قمت بتسمية الأمثلة التي قدمتها أنت أو عملاؤك.
  • النشر - يتضمن ذلك نشر متعلم الآلة المدربين في بيئة الإنتاج التي تتيح استخدامها في الوقت الفعلي دون أي تدخل يدوي مطلوب بعد الانتهاء من مرحلة التدريب

خط أنابيب نشر ML

يعد MLDeployment Pipeline هو مفتاحك لنشر النماذج وإدارتها. إنها مجموعة من الأدوات التي يمكنك استخدامها من أجل:

  • انشر النماذج من Domino's Enterprise MLOps Platform
  • تدريب نموذجك في بيئة الإنتاج لدينا ، ثم نشره في بيئة التشغيل السحابية أو المحلية (أو كليهما)
  • مراقبة أداء نموذج تم نشره في الإنتاج بمرور الوقت

يمكنك أيضًا الوصول إلى كل هذه الميزات من خلال النظام الأساسي نفسه ، لذلك لا تحتاج إلى أي برامج أو خدمات إضافية خارج منصة Domino's Enterprise MLOps.

ما هي مراقبة النموذج؟

راقب نماذجك المدربة للتأكد من أنها تؤدي أفضل أداء.

المراقبة هي عملية مراقبة أداء نموذج مدرب. الغرض الرئيسي من المراقبة هو معرفة ما إذا كانت هناك أية مشكلات في النموذج ، مثل:

إدارة البيانات (GDPR ، HIPAA)

اللائحة العامة لحماية البيانات (GDPR) وقانون نقل التأمين الصحي والمسؤولية (HIPAA) هما مجموعتان من اللوائح التي تحكم استخدام البيانات الشخصية في أوروبا والولايات المتحدة على التوالي. تم تقديم اللائحة العامة لحماية البيانات لحماية حقوق الأفراد فيما يتعلق بمعلوماتهم الشخصية ، بينما HIPAA عبارة عن مجموعة من اللوائح التي تحكم كيفية تعامل مؤسسات الرعاية الصحية مع السجلات الطبية. كانت هذه الأطر موجودة منذ عقود ولكن تم تحديثها مؤخرًا بمعايير جديدة تتطلب من الشركات أن تكون أكثر شفافية في كيفية استخدام / مشاركة معلوماتك.

يحتوي Domino Data Lab Enterprise MLOps Platform على ميزات يمكن أن تساعدك على الامتثال لهذه اللوائح بما في ذلك:

  • إدارة البيانات (GDPR / HIPAA) - تساعدك هذه الميزة على إدارة جميع سياسات إدارة البيانات الخاصة بمؤسستك من خلال واجهة واحدة ، لذلك من السهل على جميع المعنيين فهم ما يحتاج إلى تعكير عندما يحين وقت العمل معًا في مشاريع تتضمن معلومات حساسة مثل البيانات المالية أو بيانات العميل؛
  • مجموعة أدوات تقييم مخاطر الامتثال - توفر مجموعة الأدوات هذه إرشادات حول أفضل الممارسات بناءً على معايير الصناعة مثل ISO 27001 أو SOC 1 Type 2.

ما هو إصدار النموذج؟

يعد إصدار النموذج مكونًا رئيسيًا لمنصة MLOps. يسمح لك بإدارة البيانات والنماذج وإصدارات النماذج الخاصة بك في مكان واحد.

يساعد تعيين إصدارات النماذج على تحسين جودة النماذج من خلال السماح لك بإنشاء إصدارات متعددة بميزات أو قيود مختلفة بناءً على متطلبات المستخدم. على سبيل المثال ، إذا أراد العميل جميع الطلبات التي تم تسليمها في غضون سبعة أيام بعد تقديمها وكذلك الطلبات التي تم تقديمها في غضون 30 دقيقة ولكن تم استلامها بحلول الساعة 5 مساءً ليتم تضمينها في مجموعة التحليل الخاصة بهم ، فيمكنهم استخدام هذه الوظيفة دون الحاجة إلى تغيير أي شيء آخر حول رمز خط الأنابيب أو إعداد البنية التحتية الخاصة بهم

تتطلب جهود تطوير الذكاء الاصطناعي مستوى عالٍ من الأتمتة

يتطلب تطوير الذكاء الاصطناعي مستوى عالٍ من الأتمتة ، ولهذا السبب تجد العديد من المؤسسات صعوبة في توسيع نطاق جهودها. هذا بسبب وجود العديد من الأدوات والعمليات المختلفة المتضمنة في عملية تطوير حل الذكاء الاصطناعي من البداية.

هناك عدة مراحل متضمنة في هذه العملية: جمع المتطلبات المسبقة ، وجمع البيانات وتحليلها ، ومرحلة التطوير ، ومرحلة الاختبار وما إلى ذلك ، والتي تتطلب جميعها تدخلًا بشريًا في كل مرحلة للتأكد من أن كل شيء يسير بسلاسة وبشكل صحيح. عندما تأخذ في الاعتبار أنه قد يكون هناك مئات أو آلاف الأشخاص الذين يعملون في مشروعك في أي وقت (اعتمادًا على نوع المنظمة التي تديرها) ، يصبح من الواضح لماذا يصعب على مؤسسات مثل Domino's Enterprise MLOps Platform أتمتة قدر الإمكان حتى يتمكنوا من خفض التكاليف مع الاستمرار في الحفاظ على معايير الجودة في كل خطوة على طول هذه الرحلة نحو تحقيق أهدافهم مع حلول الذكاء الاصطناعي

منصة mlops للشركات Domino Data lab لديها القدرة على تسريع مشاريع الذكاء الاصطناعي الخاصة بك.

منصة mlops للشركات Domino Data lab لديها القدرة على تسريع مشاريع الذكاء الاصطناعي الخاصة بك. يوفر منصة MLOps كاملة وشاملة لعلماء البيانات ومهندسي ML ومحللي البيانات.

إنه يسرع من تطوير نماذج الذكاء الاصطناعي من خلال تزويدهم بمجموعة شاملة من الأدوات التي تسهل عليهم بناء وتدريب ونشر نماذجهم. تعمل المنصة أيضًا على تبسيط التدريب عبر لغات متعددة (بما في ذلك Python) حتى تتمكن من البدء في استخدام التعلم الآلي على الفور دون الحاجة إلى القلق بشأن بناء جملة التعليمات البرمجية أو المكتبات التي تتطلبها كل لغة.

استنتاج

في منشور المدونة هذا ، ناقشنا الفوائد الرئيسية لمنصة Domino's Enterprise MLOps. بفضل قدرته على دعم مشاريع الذكاء الاصطناعي الخاصة بك باستخدام أدوات البنية التحتية والأتمتة ، يمكنك التركيز على إنشاء منتج رائع بدلاً من القلق بشأن إدارة البنية التحتية وخط أنابيب النشر لنماذج ML الخاصة بك.

المؤلف السيرة الذاتية

تتمتع بريا بخبرة تصل إلى 7 سنوات في مجال أبحاث السوق. تعمل حاليًا في Valasys Media ، كمساعد مدير - استراتيجي محتوى ، والتي تعد من بين أفضل ناشري الوسائط B2B في جميع أنحاء العالم. لقد قامت بإعداد العديد من التقارير الشخصية لعملائنا وأجرت الكثير من الأبحاث حول تقسيم السوق ، والتحليل العنقودي للجماهير والمنهجيات الواردة. عملت مع المعاهد الحكومية وكذلك الشركات في العديد من المشاريع. لديها اهتمامات مختلفة وتؤمن بالنهج القائم على البيانات لحل المشكلات. وهي حاصلة على درجة التخرج في العلوم وتكتب على نطاق واسع حول كل الأشياء المتعلقة بالحياة إلى جانب التسويق والعلوم وعلوم البيانات والإحصاء. إنها تؤمن إيمانا راسخا بالحقائق الأعلى وأن هناك دائمًا ما هو أكثر مما نفهمه في الحياة. هي معالج نفسي وممارس التاروت ، الذي يؤمن بطريقة روحية للعيش ويمارس اليوغا والتأمل. عندما لا تكتب تجدها تستمتع بالموسيقى أو الطبخ.