مقدمة لبناء تطبيقات الذكاء الاصطناعي على Databricks

يوفر الذكاء الاصطناعي الفسيفساء منصة شاملة لبناء تطبيقات GenAI ونشرها وإدارتها. ترشدك هذه المقالة خلال المكونات والعمليات الأساسية المتضمنة في تطوير تطبيقات GenAI على Databricks.

توزيع نماذج الذكاء الاصطناعي gen والاستعلام فيها

بالنسبة لحالات الاستخدام البسيطة، يمكنك تقديم نماذج الذكاء الاصطناعي للاستعلام الذكاء الاصطناعي مباشرة، بما في ذلك النماذج مفتوحة المصدر عالية الجودة، بالإضافة إلى نماذج الجهات الخارجية من موفري LLM مثل OpenAI و Anthropic.

يدعم الفسيفساء الذكاء الاصطناعي Model Serving خدمة نماذج الذكاء الاصطناعي التوليدية والاستعلام عنها باستخدام الإمكانات التالية:

• واجهات برمجة تطبيقات نموذج الأساس. تجعل هذه الوظيفة أحدث النماذج المفتوحة ومتغيرات النموذج المضبطة متاحة لنقطة نهاية خدمة النموذج الخاص بك. هذه النماذج هي بنيات نموذج أساسي منسقة تدعم الاستدلال الأمثل. تتوفر النماذج الأساسية، مثل DBRX Instruct و Llama-2-70B-chat و BGE-Large و Mistral-7B للاستخدام الفوري مع تسعير الدفع لكل رمز مميز ، ويمكن نشر أحمال العمل التي تتطلب ضمانات الأداء، مثل متغيرات النموذج الدقيقة، مع معدل النقل المقدم.
• نماذج خارجية. هذه هي نماذج الذكاء الاصطناعي التوليدية التي تتم استضافتها خارج Databricks. يمكن التحكم مركزيا في نقاط النهاية التي تخدم النماذج الخارجية ويمكن للعملاء وضع حدود للمعدل والتحكم في الوصول لهم. ومن الأمثلة على ذلك نماذج أساسية مثل GPT-4 من OpenAI وكلود من Anthropic وغيرها.

راجع إنشاء نموذج الذكاء الاصطناعي إنشاء يخدم نقاط النهاية.

إطار عمل عامل الذكاء الاصطناعي الفسيفساء

يتضمن إطار عمل العامل الذكاء الاصطناعي الفسيفساء مجموعة من الأدوات على Databricks المصممة لمساعدة المطورين على بناء وتوزيع وتقييم عوامل جودة الإنتاج مثل تطبيقات Retrieval Augmented Generation (RAG).

وهو متوافق مع أطر عمل الجهات الخارجية مثل LangChain و LlamaIndex، مما يسمح لك بالتطوير مع إطار عملك المفضل مع الاستفادة من كتالوج Unity المدار من Databricks وإطار عمل تقييم العامل ومزايا النظام الأساسي الأخرى.

التكرار بسرعة على تطوير العامل باستخدام الميزات التالية:

• إنشاء وتسجيل العوامل باستخدام أي مكتبة وMLflow. قم بوضع معلمات لوكلاءك للتجربة والتكرار على تطوير العامل بسرعة.
• يتيح لك تتبع العامل تسجيل التتبعات وتحليلها ومقارنتها عبر التعليمات البرمجية للعامل لتصحيح وفهم كيفية استجابة وكيلك للطلبات.
• انشر العوامل في الإنتاج مع الدعم الأصلي لتدفق الرمز المميز وتسجيل الطلب/الاستجابة، بالإضافة إلى تطبيق مراجعة مضمن للحصول على ملاحظات المستخدم لوكيلك.