الأدوار في البيانات
إن سرد قصة باستخدام البيانات عبارة عن رحلة لا تبدأ بك عادة. يجب أن تأتي البيانات من مكان ما. يتطلب وضع تلك البيانات في دائرة يُمكن استخدامها منك جهدًا من المرجح أن يكون خارج نطاقك، وخاصة في نظر الشركة.
قد تكون التطبيقات والمشروعات في الوقت الحالي كبيرة ومعقدة، وغالبًا ما تنطوي على استخدام المهارات والمعرفة المستقاة من العديد من الأفراد. يُضفي كل شخص خبرة وموهبة فريدة، حيث يتشاركون في الجهد المبذول في العمل معًا وتنسيق المهام والمسؤوليات لرؤية المشروع من خلال من المفهوم إلى الإنتاج.
في الآونة الأخيرة، كانت الأدوار مثل محللي الأعمال ومطوري المعلومات المهنية هي المعيار لمعالجة البيانات وفهمها. ومع ذلك، فإن التوسع المفرط في حجم البيانات وأنواعها المختلفة قد أدّى إلى تطور هذه الأدوار إلى مجموعات من المهارات أكثر تخصصًا تقوم بتحديث عمليات هندسة البيانات والتحليل وتبسيطها.
تسلط الأقسام التالية الضوء على هذه الأدوار المختلفة في البيانات والمسؤولية المحددة في النطاق الكلي لاكتشاف البيانات وفهمها:
محلل الأعمال
محلل البيانات
مهندس البيانات
عالم البيانات
مسؤول قاعدة البيانات
محلل الأعمال
رغم أن هناك بعض أوجه التشابه بين محلل البيانات ومحلل الأعمال، فإن الفرق الرئيسي بين الدورين هو ما يفعلونه بالبيانات. محلل الأعمال يكون أقرب إلى الأعمال وهو متخصص في تفسير البيانات التي تأتي من التصور. في كثير من الأحيان، قد يكون دورا محلل البيانات ومحلل الأعمال ضمن مسؤوليات شخص واحد.
محلل البيانات
يُمكن محلل البيانات الشركات من زيادة قيمة أصول البيانات الخاصة بها إلى أقصى حد من خلال أدوات التصور وإعداد التقارير مثل Microsoft Power BI. محللو البيانات مسؤولون عن جمع البيانات وتنقيتها وتحويلها. وتشمل مسؤولياتهم أيضًا تصميم وإنشاء نماذج بيانات قابلة للتطوير وفعّالة، وتمكين وتطبيق قدرات التحليلات المتقدمة في تقارير من أجل التحليل. يعمل محلل البيانات مع المساهمين المعنيين لتحديد متطلبات إعداد التقارير والبيانات المناسبة والضرورية، ومن ثم فإنه مكلف بتحويل البيانات الأولية إلى نتائج معرفية ذات صلة ومغزى.
يكون محلل البيانات مسؤولاً أيضًا عن إدارة أصول Power BI، بما في ذلك التقارير، ولوحات المعلومات، ومساحات العمل، ومجموعات البيانات الأساسية التي يتم استخدامها في التقارير. فهو مكلف بتطبيق وتكوين إجراءات الأمان المناسبة، إلى جانب متطلبات المساهمين، لضمان حفظ جميع أصول Power BI وبياناتها.
يعمل محللو البيانات مع مهندسي البيانات لتحديد مصادر البيانات المناسبة التي تلبي متطلبات المساهمين وتحديد موقعها. بالإضافة إلى ذلك، يعمل محللو البيانات مع مهندس البيانات ومسؤول قاعدة البيانات لضمان أن المحلل لديه حق الوصول المناسب إلى مصادر البيانات المطلوبة. ويعمل محلل البيانات كذلك مع مهندس البيانات لتحديد العمليات الجديدة أو تحسين العمليات القائمة لجمع البيانات بغرض تحليلها.
مهندس البيانات
يقوم مهندسو البيانات بتكوين إعدادات تشغيل خدمة تقنيات النظام الأساسي للبيانات الموجودة داخليًا وفي السحابة وإعدادها. فهم يعملون على إدارة وتأمين تدفق البيانات المنظمة وغير المنظمة المستمدة من مصادر متعددة. يمكن أن تتضمن الأنظمة الأساسية للبيانات التي يستخدمونها قواعد بيانات ارتباطية، وقواعد بيانات غير ارتباطية، ودُفق البيانات، ومخازن الملفات. كما يضمن مهندسو البيانات أيضًا تكامل خدمات البيانات على نحوٍ آمنٍ وسلسٍ على نطاق الأنظمة الأساسية للبيانات.
تتضمن المسؤوليات الرئيسية لمهندسي البيانات استخدام خدمات البيانات الداخلية والسحابية وأدواتها لاستيعاب البيانات المستمدة من مصادر متعددة، وانبثاقها وتحويلها. يتعاون مهندسو البيانات مع المساهمين في الشركات لتحديد متطلبات البيانات وتلبيتها. حيث يقومون بتصميم الحلول وتطبيقها.
في حين قد يوجد بعض التوافق في مهام ومسؤوليات مهندس البيانات ومسؤول قاعدة البيانات، فإن نطاق عمل مهندس البيانات يتجاوز الاهتمام بقاعدة البيانات والخادم المضيف لها ومن المحتمل ألا يتضمن إدارة البيانات التشغيلية الشاملة.
يضيف مهندس البيانات قيمة هائلة إلى مشروعات علم البيانات والمعلومات المهنية. عندما يقوم مهندس البيانات بجمع البيانات معًا، وغالبًا ما يوصف ذلك بأنه تشابك البيانات، تتحرك المشروعات بشكل أسرع لأن علماء البيانات يتمكنون من التركيز على مجالات العمل الخاصة بهم.
سوف تعمل، بصفتك محلل بيانات، بشكل وثيق مع مهندس البيانات للتأكد من أنه يمكنك الوصول إلى مجموعة متنوعة من مصادر البيانات المنظمة وغير المنظمة لأنها ستدعمك في تحسين نماذج البيانات، التي يتم تقديمها عادةً من مستودع بيانات حديث.
ويمكن لكل من مسؤولي قواعد البيانات والمتخصصين في المعلومات المهنية الانتقال إلى دور مهندس البيانات؛ حيث يتعين عليهم تعلم الأدوات والتكنولوجيا المستخدمة لمعالجة كميات كبيرة من البيانات.
عالم البيانات
يقوم علماء البيانات بإجراء تحليلات متقدمة لاستخراج القيمة من البيانات. وقد يتنوع عملهم بين التحليلات الوصفية والتحليلات المتوقعة. تُقيّم التحليلات الوصفية البيانات من خلال عملية تعرف باسم تحليل البيانات الاستكشافي (EDA). تُستخدم التحليلات المتوقعة في التعلّم الآلي لتطبيق أساليب النمذجة التي يمكن أن تكشف عن الحالات الخارجة عن المألوف أو الأنماط. تُشكل هذه التحليلات أجزاءً مهمة من نماذج التنبؤ.
تمثل التحليلات الوصفية والمتوقعة جوانب جزئية فحسب من عمل علماء البيانات. قد يعمل بعض علماء البيانات في نطاق التعلم العميق، حيث يقومون بإجراء تجارب متكررة لحل إحدى مشكلات البيانات المعقدة باستخدام خوارزميات مخصصة.
تشير الأدلة القولية إلى أن معظم العمل في مشروع من مشروعات علم البيانات يُبذل في تشابك البيانات وهندسة الميزات. يمكن لعلماء البيانات تسريع عملية التجريب عندما يستخدم مهندسو البيانات مهاراتهم من أجل تشابك البيانات بنجاح.
ظاهريًا، قد يبدو أن عالم البيانات ومحلل البيانات على طرفي النقيض في العمل الذي يقومان به، ولكن هذا الافتراض غير صحيح. يعمل عالم البيانات على فحص البيانات لتحديد الأسئلة التي تحتاج إلى إجابات وغالبًا ما يضع فرضية أو يبتكر تجربة ثم يلجأ إلى محلل البيانات للمساعدة على تصور البيانات وإعداد تقارير بشأنها.
مسؤول قاعدة البيانات
يقوم مسؤول قاعدة البيانات بتنفيذ وإدارة الجوانب التشغيلية لحلول النظام الأساسي للبيانات الأصلية والهجينة على السحابة المستندة إلى خدمات بيانات Microsoft Azure وMicrosoft SQL Server. يتحمل مسؤول البيانات مسؤولية التوفر الشامل والأداء المتسق وتحسينات حلول قاعدة البيانات. يعمل مع المساهمين لتحديد وتطبيق السياسات والأدوات والعمليات الخاصة بخطط النسخ الاحتياطي واسترداد البيانات.
يختلف دور مسؤول قاعدة البيانات عن دور مهندس البيانات. يقوم مسؤول قاعدة البيانات بمراقبة وإدارة السلامة العامة لقاعدة البيانات والأجهزة التي توجد عليها، في حين يشارك مهندس البيانات في عملية تشابك البيانات، بعبارة أخرى، استيعاب البيانات وتحويلها والتحقق من صحتها وتنقيتها لتلبية احتياجات ومتطلبات العمل.
يكون مسؤول قاعدة البيانات مسؤولاً أيضًا عن إدارة الأمن العام للبيانات، ومنح وتقييد وصول المستخدم والامتيازات إلى البيانات على النحو الذي تحدده احتياجات ومتطلبات العمل.