إدارة البيانات

تأسيس إدارة البيانات Data Management

في هذه المقالة أحاول شرح كيفية تأسيس إدارة للبيانات، تقدم خدمات كاملة لإدارة البيانات سواء في شركة أو جهة حكومية أو مؤسسة متخصصة في تقديم خدمات إدارة البيانات بشكل مستقل.

وأستهدف فيها متخذي القرار من القادة، أو من يرغب في تأسيس شركة لتقديم حلول إدارة البيانات. كما أعتقد أنها فرصة للراغبين في الدخول في مجال إدارة البيانات لفهم ماهي مكونات إدارة البيانات.

في البداية، أرغب في الحديث عن نظرة متخذي القرار الحاليين عن إدارة البيانات. أغلب المسؤولين في القطاع الحكومي والخاص ينظرون لإدارة البيانات على أنها إدارة استخراج تقارير، وهدفها الأساس توفير التقارير. خاصة للجهات الخارجية، فعند طلب تقرير من جهة عليا أو من جهة أخرى يأمل أن تستطيع إدارة البيانات توفيرها في أقرب وقت وأكثر دقة ممكنة. وهذه النظرة لا يلامون عليها، حيث أن توفير التقارير دون تضارب في البيانات خاصة في التقارير الدورية يعد من الأمور الصعبة. فتجد في جهات كثيرة أن تقرير هذه الجهة في عام 2017 يتضارب مع البيانات في عام ،2018 فتسبب حرج كبير لها. الأمر الآخر، لم تثبت إدارات البيانات حتى وقتنا الحالي في مجتمعنا أنها تستطيع تقديم الخدمة التي تخولها في المساعدة في اتخاذ القرار ودعمه، لعدة أسباب أهمها:

  1. تبسيط دور إدارة البيانات من المنتسبين لها، حيث يُظهرون لمتخذي القرار أنه بمجرد توفير البيانات وعرضها على شكل رسوم بيانية أن هذا هو منتج إدارة البيانات الوحيد. وفي الحقيقة يمكن استخراج هذه البيانات من إدارات التقنية بشكل مباشر دون الحاجة لإنشاء إدارة خاصة بالبيانات.
  2. اختزال دور إدارة البيانات في إنتاج بعض التقارير والرسوم البيانية واستخراج البيانات من قواعد البيانات بشكل مباشر بما يعرف لدينا بـ Ad hoc Reports.
  3. يوجد صراع خفي بين محللي البيانات وإدارة التقنية في الحصول على البيانات، وذلك في تجاهل لدور مهندسي البيانات. كما يوجد تهميش من بعض مهندسي البيانات لدور محللي البيانات وعدم قناعة بالقيمة المضافة التي سيضيفونها للمنشأة.
  4. المسؤولون ليس لديهم الوقت والقدرة لتجربة إدارة جديدة ربما يكونوا مقتنعين بها تماماً، لكن لا يوجد حسب وجهة نظرهم من يستطيع أن يديرها بفعالية، فهم ينتظرون أن يظهر من هو كفؤ لها. وليس لديهم القدرة المالية لجلب شركات عالمية.
  5. كثرة فشل إدارة البيانات في أكثر من جهة في دعم القرار وأغلب التجارب الحالية تتحول الى إدارة تقارير.
  6. سرعة سير العمل في أروقة المسؤولين وبطء تنفيذ مشاريع البيانات يفقد التركيز عليها نظراً لضعف وبطء منتجاتها.
  7. كثرة التغيير الذي سيطرأ على الجهة في الهيكلة والتنظيم الذي تحتاجه لنجاح إدارة البيانات.
  8. قلة وجود القادة الاستراتيجيين الذين لديهم الثقافة والحداثة للاستفادة من هذه الثقافة الجديدة.
  9. كثير من الجهات لدينا تعتمد الإنجاز السريع (Quick Win) والحلول المؤقتة والوهمية لتقديم خدماتها.
  10. كثرة الطفيلين على هذه الإدارة، وحيث لا يوجد مسار واضح لها. وأحمل نفسي ومن هم مثلي كمدير لإدارة البيانات لتحديد الحد الأدنى من المتطلبات لتصبح مؤهل لأن تعمل فيها.

إدارة البيانات

لتأسيس إدارة بيانات متكاملة الأطراف يجب أن تقدم جميع الحلول والخدمة المعروفة حالياً. وسأبدأ بالخدمات التي يجب أن توفرها إدارة البيانات:

  1. خدمات استخراج التقارير والبيانات (Ad hoc Reports and Row data).
  2. خدمات ذكاء الاعمال (Business Intelligent).
  3. خدمات البيانات الضخمة (Big Data).
  4. خدمات تقييم الأداء (Performance management).
  5. الخدمات الاستشارية في مجال إدارة البيانات.

يمكن استحداث إدارات أو أقسام تحت إدارة البيانات لتقديم كل خدمة، أو دمج بعضها حسب حجم الجهة ومدى الفائدة في تقسيمها. لكن في هذه المقالة سأقسمها إلى 4 أقسام أو إدارات، وهي مستمدة من خبرتي في الشركات التقنية وإدارات التقنية.

إدارة التقارير

هي إدارة لإنتاج جميع أنوع التقارير التي تخدم عملية تشغيل المنتجات مثل كشف بأسماء المستفيدين أو موظفين أو معلومات عن عميل وغيرها. أو إحصاءات غير اعتيادية مثل أن ترسل جهة قائمة بأسماء عملاء تطلب استخراج معلومات عنهم. كما تستطيع هذه الإدارة من التحقق من المعلومات عن حالة أو شخص معين. وفي بعض الجهات توفر لهذه الإدارة محرك بحث (Search Engine) خاص لتتبع البيانات. كما تستطيع هذه الإدارة استخراج البيانات بنسختها الخام أو المصححة على شكل ملفات اكسل أو غيرها.

المهارات المطلوبة

  1. القدرة على التعامل مع قواعد البيانات.
  2. فهم الأنظمة المتوفرة بشكل جيد.
  3. القدرة على التعامل مع برمجيات بناء التقارير مثل Microsoft SSRS, SAP Webi.
  4. الإلمام بقدرة الخوادم (Servers) حتى لا يحملها أكثر من طاقتها، واختيار الأوقات المناسبة لاستخراج التقارير.
  5. الفهم الجيد لسياسة الخصوصية ومن له حق الاطلاع على المعلومة.
  6. الفهم الجيد لسياسة الأمن، خاصة عند استلام وتسليم البيانات.
  7. العلاقة الممتازة مع المبرمجين ومحللي النظم حيث يعد واحد من أعضاء فريق تطوير البرامج.

المسميات الوظيفية

  1. مطور تقارير ذو قدرات برمجية.
  2. مطور قواعد بيانات.

إدارة ذكاء الأعمال (Business Intelligent)

هذه الإدارة هي أهم الإدارات أو الأقسام تحت إدارة البيانات، وهي الإدارة التي توظف محللي البيانات وعلماء البيانات، وهي كذلك  صلب عمل مهندسي البيانات. فهي الإدارة المسؤولة عن مستودعات البيانات (Data Warehouses) ومكعبات البيانات (Cubes or Multidimension) وتصميم لوحات المعلومات أو المؤشرات (Dashboards). ونظراً لحجم هذه الإدارة، يمكن الرجوع لمقالة هندسة البيانات، كما لابد من الرجوع لمقالات عن تحليل البيانات لمزيد من الفهم. لكن بشكل مختصر يمكن شرحها كالتالي:

المهارات المطلوبة

تحليل وعلم البيانات:

  1. فهم احتياجات العميل وفهم أهداف المنشأة أو المشروع جيداً.
  2. فهم الأنظمة بشكل جيد بشقيها التقني والتنظيمي (Business).
  3. تحديد المؤشرات (Indicators) مؤشرات القياس (KPIs).
  4. تحديد مصادر البيانات والمعادلات والمعايير التي ستبنى عليها النتائج.
  5. تحديد الخوارزميات (Algorithms) التي ستستخدم للوصول للنتائج المرجوة.
  6. القدرة على التنبؤ والتحليلات المتقدمة.
  7. القدرة على التعامل مع لغة R.
  8. القدرة على التعامل مع برمجيات تصميم لوحات المعلومات أو المؤشرات مثل Tableau, Power BI.
  9. مهارات العرض وحسن التعامل والقدرة على القناع.

هندسة البيانات:

  1. فهم الأنظمة جيداً.
  2. برمجة ETL.
  3. تطوير قواعد البيانات.
  4. بناء مستودعات البيانات (Data Warehouses).
  5. تصحيح وجودة البيانات.
  6. بناء مكعبات البيانات (Cubes or Multidimension).
  7. القدرة على التعامل مع برمجيات تصميم لوحات المعلومات أو المؤشرات مثل Tableau, Power BI.
  8. القدرة على التعامل مع الخوادم بشكل جيد (Servers).

المسميات الوظيفية

  1. عالم البيانات.
  2. محلل البيانات.
  3. مطور ETL.
  4. معماري قواعد البيانات Data Warehouse Architect
  5. مصمم نماذج البيانات Data Modeler
  6. مطور ذكاء أعمال BI Developer
  7. مصمم لوحات المعلومات أو المؤشرات Dashboard Developer

إدارة البيانات الضخمة

هي الأداة المعنية بإدارة البيانات الغير المنتظمة وكذلك إدارة تقنية هادوب Hadoop، وهذه التقنية من الممكن أن تستخرج التقارير مباشرة، إلا أن المتعارف عليه أنها يتم تجهيز البيانات على شكل مجاميع (Aggregations) لتخزينها في مستودعات البيانات لسببين: الأول سرعة أداء مستودعات البيانات مقارنة بهادوب والثاني لإمكانية الربط مع الأنظمة المتوفرة بياناتها في مستودعات البيانات. بمعنى آخر، يمكن استخدام تقنية هادوب بالكامل أو الاكتفاء باستخدامها كوسيلة لتخزين البيانات الضخمة فقط، والباقي تستخدم تقنية مستودعات البيانات وهذا المشهور عند مهندسي البيانات. وهو ما اعتمده في هذه الإدارة.

المهارات المطلوبة

  1. فهم مصادر المعلومات سواء كانت من الأنظمة أو من الانترنت أو ملفات أو غيرها.
  2. إدارة خوادم هادوب.
  3. القدرة على تطوير هادوب بالتقنيات المعتمدة لدى المنشأة سواء كانت MapReduce أو Spark أو غيرها، والمشهور Spark.

المسميات الوظيفية

  1. مدير هادوب Hadoop Administrator.
  2. مطور هادوب Hadoop Developer.

إدارة تقييم الأداء (Performance Management)

هذه الإدارة معنية بالاستراتيجية، وهي بناء التقارير ولوحات المؤشرات لمتابعة أداء الجهات الحكومية والشركات، وهي مفرغة تماماً لذلك. وهي المعنية بتبني أنظمة إدارة الاستراتيجية ومؤشرات القياس KPIs، وأغلب العاملين فيها يحملون خبرات استراتيجية. ويوجد من يدمجها مع إدارة ذكاء الاعمال، إلا إني لا أفضل ذلك لأن عملائها ومنتجاتها تختلف في الأهداف وطريقة التطوير، مع أنها لا تبتعد كثيراً عن ذكاء الاعمال.

المهارات المطلوبة

  1. فهم أهداف المنشأة جيداً.
  2. القدرة على التعامل مع KPIs في تحديد مصادرها ومتطلباتها.
  3. القدرة على التعامل مع أنظمة الاستراتيجية وإدارة KPIs، حيث هي أنظمة منفصلة عن باقي أنظمة المنشأة.
  4.  القدرة على التعامل مع برمجيات تصميم لوحات المعلومات أو المؤشرات مثل Tableau, Power BI، وعلى أنظمة إدارة الاستراتيجية.
  5. الخبرة الجيدة في إدارة الاستراتيجية وإدارة KPIs.

المسميات الوظيفية

  1. أخصائي إدارة الأداء performance management specialist.
  2. مطور ذكاء أعمال BI Developer.
  3. مصمم لوحات المعلومات أو المؤشرات Dashboard Developer.

الخاتمة

من جانب الخدمات الاستشارية لإدارة البيانات، فهي في الغالب تكون إما في علم البيانات وتحليلها أو هندسة البيانات للمساعدة في تنفيذ ناجح لتقنيات إدارة البيانات. أما ما يتعلق بالاستراتيجية فنحن معنيون بتطبيق التقنية فيها وليس تقديم خدمات استشارية حول الاستراتيجية.

وأخيراً، تأسيس إدارة البيانات يأخذ عدة أشكال، منها ما يتوافق مع هذا التقسيم أو قد توجد بتقسيمات أخرى.

اظهر المزيد

تعليق واحد

اترك تعليقاً

لن يتم نشر عنوان بريدك الإلكتروني. الحقول الإلزامية مشار إليها بـ *

زر الذهاب إلى الأعلى