Data Architect (Cloudera/Hadoop)

تسعى مجموعة YALLO لتوظيف مهندس بيانات (معمار البيانات) ذو خبرة واسعة في تقنيات Cloudera وHadoop، وذلك للعمل في الرياض. سيكون المرشح المثالي مسؤولاً عن تصميم وتنفيذ استراتيجيات متكاملة لتحليل البيانات، وتحقيق أعلى معايير الأمان والحوكمة في بيئة مصرفية.

المهام والمسؤوليات الرئيسية:

• تحديد معمارية مرجعية لبحيرة البيانات باستخدام Cloudera CDP، مع تغطية أنظمة HDFS وOBD، وHive وImpala، وSpark، وKafka، وNiFi، وRanger، وAtlas، وAirflow/Oozie، وCloudera Manager.
• تطبيق معايير الأمان والحوكمة الخاصة بالبنوك، مثل Kerberos وRanger وTLS، بالإضافة إلى تشفير البيانات، وتتبع السجلات، والمراجعة، بما يتماشى مع متطلبات SAMA وBCBS 239 وPCI DSS/GDPR.
• قيادة بناء الكلاستر (Cluster) مع التركيز على توافر عالي (HA) والتعافي من الكوارث (DR)، والتخطيط للطاقة، والترقيات، وتحسين الأداء.
• إنشاء أطر إدخال البيانات باستخدام NiFi وKafka وCDC، وتحديد مناطق البيانات، ووضع معايير للأنابيب القابلة لإعادة الاستخدام.
• تحويل حالات الاستخدام التجاري، مثل متابعة معاملات مكافحة غسل الأموال، وتقييم الاحتيال، وإدارة المخاطر الائتمانية، والتقارير التنظيمية، وملف تعريف العميل الشامل، إلى منتجات بيانات وأنابيب.
• التعاون مع فرق علم البيانات لتنسيق تدريب النماذج وتقييمها، بما في ذلك استخدام Spark ML وpySpark وMLflow، وتخزين ميزات النماذج، وأنماط التقييم الدفعي واللحظي.
• تحديد أنماط الاستهلاك، بما في ذلك استخدام Impala وHive وواجهات برمجة التطبيقات (APIs) ومواضيع Kafka وطبقات المعاني وأدوات ذكاء الأعمال (BI).
• تعزيز ممارسات DevOps وإدارة البنية التحتية ككود (IaC) باستخدام Terraform وAnsible، بالإضافة إلى تنفيذ عمليات التكامل المستمر والتسليم المستمر (CI/CD) ومراقبة الأداء.

المتطلبات والمؤهلات:

• خبرة تتراوح بين 10 إلى 15 عامًا في هندسة البيانات، مع 5 إلى 7 سنوات في استخدام Cloudera وHadoop، و3 إلى 5 سنوات كمهندس معمار في القطاع المصرفي.
• خبرة عميقة في استخدام CDP، وHive وImpala، وSpark، وKafka، وNiFi، وRanger، وAtlas، وKerberos، وCloudera Manager.
• معرفة قوية بممارسات الأمان، وتتبع البيانات، وجودة البيانات، والامتثال، وتوافر البيانات المرتفع (HA).
• خبرة في استخدام الخدمات السحابية (AWS/Azure/GCP)، وKubernetes/OpenShift، وTerraform/Ansible، وعمليات CI/CD.
• مهارات ممتازة في إدارة أصحاب المصلحة والقيادة في تسليم المشاريع.

المهارات المطلوبة:

• قدرة تحليلية قوية ومهارات حل المشكلات.
• مهارات تواصل فعالة وقدرة على العمل ضمن فريق.
• قدرة على توجيه المهندسين وإجراء مراجعات التصميم.
• إلمام بتقنيات المراقبة والرصد مثل Cloudera Manager وPrometheus/Grafana.