مسؤول سينيور كلوديرا (CML)

نبذة عنا: حيث يلتقي أفضل المواهب التقنية مع الفرص العالمية!
في زينون7، نعمل مع الشركات الرائدة والشركات الناشئة المبتكرة على مشاريع مثيرة ومتطورة تستفيد من أحدث التقنيات عبر مجالات تكنولوجيا المعلومات المختلفة بما في ذلك البيانات، الويب، البنية التحتية، الذكاء الاصطناعي، والعديد من المجالات الأخرى.
خبرتنا في تطوير حلول تكنولوجيا المعلومات والموارد عند الطلب تتيح لنا الشراكة مع العملاء في مبادرات تحويلية، مما يعزز الابتكار ونمو الأعمال.
سواء كان ذلك من خلال تمكين المنظمات العالمية أو التعاون مع الشركات الناشئة الرائدة، نحن ملتزمون بتقديم حلول متقدمة وفعالة تلبي أكثر التحديات تعقيدًا اليوم.
نبذة عن العميل: انضم إلى إحدى المؤسسات المالية الرائدة في مصر، المعروفة بمجموعة خدماتها المصرفية الواسعة، بما في ذلك الخدمات المصرفية المؤسسية والخدمات المصرفية الشخصية.
مع وجود عالمي من خلال أكثر من 50 فرعًا ومراسلين، نقدم خدماتنا لعملاء متنوعين وديناميكيين.
بينما نبدأ رحلة تحول رقمي رائدة، نحن ملتزمون بالاستفادة من أحدث التقنيات لإنشاء بنية بيانات متطورة ستعيد تعريف أدائنا وتقديم خدماتنا.
ملخص الوظيفة: يتم البحث عن مسؤول سينيور كلوديرا ذو خبرة عالية مع خبرة في تعلم الآلة من كلوديرا لقيادة وإدارة بيئات هادوب/كلوديرا على نطاق المؤسسات.
يجب أن يكون لدى المرشح المثالي خبرة عملية قوية مع منصات كلوديرا، CML، كوبيرنيتس وأوبن شيفت وسجل مثبت في إدارة فرق مهندسي البيانات، وخبرة عميقة في بناء والإشراف على خطوط أنابيب ETL.
تتطلب هذه الوظيفة القدرة على تصميم وفهم والتواصل حول هياكل البيانات المعقدة وتدفقات البيانات.
المسؤوليات الرئيسية: إدارة المنصة والعناقيد: إدارة وصيانة وتحسين عناقيد هادوب كلوديرا (CDP أو توزيعات كلوديرا القديمة).
ضمان توفر عالي، وضبط الأداء، وتخطيط السعة، وأمان العنقود.
إدارة التحديثات، والترقيع، والمراقبة، واستكشاف الأخطاء وإصلاحها لخدمات كلوديرا (HDFS، YARN، Hive، HBase، Impala، Spark، Kafka، إلخ).
هندسة البيانات وETL: الإشراف على تصميم وتطوير وصيانة خطوط أنابيب ETL/ELT باستخدام أدوات مثل Spark، Hive، Kafka، Airflow، NiFi، أو ما شابه.
مراجعة وتوجيه استراتيجيات إدخال البيانات، والتحويل، والتخزين عبر الأحمال الدفعة والتدفق.
ضمان جودة البيانات، وموثوقيتها، وقابلية توسيع خطوط الأنابيب.
العمارة والتصميم: تصميم وفهم وتوثيق هياكل تخزين البيانات ومخططات تدفق البيانات.
التعاون مع أصحاب المصلحة لتعريف بنية منصة البيانات من البداية إلى النهاية.
ترجمة متطلبات الأعمال إلى حلول بيانات قابلة للتوسع وآمنة.
القيادة: قيادة وتوجيه فرق مهندسي البيانات، وتقديم التوجيه الفني وأفضل الممارسات.
وضع معايير للتطوير، والنشر، والمراقبة، والتوثيق.
العمل عن كثب مع علماء البيانات، والمحللين، وفرق DevOps، وفرق التطبيقات.
الأمان والحكومة: تنفيذ أفضل ممارسات الأمان بما في ذلك Kerberos، Ranger، وضوابط الوصول إلى البيانات.
دعم متطلبات حوكمة البيانات، والنسب، والامتثال.
حزمة راتب جذابة ورائدة في السوق.
مسار واضح للتقدم المهني مع فرص التطوير المهني.
عقد لمدة عام مع زينون7، مما يقدم فرصة كبيرة للتجديد.
7+ سنوات من الخبرة في منصات البيانات، هادوب، أو إدارة البيانات الكبيرة.
خبرة عميقة مع مساحات عمل CML، المشاريع، وأوقات التشغيل.
خبرة عملية قوية في إدارة كلوديرا (CDH/CDP).
خبرة قوية في الحاويات (Docker، Kubernetes).
خبرة قوية في أوبن شيفت.
خبرة مثبتة في إدارة وتوجيه فرق هندسة البيانات.
خلفية قوية في تصميم وتنفيذ خطوط أنابيب ETL.
خبرة مع Spark، Hive، HDFS، YARN، Kafka، Airflow/NiFi (أو أدوات مشابهة).
القدرة على تصميم ورسم مخططات العمارة لتخزين البيانات وتدفقات البيانات.
فهم قوي لنظام لينكس، والشبكات، والأنظمة الموزعة.
الخبرة مع منصات السحابة (AWS، Azure، أو GCP) تعتبر ميزة قوية.
مهارات ممتازة في التواصل والتوثيق.
ما يفضل: شهادات كلوديرا.
التعرض لأدوات حوكمة البيانات وإدارة البيانات الوصفية.
الخبرة في بيئات المؤسسات الكبيرة أو المنظمة.