مهندس بيانات أول / موظف - ETL / AWS / بايثون / أباتشي

نظرة عامة على الشركة: 10Pearls هي شريك خدمات تكنولوجيا رقمية شامل يساعد الشركات على استخدام التكنولوجيا كميزة تنافسية. نحن نساعد عملائنا على رقمنة أعمالهم الحالية، وبناء منتجات جديدة مبتكرة، وزيادة فرقهم الحالية بأعضاء فريق ذوي أداء عالٍ. تضمن خبرتنا الواسعة في إدارة المنتجات، وتجربة المستخدم/التصميم، وهندسة السحابة، وتطوير البرمجيات، ورؤى البيانات والذكاء، والأمن السيبراني، والتكنولوجيا الناشئة، وضمان الجودة أننا نقدم حلولًا تلبي احتياجات الأعمال. تفخر 10Pearls بوجود قاعدة عملاء متنوعة تشمل الشركات الكبيرة، والشركات الصغيرة والمتوسطة، والشركات الناشئة ذات النمو العالي. نحن نعمل مع العملاء عبر الصناعات، بما في ذلك الرعاية الصحية/علوم الحياة، والتعليم، والطاقة، والاتصالات/الإعلام، والخدمات المالية، والتكنولوجيا العالية. تم بناء العديد من شراكاتنا طويلة الأمد والناجحة على الثقة والنزاهة والتنفيذ الناجح.
الدور: نحن نبحث عن مهندس بيانات ذو مهارات عالية وخبرة كبيرة. يجب أن يكون لدى المرشح المثالي أكثر من 5 سنوات من الخبرة مع خلفية قوية في بايثون وSQL وأنظمة البيانات، ونمذجة البيانات، وApache Spark وSnowflake. يتضمن الدور تصميم وبناء وصيانة حلول بيانات قابلة للتوسع تدعم التحليلات واتخاذ قرارات الأعمال.

المسؤوليات: • تطوير وبناء واختبار وصيانة أنظمة بيانات قابلة للتوسع من الدرجة الإنتاجية.
• تصميم وتنفيذ نماذج بيانات قوية للتحليلات والتقارير.
• تجميع مجموعات بيانات كبيرة ومعقدة تلبي المتطلبات الوظيفية وغير الوظيفية للأعمال.
• تحسين موثوقية البيانات وجودتها وأدائها عبر الأنظمة.
• إعداد مجموعات بيانات مختارة للتحليلات وحالات النمذجة المتقدمة.
• تحديد الفرص لأتمتة تدفقات العمل والعمليات المتعلقة بالبيانات.
• بناء وإدارة تدفقات العمل باستخدام Apache Airflow.
• تحسين معالجة البيانات باستخدام Apache Spark (أحمال الدفعات و/أو التدفق).
• التعاون مع فرق المنتج والتحليلات والهندسة لفهم متطلبات الأعمال المتطورة وتقديم حلول بيانات قابلة للتوسع.
• مراقبة صحة الأنظمة وتنفيذ التسجيل والتنبيه وفحوصات جودة البيانات وضبط الأداء.
• تطبيق أفضل الممارسات للتحكم في الإصدارات وCI/CD والنشر باستخدام Git وDocker.
• تصميم وتنفيذ حلول بيانات سحابية على AWS أو GCP مع اتباع أفضل الممارسات لمنصات السحابة.
• ضمان أمان البيانات، والحكومة، والتحكم في الوصول، وأفضل ممارسات تطور المخطط.

المتطلبات: • درجة البكالوريوس في علوم الكمبيوتر أو الهندسة أو مجال ذي صلة.
• خبرة عملية لا تقل عن 5 سنوات في هندسة البيانات وبناء أنظمة بيانات إنتاجية.
• خبرة قوية في بايثون وSQL.
• خبرة مثبتة في بناء أنظمة ELT/ETL على نطاق واسع.
• فهم قوي لمفاهيم نمذجة البيانات بما في ذلك الأبعاد، والنجوم، والمخططات التحليلية.
• خبرة عملية مع Apache Spark / PySpark لمعالجة البيانات على نطاق واسع.
• خبرة في أدوات تنسيق سير العمل مثل Apache Airflow.
• خبرة في مستودعات البيانات السحابية مثل Snowflake أو BigQuery.
• خبرة عملية في بناء حلول هندسة البيانات على منصات السحابة (AWS أو GCP).
• خبرة في استخدام Docker للتطبيقات الحاوية.
• معرفة بخطوط CI/CD وأفضل الممارسات الحديثة في DevOps لمنصات البيانات.
• مهارات قوية في حل المشكلات والانتباه للتفاصيل.
• مهارات قوية في التواصل.