GG10.2
يلعب مهندس البيانات دورًا حاسمًا في دورة حياة البيانات والتحليلات ويساهم بشكل كبير في حلول البيانات والتحليلات ذات الجودة الإنتاجية. تتطلب هذه الوظيفة إظهار الخبرة في البيانات الكبيرة والهندسة والسحابة. إنها وظيفة مساهم فردي، متوقع أن تعمل بشكل مستقل
5-8+ سنوات من الخبرة ذات الصلة
درجة البكالوريوس في علوم الكمبيوتر أو تكنولوجيا المعلومات أو مؤهل تعليمي معادل
تصميم وبناء وصيانة خطوط أنابيب ETL/ELT قوية على السحابة (Azure) أو محليًا لجمع واستيعاب وتخزين كميات كبيرة من البيانات الهيكلية وغير الهيكلية للمعالجة الدفعة/الوقت الحقيقي
مراقبة وتحسين واستكشاف خطوط أنابيب البيانات لضمان الموثوقية وقابلية التوسع والأداء
ضمان معالجة البيانات والجودة والأمان واتباع إرشادات ومعايير الامتثال
التعاون مع عدة شركاء من الأعمال والتكنولوجيا والعمليات وقدرات D&A (حوكمة البيانات، جودة البيانات، نمذجة البيانات، هندسة البيانات، علم البيانات، DevOps، BI والرؤى)
SQL، بايثون/سكالا
قواعد البيانات NoSql والموزعة (Hbase، Cosmos DB)
تطوير خطوط أنابيب ETL
أطر البيانات الكبيرة: Apache Spark، Hadoop، Hive
منصات السحابة: Azure data factory، Eventhub، Azure functions، Synapse، Databricks
مستودعات البيانات، أسواق البيانات، بحيرات البيانات
هندسة الميدالية
تحسين الأداء والتحسين والتحقق من جودة البيانات
معالجة البيانات في الوقت الحقيقي والدفعة، خطوط أنابيب البث باستخدام Spark
مهارات التواصل، مهارات تحليلية، مهارات حل المشكلات الهيكلية.
خبرة في الشراكة والتفاعل مع أصحاب المصلحة
ممارسات DevOps: Git، AzureDevops، خطوط أنابيب CI/CD
برمجة Unix shell، MongoDB، Nifi
التعرض لتقنية وأدوات Gen AI