مجال العمل:

وصف الوظيفة:

عملك يشكل العالم في كاتربيلر إنك.

عند العمل في كاتربيلر، أنت جزء من فريق عالمي يهتم ليس فقط بالعمل الذي نقوم به - ولكن أيضًا ببعضنا البعض. نحن صانعو الحلول، ومحللو المشكلات، وبناة المستقبل الذين ينشئون مجتمعات أقوى وأكثر استدامة. نحن لا نتحدث فقط عن التقدم والابتكار هنا - بل نجعل ذلك يحدث، مع عملائنا، حيث نعمل ونعيش. معًا، نبني عالمًا أفضل، حتى نستطيع جميعًا الاستمتاع بالعيش فيه.

ملخص الوظيفة

نبحث عن مهندس بيانات ذو دافع عالٍ وخبرة كبيرة للانضمام إلى فريق هندسة البيانات لدينا. يجب أن يكون لدى المرشح المثالي خلفية قوية في بناء خطوط بيانات قابلة للتوسع باستخدام مجموعة خدمات AWS وخبرة عملية واسعة مع Snowflake. إتقان Python وSQL، بالإضافة إلى تقنيات قواعد البيانات الرسومية والمتجهة، أمر ضروري. تتطلب هذه الوظيفة مهارات قوية في حل المشكلات وعقلية استباقية لتقديم حلول بيانات فعالة وقابلة للتوسع وموثوقة.

المسؤوليات الرئيسية

• تصميم وتطوير وصيانة خطوط بيانات قابلة للتوسع على AWS باستخدام خدمات مثل S3 وGlue وLambda وRedshift وEMR.
• بناء وتحسين حلول تخزين البيانات باستخدام Snowflake، بما في ذلك ضبط الأداء ونمذجة البيانات.
• كتابة شيفرة فعالة وقابلة لإعادة الاستخدام في Python وSQL لتحويل البيانات ومعالجتها.
• التعاون مع فرق متعددة الوظائف، بما في ذلك علماء البيانات والمحللين وأصحاب المصلحة في الأعمال، لفهم متطلبات البيانات.
• تطوير وتحسين الحلول باستخدام قواعد البيانات الرسومية (مثل Neo4j وAmazon Neptune)، بما في ذلك تصميم الاستعلامات وضبط الأداء.
• تصميم وبناء وتشغيل حلول قواعد البيانات المتجهة (مثل Milvus وAmazon OpenSearch) لدعم البحث الدلالي، والتوصيات، وحالات الاستخدام المدفوعة بالذكاء الاصطناعي.
• دمج قواعد البيانات المتجهة مع التطبيقات المعتمدة على LLM وتدفقات العمل المدفوعة بالذكاء الاصطناعي.
• مراقبة واستكشاف الأخطاء وتحسين أداء وموثوقية خطوط البيانات.
• ضمان جودة البيانات وسلامتها وأمانها عبر جميع مراحل خط البيانات.
• المشاركة في مراجعات الشيفرة، ومناقشات الهندسة، ومبادرات التحسين المستمر.

المؤهلات المطلوبة

• 8+ سنوات من الخبرة في هندسة البيانات أو أدوار ذات صلة.
• خبرة عملية قوية مع خدمات سحابية AWS، بما في ذلك أحمال البيانات والذكاء الاصطناعي.
• فهم عميق لهندسة Snowflake، وضبط الأداء، وأفضل الممارسات.
• إتقان متقدم في Python وSQL لخطوط البيانات، والتحويلات، والخدمات.
• فهم قوي لمفاهيم نمذجة البيانات الرسومية والمتجهة وتطبيقاتها العملية.
• خبرة عملية مع قواعد البيانات الرسومية (مثل Neo4j وNeptune) وقواعد البيانات المتجهة (مثل Milvus وAmazon OpenSearch).
• خبرة مع أنظمة التحكم في الإصدارات (مثل Git) وتدفقات العمل الخاصة بـ Git.
• خبرة في العمل مع لوحات Azure DevOps (AzDO) لإدارة الأعمال في بيئات Agile.
• مهارات تحليلية وحل مشكلات ممتازة.
• قدرات قوية في التواصل والتعاون.
• درجة بكاليوس أو ماجستير في علوم الكمبيوتر، الهندسة، أو مجال ذي صلة.

المهارات المرغوبة

• معرفة بنظام NVIDIA و تطبيقاته في البيانات والذكاء الاصطناعي.

المؤهلات المفضلة

• خبرة مع أدوات التنسيق مثل AWS Step Functions.
• إلمام بممارسات حوكمة البيانات والامتثال.
• تعرض لأطر معالجة البيانات في الوقت الحقيقي (مثل Kafka وSpark Streaming).

تفاصيل إضافية حول قاعدة المعرفة

• خبرة في تصميم ونشر خطوط إدخال البيانات لمصادر غير منظمة مثل PDF وWord وملفات HTML، بما في ذلك استخراج النص، واستراتيجيات التجزئة، وتوليد التضمين على نطاق واسع.
• خبرة عملية مع قواعد البيانات المتجهة، وخاصة Milvus، تغطي تصميم المخطط، والفهرسة، وتحسين أداء الكتابة لخطوط إدخال التضمين على نطاق واسع.
• إتقان بناء خطوط إدخال رسم المعرفة باستخدام قواعد البيانات الرسومية - بما في ذلك استخراج الكيانات، ونمذجة العلاقات، وتعبئة العقد والسمات.
• مهارات قوية في هندسة خطوط البيانات في Python وأطر العمل لتنظيم تدفقات العمل متعددة المراحل لمعالجة الوثائق، مع خبرة في نشر ومراقبة هذه الخطوط في بيئات الإنتاج.
• مكافأة: تعرض لمكتبات RAPIDS (cuDF، cuML، cuGraph) أو أدوات قائمة على CUDA لمعالجة البيانات المعجلة بواسطة GPU، مما يتيح تحويلًا أسرع وتحسينًا أثناء تدفقات إدخال البيانات على نطاق واسع.

تواريخ النشر:

كاتربيلر هي صاحب عمل يتيح الفرص المتكافئة. يُشجع المتقدمون المؤهلون من جميع الأعمار على التقديم.

غير مستعد للتقديم؟ انضم إلى مجتمع المواهب لدينا.