نبحث عن مهندس بيانات متمرس للانضمام إلى فريق التنفيذ والخدمات المهنية لدينا. في هذا الدور، ستكون مسؤولاً عن تصميم وبناء وتحسين خطوط أنابيب البيانات التي تدعم نظام FOCAL لدينا. ستعمل بشكل وثيق مع مهندسي التعلم الآلي ومطوري البرامج ومديري المشاركة لضمان التكامل السلس للبيانات، وتنفيذ الاستعلامات بكفاءة، وقابلية التوسع عالية الأداء للنظام. بالإضافة إلى ذلك، ستتعاون مع فرق أخرى لإنشاء استعلامات عالية الجودة ومجموعات أسئلة متنوعة تعمل على تحسين دقة النظام وأدائه.
ما ستفعله
- تطوير وصيانة خطوط أنابيب بيانات قابلة للتوسع وعمليات ETL لدعم نظام FOCAL.
- تحسين توليد استعلامات SQL من خلال تصميم مخططات قواعد بيانات فعالة، واستراتيجيات الفهرسة، وخطط تنفيذ الاستعلامات.
- التعاون مع مهندسي تعلم الآلة لمعالجة وتحويل وهيكلة مجموعات البيانات واسعة النطاق لنماذج الذكاء الاصطناعي.
- مراقبة وتحسين أداء خطوط أنابيب البيانات وموثوقيتها وقابليتها للتوسع.
- ضمان جودة البيانات من خلال تنفيذ آليات التحقق والتسجيل.
- دعم تنفيذ الاستعلامات في الوقت الفعلي والمجمعة في نظام FOCAL من خلال تحسين التفاعلات مع قاعدة البيانات.
- البقاء على اطلاع دائم بأفضل الممارسات في هندسة البيانات، وتحسين قواعد البيانات، والبنية التحتية للتعلم الآلي.
المؤهلات
- خبرة سنتين أو أكثر في هندسة البيانات أو أدوار تقنية ذات صلة
- إتقان لغة Python لمعالجة البيانات وتطوير ETL
- مهارات قوية في SQL وخبرة في كتابة استعلامات معقدة
- فهم متين للنمذجة الأبعادية (مخطط النجمة، مخطط ندفة الثلج، جداول الحقائق والأبعاد)
- خبرة في تصميم أو استهلاك واجهات برمجة التطبيقات RESTful
- خبرة عملية في تطوير خطوط أنابيب ETL/ELT
- معرفة عملية بسطر أوامر Linux وإدارة الخوادم
- خبرة عملية في Docker أو تقنيات الحاويات
- مهارات قوية في التعامل مع العملاء والتواصل
ميزة إضافية
- خبرة في Apache Airflow لتنسيق سير العمل
- PySpark أو أطر معالجة البيانات الموزعة
- معرفة بتطوير واجهات برمجة التطبيقات باستخدام Flask أو FastAPI أو ما شابه ذلك
- الإلمام بأنماط التكامل: المعالجة المجمعة، والبث المباشر، وخطافات الويب، والهياكل المعتمدة على الأحداث
- خبرة في آليات المصادقة (OAuth، مفاتيح API، JWT)
- التعرض لصفوف الرسائل أو منصات البث (Kafka، RabbitMQ ...إلخ)
- أدوات تصور البيانات (Tableau، Power BI ...إلخ)
- خبرة في هندسة الميزات بالعمل جنباً إلى جنب مع علماء البيانات
- فهم أطر جودة البيانات وممارسات الحوكمة