Al-Haffar | AlHaffar – The Specialist in Job Search in Bahrain
Principal Data Engineer (m/f/d)
Key Responsibilities:
Architect, Develop and “Own” Data and Data Pipelines: Design, implement, and maintain data pipelines that handle large volumes of data from various sources, ensuring data quality, integrity, and availability.
Manage team planning, priorities, and deliverables using Agile methodologies.
AWS Expertise: Utilize AWS services like Lambda, EMR, S3, Glue, and others to create scalable and cost-effective data solutions.
Relational Database Experience: Utilize PostgreSQL on RDS or similar database technologies, where applicable.
Graph Database Experience: Utilize Neo4j or other graph databases for specialized data processing and analysis, where applicable.
Stream Processing: Experience with Apache Kafka, Apache Spark or similar for real-time data processing and stream analytics.
Python Development: Primarily use Python for data engineering tasks, data transformation, and ETL processes.
Data Warehousing: Implement and manage data warehousing and/or data lake solutions for efficient data storage and retrieval to support engineering, data science, applications, and groups across our organization.
Collaboration: Work closely with Product Management, Data Science, and the leadership team to understand data requirements and deliver data solutions that meet business needs.
Monitoring and Optimization: Continuously monitor the performance of data pipelines and optimize for scalability and efficiency.
Documentation: Maintain comprehensive documentation for data engineering processes, ensuring knowledge transfer within the team.
Leadership: Lead by example within the data engineering team, taking pride in your team’s deliverables, and performing as technical lead for a scrum team or on various projects, where applicable.
Qualifications:
7+ years experience leading large scale Data Engineering projects.
Proven experience in designing and building multi-tenant cloud-native data platforms in a SaaS or PaaS environment.
Experience with both relational and graph database technologies in a production environment, Specifically PosgreSQL and Neo4j
Strong expertise in AWS services, including Lambda, EMR, S3, Glue, Apache Airflow or similar tools and services.
Proficiency in distributed system design, data warehousing, data lakes, and stream processing using Spark or similar.
Strong programming skills in Python.
Excellent problem-solving and troubleshooting skills.
Ability to work collaboratively with cross-functional teams and convey complex technical concepts to non-technical stakeholders.
Bachelor's or Master's degree in Computer Science, Data Engineering, related field, or equivalent experience.
↚
Application Steps:
- Open the application link
- Browse the available jobs and select the one that suits you.
- Click on "Apply Now" and enter the required information.
- Ensure that your details are entered correctly, then click "Submit".
- Open the application link
- Browse the available jobs and select the one that suits you.
- Click on "Apply Now" and enter the required information.
- Ensure that your details are entered correctly, then click "Submit".
Additional Details:
- Posting Date: 19/3/2025
- Required Nationalities: All nationalities
الحفار | الحفار – المتخصص في البحث عن عمل في البحرين
- Posting Date: 19/3/2025
- Required Nationalities: All nationalities
الحفار | الحفار – المتخصص في البحث عن عمل في البحرين
مهندس بيانات رئيسي (ذكر/أنثى/متعدد)
المسؤوليات الرئيسية :
تصميم وتطوير وامتلاك البيانات وأنابيب البيانات: تصميم وتنفيذ وصيانة أنابيب البيانات التي تتعامل مع كميات كبيرة من البيانات من مصادر مختلفة، وضمان جودة البيانات وسلامتها وتوافرها. إدارة تخطيط الفريق والأولويات والمنتجات النهائية باستخدام منهجيات Agile.خبرة AWS: استخدم خدمات AWS مثل Lambda وEMR وS3 وGlue وغيرها لإنشاء حلول بيانات قابلة للتطوير وفعالة من حيث التكلفة.خبرة في قواعد البيانات العلائقية: استخدام PostgreSQL على RDS أو تقنيات قواعد البيانات المماثلة، حيثما ينطبق ذلك.خبرة في قواعد بيانات الرسوم البيانية: استخدام Neo4j أو قواعد بيانات الرسوم البيانية الأخرى لمعالجة البيانات وتحليلها المتخصصة، حيثما كان ذلك مناسبًا.معالجة التدفق: الخبرة في Apache Kafka أو Apache Spark أو ما شابه ذلك لمعالجة البيانات في الوقت الفعلي وتحليل التدفق.
المسؤوليات الرئيسية :
تصميم وتطوير وامتلاك البيانات وأنابيب البيانات: تصميم وتنفيذ وصيانة أنابيب البيانات التي تتعامل مع كميات كبيرة من البيانات من مصادر مختلفة، وضمان جودة البيانات وسلامتها وتوافرها.
إدارة تخطيط الفريق والأولويات والمنتجات النهائية باستخدام منهجيات Agile.
خبرة AWS: استخدم خدمات AWS مثل Lambda وEMR وS3 وGlue وغيرها لإنشاء حلول بيانات قابلة للتطوير وفعالة من حيث التكلفة.
خبرة في قواعد البيانات العلائقية: استخدام PostgreSQL على RDS أو تقنيات قواعد البيانات المماثلة، حيثما ينطبق ذلك.
خبرة في قواعد بيانات الرسوم البيانية: استخدام Neo4j أو قواعد بيانات الرسوم البيانية الأخرى لمعالجة البيانات وتحليلها المتخصصة، حيثما كان ذلك مناسبًا.
معالجة التدفق: الخبرة في Apache Kafka أو Apache Spark أو ما شابه ذلك لمعالجة البيانات في الوقت الفعلي وتحليل التدفق.
تطوير Python: استخدم Python بشكل أساسي لمهام هندسة البيانات وتحويل البيانات وعمليات ETL.مستودعات البيانات: تنفيذ وإدارة حلول مستودعات البيانات و/أو بحيرة البيانات لتخزين البيانات واسترجاعها بكفاءة لدعم الهندسة وعلوم البيانات والتطبيقات والمجموعات في جميع أنحاء مؤسستنا.التعاون: العمل بشكل وثيق مع إدارة المنتجات وعلوم البيانات وفريق القيادة لفهم متطلبات البيانات وتقديم حلول البيانات التي تلبي احتياجات العمل.المراقبة والتحسين: مراقبة أداء خطوط أنابيب البيانات بشكل مستمر وتحسينها لتحقيق قابلية التوسع والكفاءة.التوثيق: الحفاظ على توثيق شامل لعمليات هندسة البيانات، وضمان نقل المعرفة داخل الفريق.القيادة: القيادة بالقدوة ضمن فريق هندسة البيانات، والفخر بإنجازات فريقك، والعمل كقائد فني لفريق scrum أو في مشاريع مختلفة، حيثما كان ذلك مناسبًا.
المؤهلات:
أكثر من 7 سنوات من الخبرة في قيادة مشاريع هندسة البيانات واسعة النطاق. خبرة مثبتة في تصميم وبناء منصات بيانات سحابية متعددة المستأجرين في بيئة SaaS أو PaaS. خبرة في كل من تقنيات قواعد البيانات العلائقية والرسومية في بيئة الإنتاج، وخاصة PosgreSQL وNeo4jخبرة قوية في خدمات AWS، بما في ذلك Lambda، وEMR، وS3، وGlue، وApache Airflow أو الأدوات والخدمات المماثلة. الكفاءة في تصميم النظام الموزع، ومستودعات البيانات، وبحيرات البيانات، ومعالجة التدفق باستخدام Spark أو ما شابه.مهارات قوية في البرمجة باستخدام بايثون.مهارات ممتازة في حل المشكلات واستكشاف الأخطاء وإصلاحها.القدرة على العمل بشكل تعاوني مع فرق متعددة الوظائف ونقل المفاهيم التقنية المعقدة إلى أصحاب المصلحة غير الفنيين.درجة البكالوريوس أو الماجستير في علوم الكمبيوتر، أو هندسة البيانات، أو مجال ذي صلة، أو خبرة معادلة.
تطوير Python: استخدم Python بشكل أساسي لمهام هندسة البيانات وتحويل البيانات وعمليات ETL.
مستودعات البيانات: تنفيذ وإدارة حلول مستودعات البيانات و/أو بحيرة البيانات لتخزين البيانات واسترجاعها بكفاءة لدعم الهندسة وعلوم البيانات والتطبيقات والمجموعات في جميع أنحاء مؤسستنا.
التعاون: العمل بشكل وثيق مع إدارة المنتجات وعلوم البيانات وفريق القيادة لفهم متطلبات البيانات وتقديم حلول البيانات التي تلبي احتياجات العمل.
المراقبة والتحسين: مراقبة أداء خطوط أنابيب البيانات بشكل مستمر وتحسينها لتحقيق قابلية التوسع والكفاءة.
التوثيق: الحفاظ على توثيق شامل لعمليات هندسة البيانات، وضمان نقل المعرفة داخل الفريق.
القيادة: القيادة بالقدوة ضمن فريق هندسة البيانات، والفخر بإنجازات فريقك، والعمل كقائد فني لفريق scrum أو في مشاريع مختلفة، حيثما كان ذلك مناسبًا.
المؤهلات:
أكثر من 7 سنوات من الخبرة في قيادة مشاريع هندسة البيانات واسعة النطاق.
خبرة مثبتة في تصميم وبناء منصات بيانات سحابية متعددة المستأجرين في بيئة SaaS أو PaaS.
خبرة في كل من تقنيات قواعد البيانات العلائقية والرسومية في بيئة الإنتاج، وخاصة PosgreSQL وNeo4j
خبرة قوية في خدمات AWS، بما في ذلك Lambda، وEMR، وS3، وGlue، وApache Airflow أو الأدوات والخدمات المماثلة.
الكفاءة في تصميم النظام الموزع، ومستودعات البيانات، وبحيرات البيانات، ومعالجة التدفق باستخدام Spark أو ما شابه.
مهارات قوية في البرمجة باستخدام بايثون.
مهارات ممتازة في حل المشكلات واستكشاف الأخطاء وإصلاحها.
القدرة على العمل بشكل تعاوني مع فرق متعددة الوظائف ونقل المفاهيم التقنية المعقدة إلى أصحاب المصلحة غير الفنيين.
درجة البكالوريوس أو الماجستير في علوم الكمبيوتر، أو هندسة البيانات، أو مجال ذي صلة، أو خبرة معادلة.
خطوات التقديم:
- افتح رابط التطبيق
- تصفح الوظائف المتاحة واختر الوظيفة التي تناسبك.
- انقر فوق "تقديم الطلب الآن" وأدخل المعلومات المطلوبة.
- تأكد من إدخال تفاصيلك بشكل صحيح، ثم انقر فوق "إرسال".
- افتح رابط التطبيق
- تصفح الوظائف المتاحة واختر الوظيفة التي تناسبك.
- انقر فوق "تقديم الطلب الآن" وأدخل المعلومات المطلوبة.
- تأكد من إدخال تفاصيلك بشكل صحيح، ثم انقر فوق "إرسال".
تفاصيل إضافية:
- تاريخ النشر: 19/3/2025
- الجنسيات المطلوبة: جميع الجنسيات
- تاريخ النشر: 19/3/2025
- الجنسيات المطلوبة: جميع الجنسيات