Data Engineer
نُشرت في :
08-02-2024
صاحب العمل نشط
1 وظيفة شاغرة
هذا المنشور غير متاح الآن! ربما يكون قد تم شغل الوظيفة.
حالة تأهب وظيفة
سيتم تحديثك بأحدث تنبيهات الوظائف عبر البريد الإلكترونيValid email field required
أرسل الوظائف
شارك هذه الوظيفة
أرسل لي وظائف مشابهة
حالة تأهب وظيفة
سيتم تحديثك بأحدث تنبيهات الوظائف عبر البريد الإلكترونيValid email field required
أرسل الوظائف
الوصف الوظيفي
JD:
Role: Sr / Lead Data Engineer
Experience: 5 to 8 years
Job Location : Hyderabad Work from Office
Mode of employment: Permanent
Notice period: Immediate to 15 days ONLY.
Skills and Responsibilities.
Strong programming skills in Python Scala or SQL as well as Pyspark.
Architect and implement data pipelines using Apache Spark for efficient data processing and transformation.
Develop and maintain data workflows using Apache Airflow to automate data pipeline orchestration and scheduling.
Create and optimize SQL queries for data extraction transformation and loading (ETL) processes.
Harness the power of Python for data manipulation scripting and automation.
Manage and optimize data storage and processing on AWS EMR Redshift and Azure Synapse.
Collaborate with teams to design and maintain Azure Data Factory (ADF) pipelines for data integration.
Leverage DBT for data modelling and version control ensuring data accuracy and consistency.
Integrate data from diverse sources using Fivetran ensuring seamless data ingestion.
Continuously improve data quality performance and reliability across the data ecosystem.
Monitor and troubleshoot data pipelines ensuring data availability and integrity.
Implement data security best practices and ensure compliance with data privacy regulations.
data,pipelines,apache,azure,processing,python,sql,skills,transformation,aws
نوع التوظيف
دوام كامل
المهارات المطلوبة
الإبلاغ عن هذه الوظيفة
إخلاء المسؤولية: د.جوب هو مجرد منصة تربط بين الباحثين عن عمل وأصحاب العمل. ننصح المتقدمين بإجراء بحث مستقل خاص بهم في أوراق اعتماد صاحب العمل المحتمل.
نحن نحرص على ألا يتم طلب أي مدفوعات مالية من قبل عملائنا، وبالتالي فإننا ننصح بعدم مشاركة أي معلومات شخصية أو متعلقة بالحسابات المصرفية مع أي طرف ثالث. إذا كنت تشك في وقوع أي احتيال أو سوء تصرف، فيرجى التواصل معنا من خلال تعبئة النموذج الموجود على الصفحة اتصل بنا
