Ana Detaylar

Çalışma Türü: Tam zamanlı

Çalışan Türü: Çalışan

Ana Sorumluluklar:

• Python kullanarak Azure Databricks içinde veri işleme ve otomasyon için veri boru hatları ve iş akışları tasarlayın, geliştirin ve optimize edin.
• Databricks yüklerinin ölçeklenebilirlik, performans ve güvenlik gereksinimlerini destekleyen temel altyapının çalışmasını sağlamak için platform ekibiyle işbirliği yapın.
• ETL boru hatlarını sürdürün ve geliştirin; bunların verimli, güvenilir ve iş gereksinimlerini karşıladığından emin olun.
• Veri işleme, boru hattı hataları ve Databricks içindeki performans darboğazlarıyla ilgili konuları çözün ve giderin.
• Veri boru hatlarını hız, maliyet verimliliği ve performans için optimize etme stratejileri geliştirin ve uygulayın; iş hedefleriyle uyumlarını sağlayın.
• Azure ekosisteminde veri mimarisi, veri modelleri ve genel altyapının iyileştirilmesine katkıda bulunun.
• Azure Databricks içinde veri iş akışlarını ve veri depolama çözümlerini izlemek, sürdürmek ve ölçeklendirmek için çabaları yönlendirin.
• Veri bütünlüğünü sağlamak ve sistemler arasında düzgün akışı temin etmek amacıyla diğer veri mühendisleri, veri bilimcileri ve analistler ile işbirliği yapın.
• Veri mühendisliği ve bulut teknolojilerinde en son endüstri trendleri, araçlar ve en iyi uygulamalar hakkında güncel kalın.

Gereksinimler:

• 3+ yıl veri mühendisi olarak deneyim; bulut tabanlı ortamda, özellikle Azure'da veri boru hatları oluşturma ve optimize etme konusunda uzmanlık.
• Veri işleme betikleri geliştirmek ve iş akışlarını optimize etmek için Azure Databricks ve Python bilgisi.
• ETL süreçleri, veri boru hattı tasarımı, otomasyon ve hata ayıklama konularında deneyim.
• Databricks içinde Apache Spark ile uygulamalı deneyim; performans ayarlama ve optimizasyon dahil.
• Azure Data Lake, Azure SQL ve diğer Azure tabanlı veri depolama ve işleme hizmetleri bilgisi.
• Azure'daki bulut veri platformları hakkında güçlü bir anlayış; ağ, depolama, güvenlik ve performans dikkate alındığında.
• Yüksek kaliteli veri çözümleri koordine etmek ve sunmak için çapraz fonksiyonlu ekiplerde etkili bir şekilde çalışma yeteneği.
• Veri iş akışlarıyla ilgili sorunları tanımlama ve çözme yeteneği ile mükemmel problem çözme ve analitik beceriler.
• Farklı takımlarla etkili bir şekilde işbirliği yapma yeteneği ile güçlü iletişim becerileri; hem teknik hem de teknik olmayan.

Lütfen iş tanımına bakın.