Peran dan Tanggung Jawab

• Mendesain, mengembangkan, dan memelihara pipeline data dan alur kerja ETL yang dapat diskalakan.
• Bekerja dengan dataset besar dan memastikan pengambilan, transformasi, dan penyimpanan data yang efisien.
• Mengoptimalkan arsitektur data untuk kinerja, keandalan, dan skalabilitas.
• Mengembangkan dan memelihara skrip berbasis Python untuk otomatisasi dan pemrosesan data.
• Bekerja dengan basis data relasional dan NoSQL.
• Mengintegrasikan data dari berbagai sumber, termasuk API, penyimpanan awan, dan platform streaming.
• Memantau pipeline data, menyelesaikan masalah kinerja, dan memastikan integritas data.
• Bekerja sama dengan ilmuwan data dan analis untuk mendukung proyek pembelajaran mesin dan analitik.
• Menerapkan tata kelola data, keamanan, dan praktik terbaik kepatuhan.

Keterampilan dan Kualifikasi yang Diperlukan:

• Pengalaman 3+ tahun dalam rekayasa data.
• Kemampuan kuat dalam Python untuk pemrosesan dan otomatisasi data.
• Pengalaman dengan kerangka ETL.
• Pemahaman yang solid tentang basis data SQL dan NoSQL.
• Pengalaman dengan teknologi big data

Silakan lihat deskripsi pekerjaan.