Detail Utama

Tipe Waktu: Penuh waktu

Tipe Pekerja: Karyawan

Tujuan dari peran ini adalah untuk mendorong pengiriman artefak bangunan yang efisien dan memberikan kepemimpinan teknis dalam desain, pengembangan, dan penerapan platform QBE.

• Pimpin desain, pengembangan, dan optimasi aliran data dan alur kerja dalam Azure Databricks menggunakan Python.
• Bekerja sama dengan tim platform untuk memastikan penyesuaian sumber daya, protokol keamanan, dan skalabilitas yang tepat untuk lingkungan Databricks.
• Arsitek, mengimplementasikan, dan memelihara saluran ETL yang dioptimalkan, memastikan bahwa mereka dapat diandalkan, skalabel, dan efisien.
• Bekerja sama dengan pemangku kepentingan untuk memahami persyaratan bisnis dan mendesain solusi data yang memenuhi kebutuhan mereka.
• Memberikan kepemimpinan teknis kepada insinyur data junior, membimbing mereka dalam praktik terbaik untuk desain saluran data, pemrosesan data, dan optimasi Databricks.
• Koordinasi dengan tim platform untuk memastikan ketersediaan, keandalan, dan kinerja infrastruktur dasar.
• Memimpin upaya pemecahan masalah dan pemecahan masalah terkait pemrosesan data dan kegagalan saluran, memastikan waktu henti minimal.
• Memantau kinerja saluran data dan menerapkan strategi optimasi untuk meningkatkan waktu pemrosesan, mengurangi biaya, dan meningkatkan efisiensi platform secara keseluruhan.
• Bekerja sama dengan arsitek data dan insinyur untuk mengembangkan model data yang dapat diintegrasikan dengan lancar dengan Databricks.
• Mempertahankan pengetahuan terbaru tentang praktik terbaik dan teknologi baru dalam rekayasa data, terutama dalam ekosistem Azure.

Persyaratan:

• 5+ tahun pengalaman dalam rekayasa data dengan fokus pada pembangunan dan optimasi saluran data.
• Pengalaman kuat dengan Azure Databricks dan kemampuan untuk memimpin dan mengoptimalkan alur kerja kompleks dalam lingkungan ini.
• Keahlian dalam Python untuk pemrosesan data, pengembangan saluran, dan otomasi.
• Pengalaman dengan Azure Data Lake, Azure SQL, dan solusi penyimpanan dan pemrosesan data lainnya dalam Azure.
• Memahami proses ETL secara mendalam, termasuk desain saluran, otomasi, dan pemecahan masalah.
• Pengalaman langsung dengan Databricks Delta Lake, Apache Spark, dan penyetelan kinerja di Databricks.
• Keterampilan dalam infrastruktur awan (Azure), termasuk pertimbangan jaringan, penyimpanan, dan keamanan.
• Kemampuan untuk berkolaborasi dan berkomunikasi secara efektif dengan tim lintas fungsional, termasuk tim platform, untuk memastikan keselarasan dan pengiriman yang berhasil.
• Keterampilan pemecahan masalah dan pemecahan masalah yang kuat, terutama yang terkait dengan kinerja dan kegagalan saluran data.
• Keterampilan komunikasi dan kepemimpinan yang sangat baik, dengan kemampuan untuk membimbing dan membina insinyur junior.

Kualifikasi yang Diutamakan:

• Pengalaman dengan praktik DevOps dan saluran CI/CD untuk alur kerja rekayasa data.
• Keterampilan dalam Azure Synapse Analytics, Azure Data Factory, dan layanan data berbasis Azure lainnya.
• Pengalaman bekerja dalam lingkungan Agile dengan pemahaman terhadap alat manajemen proyek.

Keterampilan:

Kemampuan Komunikasi,Pemikiran Kritis,Layanan Pelanggan,Sistem Keuangan,Kolaborasi yang Sadar,Manajemen Kinerja,Peningkatan Proses,Sistem Manajemen Basis Data Relasional (RDBMS),Manajemen Risiko,Pengembangan Perangkat Lunak,Metodologi Siklus Hidup Pengembangan Perangkat Lunak (SDLC),Manajemen Pemangku Kepentingan,Kepemimpinan Strategis,Manajemen Tim,Model Air Terjun

Cara Mengajukan Permohonan:

Untuk mengajukan permohonan Anda, klik "Terapkan" dan ikuti proses langkah demi langkah.

Peluang Kerja yang Setara:

QBE adalah pemberi kerja yang setara dan diharuskan untuk mematuhi peraturan perundang-undangan kesempatan kerja yang setara di setiap yurisdiksi tempat ia beroperasi.

Silakan merujuk ke deskripsi pekerjaan.