Butiran Utama

Jenis Masa: Sepenuh masa

Jenis Pekerja: Pekerja

Tujuan peranan ini adalah untuk memacu penghantaran yang efisien bagi artefak binaan dan memberikan kepimpinan teknikal dalam reka bentuk, pembangunan, dan pengedaran platform QBE.

• Pimpin reka bentuk, pembangunan, dan pengoptimuman saluran data dan aliran kerja dalam Azure Databricks menggunakan Python.
• Berkolaborasi dengan pasukan platform untuk memastikan penyelarasan sumber yang betul, protokol keselamatan, dan kebolehan skala untuk persekitaran Databricks.
• Reka bentuk, laksanakan, dan kekalkan saluran ETL yang dioptimumkan, memastikan ia boleh dipercayai, boleh dikembangkan, dan efisien.
• Bekerja rapat dengan pemegang kepentingan untuk memahami keperluan perniagaan dan merancang penyelesaian data yang memenuhi keperluan mereka.
• Memberikan kepimpinan teknikal kepada jurutera data junior, membimbing mereka dalam amalan terbaik untuk reka bentuk saluran data, pemprosesan data, dan pengoptimuman Databricks.
• Koordinasi dengan pasukan platform untuk memastikan ketersediaan, kebolehpercayaan, dan prestasi infrastruktur asas.
• Pimpin usaha penyelesaian masalah dan troubleshooting yang berkaitan dengan pemprosesan data dan kegagalan saluran, memastikan waktu henti yang minima.
• Monitor prestasi saluran data dan laksanakan strategi pengoptimuman untuk meningkatkan masa pemprosesan, mengurangkan kos, dan meningkatkan efisiensi platform secara keseluruhan.
• Berkolaborasi dengan arkitek data dan jurutera untuk membangunkan model data yang boleh diintegrasikan tanpa masalah dengan Databricks.
• Memastikan pengetahuan terkini mengenai amalan terbaik dan teknologi yang sedang berkembang dalam kejuruteraan data, terutama dalam ekosistem Azure.

Keperluan:

• 5+ tahun pengalaman dalam kejuruteraan data dengan fokus pada membangunkan dan mengoptimumkan saluran data.
• Pengalaman yang kukuh dengan Azure Databricks dan kemampuan untuk memimpin dan mengoptimumkan aliran kerja yang kompleks dalam persekitaran ini.
• Kemahiran dalam Python untuk pemprosesan data, pembangunan saluran, dan automasi.
• Pengalaman dengan Azure Data Lake, Azure SQL, dan penyelesaian penyimpanan dan pemprosesan data lain dalam Azure.
• Pemahaman mendalam tentang proses ETL, termasuk reka bentuk saluran, automasi, dan troubleshooting.
• Pengalaman langsung dengan Databricks Delta Lake, Apache Spark, dan penalaan prestasi dalam Databricks.
• Kefahaman mengenai infrastruktur awan (Azure), termasuk pengkomputeran rangkaian, penyimpanan, dan pertimbangan keselamatan.
• Kemampuan untuk berkolaborasi dan berkomunikasi secara efektif dengan pasukan pelbagai fungsi, termasuk pasukan platform, untuk memastikan penyelarasan dan penghantaran yang berjaya.
• Kemahiran penyelesaian masalah dan troubleshooting yang kuat, terutama yang berkaitan dengan prestasi saluran data dan kegagalan.
• Kemahiran komunikasi dan kepimpinan yang cemerlang, dengan kemampuan untuk membimbing dan mengarahkan jurutera junior.

Kelayakan Tambahan:

• Pengalaman dengan amalan DevOps dan saluran CI/CD untuk aliran kerja kejuruteraan data.
• Kefahaman mengenai Azure Synapse Analytics, Azure Data Factory, dan perkhidmatan data berasaskan Azure lain.
• Pengalaman bekerja dalam persekitaran Agile dengan kefahaman tentang alat pengurusan projek.

Kemahiran:

Komunikasi,Pemikiran Kritis,Perkhidmatan Pelanggan,Sistem Kewangan,Kolaborasi yang Sengaja,Mengurus Prestasi,Pembaikan Proses,Sistem Pengurusan Pangkalan Data Relasional (RDBMS),Pengurusan Risiko,Pembangunan Perisian,Metodologi Kitar Hayat Pembangunan Perisian (SDLC),Pengurusan Pemegang Kepentingan,Kepimpinan Strategik,Pengurusan Pasukan,Model Air Terjun

Cara Memohon:

Untuk menghantar permohonan anda, klik "Memohon" dan ikut proses langkah demi langkah.

Peluang Pekerjaan yang Sama:

QBE adalah majikan yang memberikan peluang yang sama dan diwajibkan untuk mematuhi perundangan peluang pekerjaan yang sama di setiap bidang kuasa di mana ia beroperasi.

Sila rujuk kepada deskripsi pekerjaan.