Data Engineer Spark
Bergabunglah dengan Sharing Vision Indonesia di Jakarta Raya untuk menjadi Data Engineer Spark yang ahli dalam streaming. Kami adalah perusahaan teknologi yang berfokus pada solusi inovatif untuk industri perbankan. Di sini, Anda akan bekerja pada proyek-proyek menarik yang memanfaatkan Apache Spark untuk memproses data secara real-time. Jika Anda memiliki pengalaman dalam pengembangan dan optimasi pipeline data, kami siap memberikan Anda tantangan yang menarik.
Sebagai Data Engineer Spark, Anda akan berkolaborasi dengan tim kami untuk membangun dan memelihara sistem yang dapat menangani volume data besar dengan efisiensi tinggi. Anda akan menggunakan berbagai alat dan teknologi terkini untuk memastikan kualitas dan kecepatan data yang optimal. Dengan lingkungan kerja yang dinamis dan dukungan tim yang solid, ini adalah kesempatan yang tepat untuk mengembangkan keterampilan Anda dalam dunia teknologi data.
📋 Tanggung Jawab Pekerjaan
- Membangun dan memelihara pipeline data yang menggunakan Apache Spark untuk streaming data.
- Mengembangkan dan mengoptimalkan kode Spark untuk meningkatkan kinerja dan efisiensi.
- Mengintegrasikan berbagai sumber data dan sistem untuk memastikan aliran data yang lancar.
- Menulis dan menjalankan unit test serta integrasi test untuk memastikan kualitas kode.
- Mengoptimalkan query dan operasi database untuk meningkatkan performa sistem.
- Monitoring dan troubleshooting sistem secara proaktif untuk memastikan ketersediaan dan kinerja yang optimal.
- Bekerja sama dengan tim untuk memahami kebutuhan bisnis dan menerjemahkannya menjadi solusi teknis.
- Mendokumentasikan proses dan solusi untuk memastikan pemeliharaan dan pemahaman yang lebih baik di masa depan.
🎓 Kualifikasi & Syarat
- Pengalaman minimal 3 tahun dalam pengembangan perangkat lunak atau pengolahan data.
- Pengalaman dalam menggunakan Apache Spark untuk pemrosesan data streaming.
- Kemampuan dalam menulis kode Scala atau Python untuk pengembangan Spark.
- Pengalaman dengan alat dan framework seperti Kafka, Flink, atau Spark Streaming.
- Pemahaman yang kuat tentang konsep-konsep database dan SQL.
- Pengalaman dengan alat CI/CD dan sistem manajemen versi seperti Git.
- Pendidikan minimal Sarjana dalam Teknik Informatika, Ilmu Komputer, atau bidang terkait.
- Kemampuan untuk bekerja dalam tim dan berkomunikasi efektif dengan berbagai stakeholder.
🛠️ Keahlian
Kirim lamaran sekarang sebelum batas waktu.🚀 Lamar Sekarang