Data Engineer

Deskripsi Pekerjaan

• Mendesain, menerapkan, dan mengelola end-to-end data pipeline (ETL, data streaming, dan warehousing) untuk memudahkan proses analisa data
• ETL Processing, Batch Processing, Cloud & Big Data Technologies
• Tools & Dashboarding, Query Optimization & Aggregation
• Membuat dan mengelola data warehouse untuk kebutuhan data reporting dan analisis
• Membangun integrasi dengan 3rd party API untuk mengakses data eksternal
• Membuat dan mengelola standarisasi metode data archiving

Requirement

• Memiliki minimal S1 di computer science atau IT
• Memiliki pengalaman minimal 2 tahun dalam menggunakan SQL, bash script, dan Phyton atau bahasa pemrograman serupa
• Memiliki pengalaman dalam membangun sistem pemrosesan data yang otomatis, scalable, dan robust
• Memiliki pengalaman dalam teknologi pemrosesan data real-time atau pubsub (Kafka), database SQL/NoSQL (i.e HBase, Elasticsearch, MySQL, HiveQL/Impala)
• Memahami statistik meliputi distribusi data, class label distribution, dan metode sampling
• Memiliki pengalaman dalam data warehousing dan data mining
• Berpengalaman dalam teknologi Hadoop (Spark, Hive, Impala) merupakan nilai lebih
• Memiliki keinginan dan kapabilitas untuk mempelajari teknologi baru secara cepat