Big Data Engineering

Deskripsi

Data Engineering merupakan salah satu keterampilan yang paling dicari saat ini, terutama di era yang serba data. Peran dan tanggung jawab data engineer menjadi sangat penting, karena kualitas data bergantung pada kinerja data engineer.

Pelatihan ini dirancang untuk memberikan pengetahuan dan keterampilan yang dibutuhkan oleh seorang data engineer, dalam mendukung pengambilan keputusan berbasis data, khususnya bagaimana memproses dan mentransformasi data. Pelatihan ini mencakup prinsip data engineering, pengenalan berbagai tools dan platform big data yang diperlukan dalam mendesain, membangun dan memaintain sebuah sistem pemrosesan data.

Peserta

• Software developer
• Data analyst
• BI developer
• Everyone who has experiences in IT industry and want to develop careers as data engineer

Prasyarat

• Tidak ada persyaratan teknis khusus untuk kursus ini, peserta setidaknya harus familier dengan komputer.
• Pengalaman sebelumnya dengan SQL atau pemrosesan data akan sangat membantu.

Apa saja yang dipelajari?

Pada akhir pelatihan ini, peserta akan memiliki pengetahuan dan keterampilan untuk:

• Memahami konsep data warehouse
• Menyimpan dan mengakses data dalam HDFS
• Mengakses data menggunakan Apache Hive
• Memahami konsep MapReduce
• Memproses data menggunakan Python dan Apache Spark
• Menggukan HGrid247 DE untuk pengolahan data
• Orkestrasi proses menggunakan Apache Airflow
• Memproses data secara realtime menggunakan Spark Streaming