Data Engineer

Secara sederhana Data Engineer adalah sebuah profesi membangun wadah saluran infrastruktur besar untuk data yang besar. Tugasnya mengembangkan, membangun, menguji dan memelihara arsitektur seperti database dan sistem pemrosesan data skala besar. Kumulan informasi yang disaring oleh sistem, seorang Data engineer dapat menarik data set yang relevan untuk di analisis.

Tanggung jawab Data Engineer

1. Merancang, membangun, menginstal, menguji dan memelihara sistem manajemen data yang sangat skalabel 
2. Memastikan sistem memenuhi persyaratan bisnis dan praktik industri 
3. Membangun kinerja algoritma, prototipe, model prediktif 
4. Meneliti Peluang untuk akuisisi data dan penggunaan riset baru untuk data yang ada
5. Mengembangkan proses data set untuk pemodelan data, penambangan dan produksi
6. Mengintegrasikan teknologi manajemen data baru dan alat rekayasa perangkat lunak ke dalam struktur yang ada
7. Membuat komponen perangkat lunak khusus (misalnya UDF khusus) dan aplikasi analitik 
8. Menggunakan berbagai bahasa dan alat (misalnya bahasa scripting) dan update disaster recovery
9. Merekomendasikan cara untuk meningkatkan keandalan, efisiensi, dan kualitas data 
10. Berkolaborasi dengan arsitek data, pemodel dan anggota tim TI tentang sasaran proyek

Cara Menjadi Data Engineer

1. Memiliki kemampuan dalam bidang ilmu komputer, teknik, matematika terapan, fisika atau statistik bidang terkait.
2. Memiliki Keahlian teknis sebagai data Engineer 
3. Statistical analysis and modeling
4. Database architectures
5. Hadoop-based technologies (e.g. MapReduce, Hive and Pig)
6. SQL-based technologies (e.g. PostgreSQL and MySQL)
7. NoSQL technologies (e.g. Cassandra and MongoDB)
8. Data modeling tools (e.g. ERWin, Enterprise Architect and Visio)
9. Python, C/C++ Java, Perl
10. MatLab, SAS, R
11. Data warehousing solutions
12. Predictive modeling, NLP and text analysis
13. Machine learning
14. Data mining
15. UNIX, Linux, Solaris and MS Windows

3. Memiliki Sertifikat kompetensi dalam bidang Data

Untuk sertifikasi kompetensi di dalam bidang ke"data"an misalnya, Microsoft, IBM, Cloudera, dll.)

Semoga bermanfaat, silahkan berbagi....

Share on :

Tweet