Bantuan Proyek Big Data dan Optimalisasi Performa

Saya sedang mencari freelancer yang memiliki pengalaman kuat di bidang Big Data, Data Engineering, dan Performance Optimization untuk pendampingan sebuah proyek penelitian dan implementasi sistem analitik data skala besar.

Kebutuhan utama meliputi:

Analisis dan optimasi penyimpanan data skala besar.
Desain arsitektur data berbasis lakehouse.
Optimasi format penyimpanan kolumnar (Parquet, ORC, atau sejenisnya).
Compression, partitioning, clustering, dan data layout optimization.
Query performance tuning.
Benchmarking dan performance testing.
Analisis metrik performa seperti latency, throughput, storage footprint, bytes scanned/read, CPU dan memory utilization.
Penyusunan dokumentasi teknis dan analisis hasil pengujian.

Keahlian yang diharapkan:

Apache Spark
Delta Lake / Apache Iceberg
Trino / Presto / Spark SQL
Data Lakehouse Architecture
Big Data Storage Optimization
Data Pipeline dan Data Engineering
Benchmarking dan Performance Analysis

Nilai tambah apabila:

Pernah mengerjakan proyek riset atau publikasi ilmiah.
Berpengalaman melakukan eksperimen dan evaluasi performa sistem data skala besar.
Memahami metodologi penelitian kuantitatif dan eksperimental.

Silakan kirim:

Profil dan pengalaman yang relevan.
Portofolio proyek yang pernah dikerjakan.
Estimasi biaya dan skema kerja yang ditawarkan.

Saya mencari kerja sama jangka menengah dengan komunikasi yang baik dan kemampuan teknis yang kuat pada bidang Data Engineering dan Big Data.