Terbuka untuk peluang Data Engineering & AI

RD. Galih
Rakasiwi.

Data Engineer · AI Native Team

Data Engineer dengan pengalaman membangun pipeline data end-to-end, sistem ekstraksi skala besar, dan API data untuk kebutuhan analitik serta produk berbasis AI.

140+
Repositori & proyek
100+
Crawler produksi
25+
Sumber pemerintah & institusi
500K+
Record diproses per hari

Selected Work

Proyek Pilihan

Representasi karya terpilih dari pengalaman membangun sistem data. Studi kasus; kode internal tidak dipublikasikan.

Data API · Stateless

OWID Global Data API

Proxy REST tanpa database untuk Our World in Data: 30+ topik global (demografi, iklim, ekonomi, kesehatan) dengan output siap dipakai untuk RAG dan LLM.

PythonRESTMCP Gateway
Live on Apify Store

LinkedIn Job Market API

Scraper lowongan LinkedIn tanpa login: data lowongan, estimasi gaji, analisis skill, dan pencocokan jurusan. Live dan bisa dipakai langsung dari Apify Store.

5–10× fast mode
Pay per result
PythonApifyWeb Scraping
Backend · Full-stack Data

Property Booking Platform

Backend platform booking properti dengan NestJS, TypeORM, dan PostgreSQL. Diisi data nyata hasil crawling Airbnb Bandung — 77 properti dan 77 tipe kamar dengan harga dan rating aktual.

NestJSTypeScript PostgreSQLTypeORM
Crawler Engine

Smart Crawler Engine — BPS

Engine crawling asinkron dengan Playwright + Beanstalkd untuk tabel statistik BPS. Arsitektur pusher → queue → worker → Elasticsearch dengan akurasi transfer 99,9%.

99,9% success rate
Async queue-based
PythonPlaywright BeanstalkdElasticsearch
Crawler Ecosystem

Social Media Crawler Suite

Crawler modular untuk Twitter/X, Instagram, TikTok, dan YouTube, dilengkapi layanan token pool terpusat untuk autentikasi dan rotasi kredensial — satu arsitektur yang konsisten, mudah diskalakan, dan dipakai bersama.

4 platform
1 token manager terpusat
More work
Bisnis.com Crawler
Crawler artikel dengan bypass Cloudflare (cloudscraper + FlareSolverr), output JSON terstruktur.
Dynamic Data Pipeline Engine
Pipeline berbasis konfigurasi JSON — validasi, antrean Beanstalkd, cache Redis, indeks Elasticsearch. >500K record/hari.
Internal · 2024
LinkedIn Jobs Explorer Dashboard
Dashboard Streamlit untuk eksplorasi lowongan berdasarkan kata kunci, skill, dan jurusan.
Private · 2026

Experience

Pengalaman Profesional

AI Native Team · eBdesk
Oktober 2026 — Sekarang
  • Mengembangkan agent dan layanan AI-native untuk otomatisasi akuisisi serta pemrosesan data.
  • Membangun komponen browser agent, scraper generator, dan MCP gateway untuk kebutuhan internal.
Data Engineer · eBdesk
Januari 2026 — September 2026
  • Merancang Dynamic Data Pipeline Engine berbasis konfigurasi JSON untuk memangkas modifikasi kode integrasi dan mengotomatiskan validasi data ke Elasticsearch.
  • Mengoptimalkan ingestion data menggunakan Pandas, SQLAlchemy, dan s3fs menuju PostgreSQL serta Object Storage (S3).
  • Mengembangkan arsitektur awal MCP (FastMCP) dengan caching Redis/SSDB; meningkatkan efisiensi penyerapan data hingga 40% dan success rate transfer 99,9%.
Scraper Engineer · eBdesk
April 2024 — Desember 2025
  • Membangun infrastruktur social media scraping lintas platform: TikTok, Instagram, Facebook, Threads, Twitter, dan YouTube.
  • Merancang arsitektur Beanstalkd, Redis/SSDB, NSQ, dan Kafka untuk memproses >500.000 data per hari ke Elasticsearch.
  • Melakukan network interception dengan Burp Suite dan Genymotion; menurunkan kegagalan ekstraksi sebesar 15%.
Freelance Onsite & Intern Scraper Engineer · eBdesk
Juli 2023 — April 2024
  • Mengoptimalkan query PostgreSQL dan logika penjelajahan backend; mempercepat pemrosesan data sebesar 25%.
  • Mengembangkan skrip ekstraksi BS4 dan Requests untuk puluhan situs klien; memperluas cakupan data sebesar 20%.

Stack

Keahlian Teknis

Bahasa Pemrograman

PythonSQL BashTypeScript

Data Engineering

ETL / ELTData Modeling Data LakeIngestion Engine

Pipeline & Queue

Apache KafkaNSQ BeanstalkdCron

Database & Storage

PostgreSQLElasticsearch RedisSSDB MongoDBAWS S3

Infrastruktur

DockerKubernetesGit

Ekstraksi & Reverse Engineering

PlaywrightBeautifulSoup RequestsCloudscraper FlareSolverrBurp SuiteGenymotion

Backend & API

FastAPINestJS StreamlitFastMCP Apify ActorsPandasSQLAlchemy

AI Native

LLM AgentsBrowser Automation MCPAPI siap RAG

Pendidikan & Sertifikasi

  • S1 Sistem Informasi — Universitas Terbuka2025 — sekarang
  • Rekayasa Perangkat Lunak — SMK Negeri 4 PadalarangLulus 2024
  • Junior Web Developer — BNSPSertifikasi 2024

Contact

Mari Berdiskusi

Terbuka untuk diskusi seputar arsitektur data, otomasi sistem, maupun peluang karier di bidang Data Engineering dan AI.