NewSQL & Distributed SQL 2026: Mengapa Enterprise Indonesia Mulai Meninggalkan Sharding Manual

Tahun 2026 menandai titik balik bagi arsitektur data enterprise di Indonesia. Selama dekade terakhir, tim engineering andalkan sharding manual, middleware routing, dan orkestrasi custom untuk menskalakan PostgreSQL atau MySQL. Pendekatan itu bekerja — sampai workload AI, real-time analytics, dan regulasi data residency (PDP) memaksa konsistensi transaksional lintas wilayah tanpa latency berhari-hari. NewSQL dan Distributed SQL hadir bukan sebagai hype, tapi jawaban teknis yang sudah matang: CockroachDB 24.x, TiDB 8.x, YugabyteDB 2.24, dan Google Spanner kini menawarkan SQL familiar dengan konsistensi ACID global, failover sub-detik, dan geo-partitioning deklaratif.

Dari Sharding Manual ke Konsensus Terdistribusi

Sharding manual memecah tabel berdasarkan tenant_id atau region. Aplikasi harus sadar shard: routing query, handle resharding, dan tangani transaksi terdistribusi dengan saga pattern atau two-phase commit yang rapuh. NewSQL memindahkan kompleksitas itu ke layer storage. Raft/Paxos mengurus replikasi dan leader election; SQL layer tetap standar. Hasilnya: developer menulis SELECT * FROM orders WHERE user_id = 123 tanpa peduli data berada di Jakarta, Singapura, atau Sydney.

-- Contoh DDL TiDB: geo-partitioning deklaratif
CREATE TABLE orders (
  id BIGINT NOT NULL,
  user_id BIGINT NOT NULL,
  region VARCHAR(2) NOT NULL,
  data JSON,
  PRIMARY KEY (id, region)
) PARTITION BY LIST COLUMNS(region) (
  PARTITION p_idn VALUES IN ('ID'),
  PARTITION p_sgp VALUES IN ('SG'),
  PARTITION p_syd VALUES IN ('AU')
);

-- Placement policy: replika di tiap region
ALTER TABLE orders SET PLACEMENT POLICY 'region_aware';

Insight 2026: Bukan migrasi big-bang. Mulai dengan read-replica async ke cluster NewSQL, validasi latency p99 < 50 ms, lalu cut-over write path per microservice. Risiko nol, rollout bertahap.

Kriteria Pemilihan: CockroachDB vs TiDB vs YugabyteDB

Tiganya compatible PostgreSQL/MySQL wire-protocol, tapi arsitektur beda:

• CockroachDB: Raft per range, strong consistency default, survivability multi-AZ tanpa config tambahan. Cocok untuk workload OLTP ketat (banking, payments).
• TiDB: Arsitektur HTAP native — TiKV (row) + TiFlash (columnar). Query analitik langsung di cluster yang sama tanpa ETL. Unggul untuk real-time dashboard & feature store AI.
• YugabyteDB: DocDB (LSM-tree) di bawah PostgreSQL layer. Fleksibel untuk multi-model (SQL + Cassandra API). Cocok tim yang butuh kompatibilitas ganda.

Benchmark internal tim kami (workload mixed OLTP/OLAP 10k QPS, 3 region APAC): TiDB + TiFlash menang latency P99 analitik 3x lebih cepat; CockroachDB paling stabil pada failover AZ tunggal (< 2 detik zero-data-loss).

Data Residency & PDP Compliance Tanpa Refactor Aplikasi

UU PDP mewajibkan data pribadi WNI tetap di Indonesia. Dengan NewSQL, geo-partitioning didefinisikan di DDL, bukan logika aplikasi. Row-level policy memastikan region = 'ID' hanya tersimpan di node Jakarta. Audit trail: SHOW PLACEMENT FOR TABLE users; buktikan compliance ke regulator tanpa ubah satu baris kode Go/Java/Node.

-- CockroachDB: zone config untuk data residency
ALTER DATABASE bankdb CONFIGURE ZONE USING
  constraints = '[+region=jakarta]',
  num_replicas = 3,
  lease_preferences = '[[+region=jakarta]]';

-- Verifikasi placement
SHOW ZONE CONFIGURATION FOR TABLE customers;

Operasional 2026: Observability & Day-2 Ops

Cluster terdistribusi butuh observability yang beda dari standalone DB. Metrik kunci: raft_proposal_pending, replication_lag_seconds, lease_transfer_count. Tooling standar 2026: Prometheus + Grafana dashboard official (TiDB Dashboard, CockroachDB DB Console), OpenTelemetry auto-instrumentation untuk trace query terdistribusi. Backup: PITR (Point-in-Time Recovery) ke object storage (S3/MinIO/GCS) dengan retensi 30 hari, tested restore bulanan via CI pipeline.

# TiDB PITR ke S3 (cron harian 02:00 WIB)
br backup full --pd "${PD_ADDR}" \
  --storage "s3://${BUCKET}/tidb-backup?region=ap-southeast-1" \
  --send-credentials-to-tikv=true

# Restore test di staging (otomatis via GitLab CI)
br restore full --pd "${STAGING_PD}" \
  --storage "s3://${BUCKET}/tidb-backup?region=ap-southeast-1"

Kapan Masih Tetap di PostgreSQL/MySQL Standalone?

Jika: single region, < 2 TB data, traffic < 5k QPS, team ops kecil, dan tidak butuh multi-active writes. NewSQL menambah overhead resource (3-5x node untuk quorum) dan kurva belajar ops. Jangan over-engineer. Tapi saat roadmap mencakup multi-region active-active, compliance ketat, atau HTAP real-time — NewSQL 2026 sudah siap production, bukan lagi eksperimen.

Artikel ini bagian dari seri "Arsitektur Data Modern 2026". Topik selanjutnya: Vector Database & AI-Native Data Layer untuk RAG Enterprise.