EVALUASI PERBANDINGAN AKURASI MODEL GEMINI 2.5 PRO DAN GEMINI 2.5 FLASH DALAM EKSTRAKSI DATA KARTU KELUARGA INDONESIA (Studi Kasus: PT Puskomedia Indonesia Kreatif, Purwokerto)

Optical Character Recognition (OCR) berbasis Large Multimodal Model (LMM) menawarkan paradigma baru untuk ekstraksi data terstruktur dari dokumen resmi. Penelitian ini melakukan evaluasi komparatif performa dua model Google Gemini 2.5, yaitu Gemini 2.5 Pro dan Gemini 2.5 Flash, dalam tugas OCR untuk ekstraksi data terstruktur Kartu Keluarga (KK) Indonesia pada konteks aplikasi SmartGovt milik PT Puskomedia Indonesia Kreatif (Puskomedia). Untuk memenuhi prinsip perlindungan data pribadi sebagaimana diamanatkan UU Nomor 23 Tahun 2006 tentang Administrasi Kependudukan dan UU Nomor 27 Tahun 2022 tentang Perlindungan Data Pribadi, dataset disusun secara sintetis: 243 record KK fiktif di-generate dalam format JSON, dirender ke template HTML KK Indonesia melalui Playwright, kemudian diperluas dengan tujuh augmentasi visual (rotasi, perspektif, gelap, terang, blur, kompresi JPEG, dan resolusi rendah) sehingga total dataset evaluasi mencapai 1.944 gambar. Variabel penelitian mencakup 9 field header dan 14 field anggota per individu. Metrik evaluasi yang digunakan adalah Exact Match Accuracy, Character Error Rate (CER), Word Error Rate (WER), serta akurasi field kritis NIK 16 digit dan Nomor KK. Uji signifikansi menggunakan Wilcoxon Signed-Rank Test pada taraf alpha=0,05 dengan effect size rank-biserial correlation. Hasil penelitian menunjukkan bahwa Gemini 2.5 Pro mencapai Exact Match Accuracy 99,90%, CER 0,03%, dan WER 0,09%, sedangkan Gemini 2.5 Flash hanya mencapai 56,91%, 39,58%, dan 46,14%. Akurasi NIK Pro mencapai 100,00% sedangkan Flash hanya 46,90%. Uji Wilcoxon menghasilkan p < 0,001 dengan rank-biserial r = -0,9994 (effect size sangat besar). Analisis lebih lanjut mengungkap bahwa Gemini 2.5 Flash menunjukkan failure mode khas berupa fabrikasi data pada gambar bersih, anchoring prior knowledge geografis, dan ketidakstabilan jumlah anggota keluarga (halusinasi dan omisi). Kesimpulan: Gemini 2.5 Pro layak direkomendasikan sebagai model utama untuk implementasi OCR KK pada SmartGovt, sedangkan pada dataset sintetis terkontrol ini Gemini 2.5 Flash menunjukkan ketidaksiapan substansial; generalisasi ke KK fisik memerlukan validasi lanjutan.