Di kuartal I 2026, sebuah toko fashion WordPress dengan 18.000 SKU kehilangan crawl budget karena filter warna, ukuran, dan harga menghasilkan puluhan ribu URL kombinasi. Google Search Console menampilkan lonjakan “Discovered – currently not indexed”, sementara halaman produk inti jarang di-crawl. Artikel how-to ini merangkum langkah yang kami terapkan di situs klien tersebut—bukan teori abstrak, melainkan urutan kerja yang terukur.
Latar studi kasus: apa yang rusak?
Situs memakai WooCommerce + plugin filter AJAX. Setiap klik filter menambah query string seperti ?filter_color=navy&min_price=150000&orderby=price. Dalam 30 hari, log server merekam ± equasi 42.000 path unik, padahal sitemap XML hanya berisi 19.200 URL kanonis. Crawl stats GSC: bot menghabiskan 68% hit ke parameter filter, TTFB rata-rata 1,1 detik di edge, dan indeks produk baru turun dari 94% menjadi 71%.
Langkah 1: Audit parameter di GSC dan log
Ekspor “Pages” + filter query string di GSC, lalu silangkan dengan access log 14 hari. Tandai parameter yang muncul >500 kali tanpa traffic organik: filter_*, orderby, min_price, max_price, utm_* residual. Di kasus ini, enam parameter menyumbang 81% hit bot sia-sia.
Alat yang dipakai
- Google Search Console → Settings → Crawl stats + URL inspection sampel
- GoAccess / Cloudflare Logpush ke BigQuery untuk hit rate per path
- Screaming Frog mode list + “Remove URL Parameters” untuk hitung near-duplicate
Langkah 2: Putuskan mana yang boleh diindeks
Aturan bisnis: hanya kombinasi yang punya demand pencarian (misalnya “sepatu lari pria size 42”) boleh diindeks. Sisanya noindex,follow atau diblok di robots. Buat matriks 2×2: volume pencarian internal vs konversi historis. Klien menyetujui 120 landing filter “evergreen”; sisanya dikunci.
Langkah 3: Canonical + meta robots dinamis
Di functions.php (child theme) atau mu-plugin, deteksi query filter. Jika kombinasi tidak ada di whitelist:
- Set rel=canonical ke URL kategori bersih tanpa query
- Inject meta name=”robots” content=”noindex,follow”
Setelah deploy, 24 jam kemudian sampling 50 URL filter di URL Inspection: canonical mengarah benar, status “URL is not on Google” sesuai harapan.
Langkah 4: robots.txt dan parameter handling
Tambahkan baris selektif (bukan Disallow blanket yang memotong JS penting):
Disallow: /*?orderby=
Disallow: /*?min_price=
Disallow: /*?max_price=
Parameter filter_color yang whitelisted dibiarkan; yang lain diarahkan lewat rewrite ke path statis atau dibiarkan noindex. Hindari memblok seluruh ? agar tidak merusak preview admin dan payment callback.
Langkah 5: Ubah UX filter ke path atau hash terkontrol
Tim front-end memindahkan filter populer ke pretty URL: /kategori/sepatu-lari/warna-navy/ dengan template arsip kustom dan judul unik. Filter sekunder (harga slider) memakai History API + # agar tidak membuat state server baru. Hasil lab: LCP mobile tetap 1,8 s karena HTML awal tidak membengkak.
Langkah 6: Monitor 28 hari dan rapikan sitemap
Sitemap hanya memuat URL kanonis + 120 landing filter. Jadwalkan crawl Screaming Frog mingguan; target orphan/parameter <3% dari total discovered. Di akhir minggu ke-4 studi kasus:
- Hit bot ke parameter turun 76%
- Produk baru terindeks dalam median 3 hari (sebelumnya 11 hari)
- Klik organik kategori +18% MoM tanpa lonjakan bounce
- “Crawled – currently not indexed” turun dari 9.400 ke 2.100 URL
Checklist ringkas untuk situs WP lain
- Petakan semua query string filter/sort/paginate
- Whitelist landing yang benar-benar dicari pengguna
- Canonical + noindex untuk sisanya; jangan andalkan robots.txt saja
- Pretty URL untuk facet bernilai SEO; hash/AJAX untuk facet sekunder
- Sitemap bersih; pantau GSC crawl stats 4 minggu
Faceted navigation tetap krusial untuk UX toko besar di 2026, tetapi tanpa kontrol parameter WordPress mudah menjadi mesin pembuat URL sampah. Enam langkah di atas membuktikan bahwa menutup kebocoran crawl budget bisa dilakukan bertahap, terukur, dan tanpa mengorbankan konversi—asal keputusan indeks didasarkan data, bukan spekulasi plugin default.




