Sitemap generator: pilihan alat dan cara membuat sitemap XML

Sitemap generator adalah alat yang menyusun daftar URL situs menjadi berkas sitemap, biasanya format XML, supaya mesin pencari lebih mudah menemukan halaman Anda. Pilihan terbaik jarang berupa alat online: Google sendiri menyebut cara paling baik adalah membuat sitemap langsung dari software website Anda, sehingga berkasnya selalu mengikuti isi situs.

Artikel ini fokus pada satu pertanyaan praktis, yaitu alat mana yang sebaiknya Anda pakai dan bagaimana memastikan hasilnya benar. Kalau Anda masih perlu memahami konsepnya, baca dulu pengertian sitemap dan jenis-jenisnya, lalu kembali ke sini untuk memilih alatnya.

Empat jenis sitemap generator

Semua generator menghasilkan berkas yang mirip, tetapi cara mendapatkan daftar URL-nya berbeda. Perbedaan itulah yang menentukan apakah sitemap Anda tetap akurat bulan depan.

1. Bawaan CMS atau plugin. Daftar URL diambil dari database situs, jadi sitemap berubah sendiri saat Anda menerbitkan atau menghapus halaman. Contohnya sitemap bawaan WordPress, Yoast SEO, dan Rank Math.
2. Integrasi framework. Sitemap dibuat saat situs di-build. Situs statis memakai jalur ini, misalnya paket resmi @astrojs/sitemap untuk Astro.
3. Crawler desktop. Software menjelajahi situs seperti mesin pencari, lalu mengekspor hasilnya. Screaming Frog SEO Spider adalah contoh yang paling sering dipakai saat audit.
4. Alat online. Anda memasukkan domain, layanan menjelajahi situs dari luar, lalu Anda mengunduh berkasnya. XML-Sitemaps.com termasuk kelompok ini.

Dua jenis pertama bersifat otomatis, dua jenis terakhir menghasilkan potret pada satu waktu. Untuk situs yang rutin menerbitkan konten, potret seperti ini cepat basi. Halaman baru tidak masuk, sementara halaman yang sudah dihapus masih tercantum sampai Anda membuat ulang berkasnya.

Batas pada tabel berasal dari halaman resmi tiap alat saat artikel ini disusun. Harga dan kuota alat pihak ketiga bisa berubah, jadi periksa lagi sebelum membeli lisensi.

Batas dan aturan yang harus dipatuhi generator mana pun

Alat apa pun yang Anda pilih, hasilnya harus memenuhi aturan yang sama. Dokumentasi Google merangkum aturan yang paling sering terlewat: ukuran, lokasi berkas, dan bentuk URL.

Berikut yang perlu Anda cek pada hasil generator:

• Ukuran. Satu sitemap dibatasi 50 MB tanpa kompresi atau 50.000 URL. Lebih dari itu, pecah menjadi beberapa berkas dan kumpulkan dalam sitemap index.
• Encoding. Berkas harus UTF-8.
• URL absolut. Tulis alamat lengkap seperti https://www.example.com/mypage.html, bukan /mypage.html.
• Lokasi. Tanpa pengiriman lewat Search Console, sitemap hanya berlaku untuk turunan folder tempatnya berada. Karena itu, Google menyarankan menaruhnya di root situs.
• URL yang ingin tampil saja. Masukkan URL yang ingin Anda tampilkan di hasil pencarian, yaitu versi canonical, bukan semua variasi alamat.

Satu hal lagi sering membuang waktu. Banyak generator menawarkan pengaturan priority dan changefreq, padahal dokumentasi Google menyatakan kedua nilai itu diabaikan. Yang dipakai adalah lastmod, dan hanya kalau nilainya konsisten serta bisa dibuktikan akurat. Google juga menjelaskan bahwa perubahan tahun hak cipta di footer tidak termasuk pembaruan yang berarti. Generator yang mengisi lastmod dengan tanggal hari ini untuk semua halaman justru membuat sinyal itu tidak berguna.

Sitemap generator online: cepat, tetapi tidak merawat dirinya sendiri

Alat online cocok saat Anda butuh sitemap dalam beberapa menit untuk situs kecil yang tidak punya generator bawaan, misalnya situs HTML lama. Cara kerjanya sederhana: masukkan domain, tunggu penjelajahan selesai, lalu unduh berkas XML.

Halaman XML-Sitemaps.com menyebut versi gratisnya sampai 500 halaman tanpa pendaftaran. Pembaruan otomatis dan situs dengan ukuran berapa pun ada pada paket berbayar.

Ada tiga keterbatasan yang perlu Anda sadari sebelum memakai jalur ini:

1. Hanya halaman yang tertaut yang ditemukan. Alat menjelajahi tautan dari beranda. Halaman yatim yang tidak punya tautan masuk tidak akan terdaftar, padahal justru halaman seperti itu yang paling butuh bantuan.
2. Berkas harus diunggah sendiri. Anda perlu menaruh berkas di root situs lewat FTP atau panel hosting.
3. Hasilnya basi. Setiap ada halaman baru, ulangi prosesnya. Kalau terlupa, sitemap dan situs perlahan tidak lagi sama.

Kalau situs Anda memakai layanan seperti Wix atau Squarespace, Anda biasanya tidak perlu alat ini sama sekali. Google menyebut layanan seperti itu kemungkinan sudah mengelola sitemap untuk Anda.

Plugin WordPress: jalur paling mudah untuk kebanyakan situs

Sejak versi 5.5, WordPress punya sitemap bawaan di /wp-sitemap.xml. Isinya dasar, satu sitemap menampung maksimal 2.000 entri, dan kalau Anda mencentang pengaturan yang menghalangi mesin pencari, sitemap ikut dinonaktifkan.

Plugin SEO memberi kontrol lebih. Yoast SEO memperbarui sitemap index dan sitemap individual secara otomatis saat Anda menambah atau menghapus konten. Jenis konten yang disetel noindex juga tidak ikut tampil.

Rank Math membuat sitemap index di /sitemap_index.xml dan menyediakan pengaturan tautan per sitemap. Dokumentasinya menyebut nilai bawaan lama 1.000 sudah diturunkan ke 200, yang menjadi rekomendasi mereka. Di plugin ini Anda juga bisa mengecualikan post tertentu lewat ID atau seluruh taksonomi tertentu.

Kesalahan yang paling sering terjadi di WordPress adalah sitemap ganda. Situs memakai plugin SEO, tetapi berkas lama hasil generator online masih tertinggal di root, atau dua plugin aktif sekaligus. Yoast bahkan mengingatkan bahwa kalau sitemap Anda ada di example.com/sitemap.xml, berkas itu bukan buatan Yoast. Pilih satu sumber, nonaktifkan yang lain, lalu hapus berkas fisik yang tertinggal. Pengaturan lain yang berkaitan bisa Anda lihat di panduan SEO WordPress.

Situs statis dan custom: buat saat build

Kalau situs Anda dibangun dengan framework, generator terbaik biasanya sudah berupa satu paket. Di Astro, paket @astrojs/sitemap membaca halaman saat build, jadi tidak ada halaman yang terlewat hanya karena tautannya tersembunyi.

Pemasangannya singkat. Isi opsi site di astro.config.mjs dengan alamat lengkap situs, tambahkan integrasinya, lalu build. Hasilnya berupa sitemap-index.xml yang menunjuk ke sitemap-0.xml, dan untuk situs sangat besar akan muncul sitemap-1.xml dan seterusnya. Halaman yang tidak ingin didaftarkan bisa disaring lewat opsi filter().

Untuk sistem buatan sendiri, Google menyarankan mengambil URL langsung dari database lalu menulisnya ke berkas di server. Kerjanya tidak rumit bagi developer, dan hasilnya lebih akurat dibanding crawler dari luar. Jalur ini juga wajib bagi situs dengan ribuan halaman, misalnya proyek programmatic SEO, karena Anda perlu sitemap index dan lastmod yang benar sejak awal.

Crawler desktop: paling berguna saat audit

Screaming Frog SEO Spider bisa menjelajahi situs lalu mengekspor sitemap XML. Versi lite-nya gratis sampai 500 URL. Keunggulan utamanya ada pada penyaringan.

Panduan resminya menjelaskan bahwa URL pengalihan, galat 4XX, dan galat 5XX tidak dimasukkan secara bawaan. Halaman yang diblokir robots.txt, disetel noindex, atau punya canonical ke URL lain juga tidak ikut. Artinya, hasil ekspor sudah mendekati daftar halaman yang memang layak diindeks.

Karena itu, crawler lebih berguna sebagai alat pemeriksa daripada pembuat sitemap harian. Bandingkan daftar hasil crawl dengan sitemap yang tayang, lalu cari selisihnya. Halaman yang ada di sitemap tetapi tidak ditemukan crawler adalah kandidat halaman yatim, sedangkan halaman yang ditemukan crawler tetapi tidak ada di sitemap menandakan generator Anda bermasalah. Pemeriksaan ini termasuk langkah wajib dalam SEO teknis.

Langkah memakai sitemap generator dari awal sampai terkirim

Urutan berikut berlaku untuk semua jenis alat:

1. Cek apa yang sudah ada. Buka domain.com/sitemap.xml, /sitemap_index.xml, /wp-sitemap.xml, dan /sitemap-index.xml. Lihat juga baris Sitemap: di robots.txt. Jangan membuat sitemap baru kalau sudah ada yang sehat.
2. Pilih satu generator. Utamakan yang otomatis. Pakai alat online atau crawler hanya kalau situs tidak punya pilihan lain.
3. Tentukan apa yang masuk. Daftarkan halaman yang ingin tampil di hasil pencarian. Keluarkan halaman noindex, hasil pencarian internal, dan halaman terima kasih.
4. Buat dan buka hasilnya. Periksa beberapa URL secara acak. Pastikan alamatnya absolut, memakai HTTPS, dan sesuai versi domain yang Anda pakai.
5. Tambahkan ke robots.txt. Tulis Sitemap: https://domain.com/sitemap.xml. Google menyatakan tidak ada batas jumlah baris sitemap di berkas ini.
6. Kirim lewat Search Console. Buka laporan Sitemaps di Google Search Console, tempel alamat berkas, lalu kirim.
7. Baca statusnya. Setelah beberapa waktu, pastikan statusnya Success dan jumlah URL yang ditemukan masuk akal.

Catatan: Mengirim sitemap hanyalah petunjuk. Dokumentasi Google menegaskan pengiriman sitemap tidak menjamin Google mengunduh sitemap itu atau memakainya untuk merayapi URL di situs Anda.

Butuh bantuan? Konsultasi SEO gratis lewat WhatsApp

Membaca status di laporan Sitemaps

Pekerjaan belum selesai saat berkas terkirim. Laporan Sitemaps menunjukkan apakah Google benar-benar berhasil membacanya.

Ada dua hal yang sering membingungkan. Pertama, laporan ini tidak mengikuti pengalihan, jadi alamat yang dikirim harus sama persis dengan alamat berkasnya. Kedua, kalau Google gagal mengambil sitemap setelah beberapa percobaan, Google lambat laun berhenti mencoba. Jadi status galat sebaiknya tidak dibiarkan. Setelah sitemap terbaca, langkah berikutnya adalah melihat laporan pengindeksan halaman, karena “ditemukan” tidak sama dengan “terindeks”. Cara membacanya kami bahas dalam panduan analisis SEO.

Kesalahan sitemap yang patut dicek saat audit

Sitemap yang dibuat alat bagus pun bisa keliru kalau pengaturannya tidak dicek. Saat menjalankan audit SEO, periksa pola berikut:

• URL yang sudah dialihkan. Sitemap masih berisi versi http atau versi tanpa www, sehingga semua URL mengarah ke alamat lain.
• Halaman noindex terdaftar. Sitemap meminta halaman dirayapi, sementara halaman itu sendiri melarang diindeks. Sinyalnya saling bertentangan.
• Halaman 404. Berkas statis lama masih menyimpan halaman yang sudah dihapus.
• lastmod palsu. Semua halaman bertanggal sama karena generator memakai tanggal build.
• Dua sumber sitemap. Sitemap plugin dan berkas lama sama-sama hidup, dengan isi berbeda.
• Sitemap diblokir. Aturan robots.txt atau firewall menolak akses ke berkasnya.

Sebagian besar masalah di atas selesai dengan satu kebiasaan: buka berkas sitemap minimal sekali sebulan dan cek beberapa URL secara acak. Kalau situs Anda sedang dibenahi menyeluruh, sertakan sitemap sebagai bagian dari ciri website SEO friendly dan masukkan ke daftar alat SEO yang rutin Anda periksa. Sitemap yang rapi tidak menaikkan peringkat dengan sendirinya, tetapi membantu mesin pencari menemukan halaman yang sudah Anda kerjakan dengan baik.

Sumber

• Build and Submit a Sitemap (Google Search Central)
• Sitemaps report (Search Console Help)
• Free Online Sitemap Generator (XML-Sitemaps.com)
• How To Create An XML Sitemap Using The SEO Spider (Screaming Frog)
• XML sitemaps in the Yoast SEO plugin (Yoast)
• How to Configure Sitemaps in Rank Math (Rank Math)
• @astrojs/sitemap (Astro Docs)
• New XML Sitemaps Functionality in WordPress 5.5 (Make WordPress Core)