Cara Mengaktifkan Robots.txt Khusus dan Tag Tajuk di Blog

Mengaktifkan Robots.txt
Image: Pixabay.com/id/illustrations

Untuk setelan Blog yang satu ini, selama 10 tahun jadi Blogger, baru di Blog ini saya memberanikan diri mengedit fitur robots.txt. Soalnya di fitur tersebut platform Blogger mewanti-wanti agar tidak utak-atik robotd.txt kalau tidak banyak pengetahuan tentangnya.

Peringatan! Gunakan dengan hati-hati. Penggunaan yang tidak tepat dari fitur tersebut dapat mengakibatkan blog Anda diabaikan oleh mesin telusur


Mendapat peringatan seperti itu tentu saja membuat langkah saya surut untuk ngutak-ngatik robots.txt, pasalnya dulu blog saya masih gretongan dan cuma buat iseng aja, jadi buat apa ngedit yang mana kalau salah dapat berakibat fatal seperti itu. Lagi pula terdapat keterangan google di Blog resminya bahwa bagi Blog berplatfrom Blogger tak perlu lagi mengaktifkan fitur robots.txt:

Setelan Robot.txt
Doc. Pribadi
Robots.txt sendiri fungsinya seperti banyak dibahas oleh para Blogger lainnya yaitu untuk membantu jalannya bot google merayapi/crawl peta situs yang sudah mengaktifkan fitur ini.

Dengan kata lain, robot google dengan sangat cepat merayapi peta situs yang sudah mengaktifkan robots.txt dengan benar. Contohnya tulisan saya ini sudah bisa terindex dipenelusuran google hanya dalam waktu 1 menit. Padahal normalnya bisa memakan waktu berjam-jam, berhari-hari bahkan ada yang berbulan-bulan tulisan bisa terindex google search.

Intinya adalah:
  • Bagi Blogger harus berhati-hati mengaktifkan robots.txt
  • Pengguna platform Blogger tidak perlu mengaktifkan fitur robots.txt, diedit atau tidak, tetap terindex google search
  • Sepertinya akan lebih "afdol" mendaftarkan Blog terlebih dahulu ke google search console sebelum mengaktifkan fitur robots.txt

Berikut cara mengaktifkan robots.txt khusus
Mengaktifkan Robots.txt
Doc. Pribadi

  • Masuk ke dasbor Blog
  • Setelan
  • Preferensi penelusuran
  • Edit Robots.txt khusus
  • Klik "ya"
  • Copy dan pastekan kode robots.txt di bawah ke dalam kolom texarea
  • Klik simpan perubahan
Kode robots.txt:
 
User-agent: Mediapartners-Google
Disallow: 
User-agent: *
Disallow: /search
Allow: /
Sitemap: https://www.ferry.web.id/sitemap.xml

Keterangan: ubah dengan alamat Blog anda.

Aktifkan tag tajuk robots.txt khusus
Mengaktifkan Robots.txt
Doc. Pribadi
  • Klik edit
  • Klik "ya"
  • Ikuti dan ceklis seperti gambar di atas
  • Klik simpan perubahan

Keterangan
  • Ceklis di bagian beranda: "all" dan "noodp"
  • Ceklis di bagian halaman arsip dan penelusuran: "noindex" dan "noodp"
  • Ceklis bagian default untuk postingan dan halaman: "all" dan "noodp"

Penutup

Setelah selesai, untuk menguji setelan di atas terpasang dengan benar, silakan ketik https://www.namabloganda.com/robots.txt lalu klik enter/go. Bilamana anda di alihkan ke halaman susunan kode robots.txt anda, maka setelan anda sudah benar. Jika tidak, silakan bertanya di kolom komentar atau batalkan semua setelan di atas.
Ferry Alamsyah Setelah selesai membaca, maka menulislah! Karena aku membutuhkan teman untuk merubah dunia melalui tulisan.

Belum ada Komentar untuk "Cara Mengaktifkan Robots.txt Khusus dan Tag Tajuk di Blog"

Posting Komentar

Iklan Atas Artikel

Iklan1

Iklan Tengah Artikel 2

Iklan Bawah Artikel