Perubahan Robots File Apakah Akan Memberikan Hasil

Kalau memperhatikan Index yang diberikan google seakan blog ini memiliki trafik yang tinggi dengan banyaknya kemungkinan persaingan kata kunci pada hasil pencarian. Namun apa yang sebetulnya terjadi. Index yang dimiliki tidak memberikan koversi trafik seperti yang diinginkan oleh admin blog. He.. he.. ternyata postingnya masih porsi galau.

Dari sekian banyak index yang dimiliki juga memberikan efek negatif yang kurang disenangi sang google. Terjadi banyak crawl error. Index pada mesin pencari setelah di datangi sumbernya tidak ditemukan, atau mungkin yang dikenal dengan crawl error kode 404. Selain perayapan salah, dari sekian index tersebut banyak ditemukan duplikat meta description serta duplicate meta title (konten ganda). Entahlah sampai bingung menerapkan file robots yang dianggap sesuai. Butuh kesabaran dalam belajar optimasi SEO On Page, apalagi harus berburu backlink dan mendapat peringkat terbaik pada hasil pencarian google.

Sebagai langkah antisipasi mengurangi kemungkinan konten ganda semakin bertambah setelah melakukan removed url pada webmasters, saya mencoba merubah robots.txt blog ini, kurang lebihnya dengan hasil seperti berikut:

User-agent: *
1. Disallow: /*?
2. Disallow: /search
3. Disallow: /*archive.html
4. Allow: /atom.xml?*
5. Allow: /

Sitemap: https://citro-mduro.blogspot.com/sitemap.xml, Sedikit keterangan maksud yang saya inginkan dari robot tersebut:

1. Pada baris pertama saya menginginkan semua URL yang mengandung unsur ? tidak diindex, pada saat robot membaca struktur blog ini, bagian tersebut dilewati begitu saja. Entah kapan si laba-laba datang menghampiri. Tujuan dari hal tersebut untuk menghindari terulangnya konten ganda yang disebabkan tampilan mobile, dan tampilan full web dengan url yang diakhiri dengan ?m=0 dan ?m=1 atau url label pada halaman berikutnya
2. Menghalau index url label blog
3. Menghalau index arsip blog
4. Mengijinkan laba-laba untuk merayapi url sitemap yang dipergunakan
5. Mengijinkan crawl pada home page

Uraian diatas tentang robots.txt yang dipergunakan citromduro, apakah akan memberikan pengurangan terjadinya konten ganda, atau malah menyebabkan terjadinya deindex karena akan mengakibatkan berkurangnya index yang sebelumnya telah bertebaran. Untuk hasil finalnya tentu butuh waktu yang tidak sebentar

Masih dalam versi galau dengan kalimat yang tidak jelas. He.. he.. Sebagai penutup artikel kali ini, saya mengucapkan banyak terima kasih atas kesediaan para sahabat untuk mengunjungi Blog CITRO MDURO dan membaca tulisan yang bertajuk Perubahan Robots File Apakah Akan Memberikan Hasil, walaupun bukan tulisan insiratif dan kurang inovatif yang dapat memberikan inspirasi bagi para pembaca ataupun anda lewat karena tersasar dan terdampar pada tulisan Perubahan Robots File Apakah Akan Memberikan Hasil. Kami sangat berterima kasih karena anda sudah berkenan walaupun mungkin sangat terpaksa. Silahkan tinggalkan jejak anda untuk menjalin silaturahmi, atau temukan yang anda cari tentang Perubahan Robots File Apakah Akan Memberikan Hasil dan salam jabat erat dari PAMEKASAN MADURA