Cara Setting Robots.txt Khusus

Cara Setting Robots.txt Khusus - Pada kesempatan kali ini blog Ficri Pebriyana akan membagikan sebuah tutorial Cara Setting Robots.txt Khusus Pada Blog. Mungkin Anda semua ketika ingin atau akan mengoptimalkan sebuah blog seperti dengan melakukan teknik SEO On Page dan kalian disuruh untuk melakukan setting terhadap robots.txt khusus dan tag tajuk khusus (costum robots header tags) pada bagian setelan atau pengaturan blog Anda.
Cara Setting Robots.txt Khusus - Ficri Pebriyana

Perlu Anda ketahui salah satu bagian terpenting dalam pengotimalan SEO adalah memudahkan akses search engine untuk merayapi website atau blog kita. Namun Anda juga harus memberikan kemudahan akses terhadap visitor atau setiap pengunjung blog yang akan membaca artikel pada blog kita. Dengan begitu blog Anda akan disukai oleh search engine dan juga para visitor dan ini salah satu point utama untuk meraih kesuksesan dalam hal Blogging. Bagi Anda yang ingin mengetahui cara setting robots.txt khusus silahkan baca dibawah ini tutorial setting robots.txt khusus dan pengertiannya :



1. Masuk ke Blogger.com
2. Klik Setelan => Preferensi Penelusuran => Edit => Ya
3. Lalu setting robots.txt seperti berikut :
User-agent: Mediapartners-Google
Disallow:

User-agent: Googlebot
Disallow: /search
Disallow: /?m=1
Disallow: /?m=0
Disallow: /*?m=1
Disallow: /*?m=0
Disallow: /*?showComment=
Allow: /

User-agent: *
Disallow: /search
Allow: /

Sitemap: http://ficripebriyana.blogspot.com/feeds/posts/default?orderby=UPDATED
 Catatan :
- Ganti kode yang berwarna Biru dengan URL blog Anda

Apa saja penjelasan dari robots.txt diatas ?

Saya akan menjelaskannya satu per satu, agar Anda bisa lebih memahami cara setting robots.txt khusus ini, silahkan baca penjelasan atau pengertian dari setiap kode-kode diatas :
User-agent: Mediapartners-Google
Robot Google Adsense merayapi blog.
Disallow:
Yang tidak diperbolehkan tidak ada.

User-agent: Googlebot
Robot Google merayapi blog.
Disallow: /search
Tidak diperbolehkan merayapi folder search dan seterusnya, seperti /search/label dan lain-lain yang berawalah /search.
Disallow: /?m=1
Tidak diperbolehkan merayapi tampilan homepage (beranda) pada mobile.
Disallow: /?m=0
Tidak diperbolehkan merayapi tampilan homepage (beranda) pada smartphone atau tablet.
Disallow: /*?m=1
Tidak diperbolehkan merayapi tampilan postpage (halaman posting) pada mobile.
Disallow: /*?m=0
Tidak diperbolehkan merayapi tampilan postpage (halaman posting) pada smartphone atau tablet.
Disallow: /*?showComment=
Tidak diperbolehkan merayapi link komentar.

User-agent: *
Semua robot search engine atau mesin pencari
Allow: /
Siperbolehkan untuk merayapi semua halaman, kecuali yang tertulis pada Disallow di atas. Tanda (/) kurang lebih artinya nama blog.

Sitemap: http://ficripebriyana.blogspot.com/feeds/posts/default?orderby=UPDATED
Sitemap atau alamat feed blog kita.

Itulah penjelasan dari tiap-tiap kode tobots.txt khusus, semoga dengan ini Anda lebih bisa memahami lagi cara mengoptimalkan blog dengan baik dan lebih pahan setting robots.txt khusus atau costum robots.txt khusus pada blog Anda.

Peringatan! Gunakan dengan hati-hati. Penggunaan yang tidak tepat dari fitur tersebut dapat mengakibatkan blog Anda diabaikan oleh mesin telusur.
Sekian artikel mengenai Cara Setting Robots.txt Khusus. Kurang lebihnya mohon maaf.
Semoga Bermanfaat...
http://ficripebriyana.blogspot.com/2014/04/cara-setting-robotstxt-khusus.html
Previous
Next Post »