Setting Dan Mengenal Robot.Txt Pada Blogger Webmaster

Robot.txt yang berada di WEBmaster tool adlah sebuah root (akar) pada sebuah situs. untk mempelajari ihwal file robots txt blog berguru mengembangkan akan mengupas dan menyajikannya untk anda simak hingga tuntas, sehingga anda akan disulap untk menjadi seorang yang mengenal dan memahami  robot.txt pada WEBmaster tools hingga menjadi andal dalam menguasainya. tentu dengan syarat harus melahap goresan pena ini hingga tuntas.

Sebelum anda mengetahui lebih jauh robot.txt, sebaiknya anda mendaftarkan situs anda di WEBmaster tools. kalau sudah mendaftar pada WEBmaster tools, silahkan terbang ke perayapan » penguji robots.txt

Contoh Defauld Robot.Txt

Setips defauld robot.txt yang ada di WEBmaster tools milik berguru mengembangkan menyerupai dibawah ini

Yuser-agent: Mediapartners-Gugle
Disallow:

Yuser-agent: *
Disallow: /search
Allow: /

Sitemap: https://www.calonteknisi.com/sitemap.xml

Keterangan: 
Yuser-agent: Mediapartners-Gugle: adlah sebagai perintah mengizinkan robots craw adsense untk mengindeks seluruh WEBsite atau blog yang relevan dan tidak ada kaitannya dengan gugle search engine. kalau anda sudah mempunyai adsense maka jangan pernah menghapusnya sebab sangat menguntungkan bagi situs anda.

Disallow: artinya tidak ada batasan halman untk dirayapi oleh gugle

Yuser-agent: *: seluruh search engine atau mesin pencari yang diwakili oleh tanda * tersebut

Disallow: /search: melarang robots gugle untk merayapi labels yang berawalan /search contohnya http://imoul.blogspot.co.id/search/label/AdSense

Allow: /: memberiarkan robots gugle merayapi seluruh halman situs WEBsite/blog anda

Sitemap: adlah sebuah alamat feed blog anda yang berisikan url-url halman yang sudah anda buat contohnya judul postingan blog. untk mengetahuinya silahkan rubah http://imoul dengan nama situs anda yang diakhiri /sitemap.xml

Fungsi dari Robot.Txt

Ada 3 buah fungsi robot.txt yang aku pelajari pribadi dari gugle WEBmaster tools diantaranya adlah file non gambar » file gambar dan file sumber daya.

• Non Gambar robot.txt hnya dipakai untk mengontrol kemudian lintas perayapan dan jangan menyia-nyiakan kemudian lintas ini sebab sanggup menjadikan overload atau kelebihan perayapan yang tidak penting untk dirayapi oleh gugle. 
• robot.txt sanggup mencegah file gambar yang muncul di hasil pencarian gugle akan tetapi robot txt tidak mencegah halman yang ditautkan oleh pengguna lain yang ngelink ke file gambar anda tersebut
• File sumber daya berfungsi untk memblokir file gambar yang berdasarkan anda tidak penting. 

Untuk mengetahui keseluruhan ihwal robot.txt WEBmaster menyerupai mempelajari ihwal file robots.txt, membuat file robot.txt, menguji dengan penguji robots.txt, mengirim robots.txt yang diperbaharui di gugle, sebaiknya aku rekomendasikan kepada anda untk membaca dan mempelajari seluruh ihwal robot.txt yang ada di WEBmaster tools.

Untuk setting robot txt pada blog silahkan anda login ke blogger anda » setelan » Preferensi penelusuran » robot.txt khusus

Aktifkan konten robots.txt khusus? jadikan Ya dan masukan instruksi dibawah ini dan klik simpan perubahan

Yuser-agent: Mediapartners-Gugle
Disallow:

Yuser-agent: *
Disallow: /search
Allow: /

Sitemap: https://www.calonteknisi.com/sitemap.xml

Lalu pada Tag tajuk robot khusus, Aktifkan tag tajuk robot khusus? jadikan Ya dan ikuti perintahnya dibawah ini

Pada belahan Beranda conteng All;

Laman Arsip dan Penelusuran: conteng noindex, nofollow, noarchive

Default untk Pos dan Laman: conteng All

Setelah selesai klik simpan perubahan

Karena waktu berbuka puasa sebentar lagi, maka aku akhiri goresan pena ihwal tips setting dan mengenal robot.txt pada blogger WEBmaster. biar bermanfaat dan happy blogging