Kumpulan Kode Robots.txt Blogger SEO Friendly - Kita bahas kembali mengenai penggunaan robots.txt pada blogger, kali ini saya akan memperlihatkan beberapa isyarat yang sanggup dipakai untuk menciptakan file robots.txt di blogger. Pada kesempatan sebelumnya saya sudah pernah menjelaskan pengertian dari robots.txt untuk mengingatnya kembali Anda sanggup baca kembali artikel tersebut.
Baca Juga : Apa Itu Robots.txt ? Inilah Pengertian dan Fungsinya
Disini saya akan memperlihatkan teladan sederhana mengenai kumpulan file robots txt yang mungkin sanggup Anda coba diterapkan pada situs web Anda khususnya blogger. Tentunya sehabis Anda membaca artikel ini mungkin Anda ingin menerapkannya atau mencobanya memasang pada blog Anda, saya sudah pernah menjelaskannya cara memakai file robots.txt ini namun file tersebut masih standar, jadi disini Anda akan menemukan beberapa isyarat alternatif file robots.txt yang sanggup Anda gunakan untuk blog Anda, untuk cara memasangnya Anda sanggup baca artikel sebelumnya.
Baca Juga : Cara Setting Robots.txt Khusus di Blogspot
Seletah paham pengertian dari robots.txt dan tahu cara menggunakannya sekarang kita coba untuk memakai file robots.txt yang berbeda dari bawaannya. Saya ingatkan kembali bahwa file robots.txt ini berfungsi untuk mengontrol situs web kita dalam mesin penelusuran, kalau situs web Anda mempunyai data yang penting dan tidak ingin dirayapi dan diindeks mesin telusur salah satu solusinya yakni dengan memakai robots.txt ini. Langsung saja kita simak kumpulan isyarat robots.txt seo friendly untuk blogger dibawah ini.
Baca Juga : Apa Itu Robots.txt ? Inilah Pengertian dan Fungsinya
Disini saya akan memperlihatkan teladan sederhana mengenai kumpulan file robots txt yang mungkin sanggup Anda coba diterapkan pada situs web Anda khususnya blogger. Tentunya sehabis Anda membaca artikel ini mungkin Anda ingin menerapkannya atau mencobanya memasang pada blog Anda, saya sudah pernah menjelaskannya cara memakai file robots.txt ini namun file tersebut masih standar, jadi disini Anda akan menemukan beberapa isyarat alternatif file robots.txt yang sanggup Anda gunakan untuk blog Anda, untuk cara memasangnya Anda sanggup baca artikel sebelumnya.
Baca Juga : Cara Setting Robots.txt Khusus di Blogspot
Seletah paham pengertian dari robots.txt dan tahu cara menggunakannya sekarang kita coba untuk memakai file robots.txt yang berbeda dari bawaannya. Saya ingatkan kembali bahwa file robots.txt ini berfungsi untuk mengontrol situs web kita dalam mesin penelusuran, kalau situs web Anda mempunyai data yang penting dan tidak ingin dirayapi dan diindeks mesin telusur salah satu solusinya yakni dengan memakai robots.txt ini. Langsung saja kita simak kumpulan isyarat robots.txt seo friendly untuk blogger dibawah ini.
User-agent: Mediapartners-Google Disallow: User-agent: * Disallow: /search Allow: / Sitemap: aciknadzirah.blogspot.com/feeds/posts/default?orderby=UPDATEDKode robots.txt diatas merupakan isyarat standar atau default yang biasanya banyak dipakai oleh blogger, file robots.txt tersebut memberitahukan kepada semua mesin telusur yang ditandai dengan tanda * (asterisk) dan memperlihatkan perintah disallow /search yang berarti semua mesin telusur tidak boleh merayapi dan mengindeks folder /search contohnya /search/label/ dan seterusnya.
User-agent: Mediapartners-Google Disallow: User-agent: * Disallow: Allow: / Sitemap: aciknadzirah.blogspot.com/feeds/posts/default?orderby=UPDATEDApa bedanya isyarat diatas dengan file robots.txt yang pertama ? Tentu saja beda, isyarat ini pertanda bahwa semua mesin telusur boleh merayapi dan melaksanakan indeks kepada seluruh laman yang ada pada sebuah web alasannya perintah disallow semuanya kosong, sehingga robots tidak dihentikan untuk merayapi seluruh laman web.
User-agent: Mediapartners-Google Disallow: User-agent: * Disallow: /search?updated-min= Disallow: /search?updated-max= Disallow: /search/label/*?updated-min= Disallow: /search/label/*?updated-max= Allow: / Sitemap: aciknadzirah.blogspot.com/feeds/posts/default?orderby=UPDATEDKode diatas hampir sama dengan robots.txt yang pertama, namun isyarat ini tidak melarang seluruh folder /search untuk tidak dirayapi dan diindeks alasannya isyarat ini memperlihatkan larangan yang lebih spesifik lagi menyerupai pada file robots.txt diatas dan folder .../search/label/... masih sanggup dirayapi dan diindeks oleh web crawler.
User-agent: Mediapartners-Google Disallow: User-agent: * Disallow: /p/about.html Allow: / Sitemap: aciknadzirah.blogspot.com/feeds/posts/default?orderby=UPDATEDKode robots.txt ini berfungsi untuk memblokir halaman tertentu di mesin telusur. Diatas merupakan teladan kalau kita ingin memblokir laman .../p/about.html pada hasil penelusuran mesin pencari.
User-agent: Mediapartners-Google Disallow: User-agent: Googlebot Disallow: /search Disallow: /?m=1 Disallow: /?m=0 Disallow: /*?m=1 Disallow: /*?m=0 User-agent: * Disallow: /search Sitemap: aciknadzirah.blogspot.com/feeds/posts/default?orderby=UPDATEDKode robots.txt ini memperlihatkan perintah kepada robot yang dimiliki Google yakni googlebot untuk tidak merayapi folder /search folder /?m=1 dan /?m=0 dimana isyarat m=1 dan m=0 berlaku untuk penelusuran dengan memakai perangkat mobile. Jadi, blog Anda tidak akan tampil dengan versi mobile kalau memakai isyarat robots.txt ini. Namun, saya sarankan kalau Anda mempunyai blog dengan memakai template yang sudah resposive dan mempunyai tampilan khusus mobile, Anda tidak perlu memakai file robots.txt ini. Tetapi, file robots.txt ini sanggup mengatasi duplikat konten khususnya konten versi mobile dan konten versi desktop.
*Update: 04/05/2018
User-agent: * Disallow: /search Allow: / Sitemap: https://www.caramanual.com/sitemap.xmlUntuk dikala ini saya memakai file robots.txt ini, isyarat robots.txt ini tidak jauh beda dengan isyarat yang pertama hanya sedikit saya modifikasi sesuai kebutuhan saya sendiri, untuk penggunaannya sanggup diadaptasi tergantung pada kebutuhan Anda sendiri.
Catatan:
Jangan lupa di bab sitemap, apakah blog Anda memakai HTTP atau HTTPS.
Nah, isyarat diatas merupakan kumpulan file robots.txt yang seo friendly, dari beberapa isyarat di atas Anda masih sanggup mengkreasikannya biar lebih baik, contohnya isyarat pertama dan kedua Anda gabungkan mungkin kesannya akan elok untuk blog Anda, tapi hal tersebut harus diadaptasi dengan kebutuhan Anda sendiri.
Sumber http://www.caramanual.com
Buat lebih berguna, kongsi:
