Cara Edit Robot.txt Untuk SEO

Cara Edit Robot.txt Untuk SEO

Cara Edit Robot.txt Untuk SEO - Halo sahabat Berguru SEO setelah kemarin membahas Pengertian Dan Ciri-Ciri Konten SEO Friendly Maka kali ini Berguru SEO akan membahas Cara Edit Robot.txt Untuk SEO.

Pertama kita cari tau dulu apa itu Robots.txt ?

Robots.txt adalah file teks pada server dalam yang berfungsi untuk mengatur atau memberi perintah kepada mesin pencari (misalnya memerintahkan robot google untuk tidak mengindex blog anda).

Anda dapat membatasi bots mesin pencari untuk menjelajah beberapa direktori dan halaman web atau link dari website atau blog. Sekarang robots.txt juga tersedia untuk Blogger.

Di robots.txt And juga bisa menuliskan sitemap. Conthohnya seperti dibawah ini.

Robots.txt Tipe 1

User-agent: Mediapartners-Google
User-agent: *

Disallow: /search

Sitemap: http://citarasakopiku.blogspot.com/feeds/posts/default?orderby=updated

Catatan Penting: Jangan lupa untuk mengubah http://citarasakopiku.blogspot.com dengan alamat blog atau domain kustom milik Anda.

Jika Anda ingin mesin pencari bots merayapi 500 posting yang terbaru, maka Anda perlu menggunakan jenis robots.txt yang nomer 2 ( lihat bawah). Jika Anda sudah memiliki lebih dari 500 posting di blog maka Anda dapat menambahkan satu lagi sitemap yang berwarna biru (lihat bawah).

Robots.txt Tipe 2

User-agent: Mediapartners-Google Larang:
User-agent: * : /search

Disallow: /
Allow: /

Sitemap: http://citarasakopiku.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500
Sitemap: http://citarasakopiku.blogspot.com/atom.xml?redirect=false&start-index=501&max-results=500

Catatan Penting: Jangan lupa untuk mengubah http://citarasakopiku.blogspot.com dengan alamat blog atau domain kustom milik Anda.

Ekspresi matematika untuk Blogger robots.txt sitemap entri:

• Sitemap: http://citarasakopiku.blogspot.com/atom.xml?redirect=false&start-index = (m * 0) 1 & max-results = m
• Sitemap: http://citarasakopiku.blogspot.com/atom.xml?redirect=false&start-index = (m * 1) +1 & max-results = m
• Sitemap: http://citarasakopiku.blogspot.com/atom.xml?redirect=false&start-index = (m * 2) +1 & max-results = m
• Sitemap: http://citarasakopiku.blogspot.com/atom.xml?redirect=false&start-index = {m * 3} 1 & max-results = m
• Sitemap: http://citarasakopiku.blogspot.com/atom.xml?redirect=false&start-index = {m * n} 1 & max-results = m
• Dimana m = 500 dan n = 1, 2, 3, 4, ..., n.

Jika kebetulan, mungkin ada halaman statik atau postingan yang tidak ingin terindex, Anda bisa menambahkan robots.txt dibawah ini :

Untuk Pos tambahkan baris seperti itu
Disallow: / tanggal / bulan / nama-halaman.html

Untuk Halaman tambahkan baris seperti itu
Disallow:: / p / nama-halaman.html

Itulah Cara Edit Robot.txt Untuk Keperluan SEO semmoga membantu