Robot TXT Dan Meta Tag Untuk SEO Terbaik

Tahukah Anda bahwa file robot.txt default memblokir banyak halaman untuk dirayapi di blog atau situs web Blogger? Artikel tutorial ini akan memandu bagaimana Anda dapat menggunakan robots.txt dan meta tag untuk SEO terbaik dari blog Blogger membiarkan semua perayap merayapi dan mengindeks seluruh situs web atau blog tanpa duplikasi kesalahan konten.

Seseorang harus menggunakan kedua robots.txt Blogger dan tag meta robot yang dikombinasikan dengan hasil Mesin Pencari terbaik, yaitu, mengoptimalkan Blogger dengan sempurna.

Kombinasi Dari Robot.txt Blogger Dan Meta Tag Robot SEO

Blogger sekarang memberi Anda lebih banyak kontrol atas fitur-fiturnya daripada sebelumnya. Karena Blogger sekarang mendukung tema XML yang lebih canggih yang memungkinkan Anda mengontrol SEO blog.

Anda dapat menambahkan tag meta robot untuk mengindeks posting, halaman, dan beranda. Dan izinkan semua bagian pencarian dan arsip untuk dirayapi dengan nilai noindex di tag meta.

Bagaimana Cara Kerja Pengindeksan Google?

Ketika bot mesin pencari mengunjungi blog Anda, pertama-tama ia memeriksa aturan file robot.txt. File robot.txt berisi aturan yang harus diikuti oleh mesin pencari. File robot.txt default Blogger hanya memblokir halaman pencarian dan label blog untuk muncul di hasil pencarian Google.

Anda dapat memeriksanya dengan mengunjungi http://www.domain.com/robot.txt atau https://example.blogspot.com/robot.txt

Seperti yang telah kita bahas, file ini berisi aturan untuk perayapan bot. Coba kunjungi file robots.txt Anda.

User-agent: Mediapartners-Google 

Disallow: 

User-agent: * 

Disallow: /search 

Allow: / 

Sitemap: https://www.domainanda.blogspot.com/sitemap.xml 

Apa arti dari setiap baris diatas? Pahami disini

Baris berikut yang menyatakan User-agent: * berarti bot atau spider dari semua mesin pencari. Dan baris berikut Disallow: /search berarti bahwa semua halaman yang strukturnya mirip dengan https://example.blogspot.com/search tidak boleh dirayapi. Baris berikutnya : Allow: /menyatakan bahwa semua halaman lain diperbolehkan. Baca lebih lanjut tentang cara menggunakan robots.txt di sini.

Di sini sekarang Sitemap: https://www.example.blogspot.com/sitemap.xml nyatakan peta situs XML blog Blogger untuk mesin pencari untuk mengindeks situs web atau halaman web Anda.

Pengaturan File Robot.txt Blogger

Sekarang saya harap Anda memahami semua fungsi file robot.txt. Jadi beberapa perubahan perlu dilakukan untuk perayapan mesin pencari yang lebih baik dan pengindeksan halaman web Anda.

• Kunjungi dasbor Blogger.
• Dasbor > setelan > Preferensi Penelusuran.
• Temukan robots.txt Kustom dan aktifkan.
• Tempelkan kode yang diberikan di bawah ini. Catatan: Ubah nama situs web dengan milik Anda.

User-agent: *

Allow: /

Sitemap: https://www.domainanda/sitemap.xml

Sitemap: https://www.domainanda/sitemap-pages.xml

Di sini Anda mengirimkan kedua peta situs untuk halaman dan posting. Dan juga, Google Spider atau bot dapat merayapi seluruh situs web Anda. Tetapi untuk SEO, perlu diingat bahwa Anda hanya mengirimkan posting dan halaman untuk Indeks Mesin Pencari. Mengapa? Baca ini di sini postingan yang harus di index Google.

Pengaturan Meta Tag Robot Blogger

Dengan menggunakan tag meta robot, kami akan menghindari konten sampah/duplikat untuk diindeks di mesin telusur. Di sini kami menggunakan meta tag robot terbaru yang disarankan oleh Google.

• Buka ke Tema
• Sekarang klik Edit HTML
• Menemukan <b:include data='blog' name='all-head-content'/>

Sekarang, di bawah baris ini <b:include data='blog' name='all-head-content'/>, lewati kode yang diberikan di bawah ini.

<b:if cond='!data:view.isHomepage and !data:view.isSingleItem'>

 <meta content='noindex,follow' name='robots'/>

<else/>

 <meta content='max-snippet:-1, max-image-preview:large, max-video-preview:-1' name='robots'/>

</b:if>

Apa yang terjadi dengan kode ini? Hasil SEO Akhir.

• Tingkatkan SEO karena hanya konten yang akan diindeks ke google atau mesin pencari lainnya.
•  Atasi kesalahan konsol pencarian Google “diblokir oleh robots.txt” untuk semua halaman.
• Situs web akan saling ber tautan internal, sebagai hasilnya, meningkatkan SEO di Halaman.
• Bot atau laba-laba dapat mengunjungi semua halaman situs web/halaman web Anda. Itu menghasilkan lebih banyak halaman untuk diindeks.

Saya harap Anda menyukai artikel tentang robot TXT dan meta tag untuk SEO Blogger ini. Jika ada pertanyaan tentang masalah apa pun, jangan ragu untuk bertanya di komentar di bawah. Terima kasih.

Berbagi :