Pengaturan Tag Header Robots.txt Di Blogger

Mengaktifkan tag header robots.txt di Blogger adalah aspek penting dalam mengoptimalkan blog untuk mesin pencari. Dengan menyesuaikan tag header robot, blogger dapat mengontrol cara mesin pencari merayapi dan mengindeks konten mereka, yang pada akhirnya meningkatkan visibilitas blog mereka di hasil mesin pencari. Artikel ini akan membahas pentingnya tag header robots.txt dan memberikan panduan langkah demi langkah tentang cara mengaktifkannya di Blogger.

Tag header robots.txt memungkinkan Anda mengontrol bagaimana situs web Anda ditampilkan di hasil pencarianGoogle. Anda dapat menerapkan tag robots menggunakan tag meta dan tag X-robots di header respons. Blogger juga memungkinkan Anda menyetel kedua jenis tag robot. Mengaktifkan tag header robots.txt dapat meningkatkan SEO situs Blogger anda dan mempercepat pengindekan.

1. Apa itu X-Robots-Tag atau Robots Header tag dan Robots Meta Tag?

X-Robots-Tags atau Tag Header Robot: X-Robots-Tags adalah bagian dari respon header HTTP yang dikirim oleh server ketika halaman web diakses. Tag ini menyampaikan pengaturan dan arahan tingkat halaman ke bot mesin pencari. Webmaster dapat mengontrol bagaimana mesin pencari mengindeks konten mereka dengan memasukkan tag X-Robots di header HTTP. Misalnya, X-Robots-Tag mungkin menentukan bahwa halaman tertentu tidak boleh diindeks atau tautannya harus diikuti, sehingga memengaruhi perilaku mesin pencari untuk halaman tertentu tersebut.

Tag Meta Robots-Tags biasanya merupakan tag meta yang tertanam dalam kode HTML setiap halaman template Blogger. Tag meta ini memiliki tujuan yang mirip dengan X-Robots-Tags dengan memberikan instruksi tingkat halaman kepada bot mesin pencari. Webmaster dapat menyertakan tag meta seperti “noindex” atau “nofollow” untuk menentukan apakah halaman tertentu harus dikecualikan dari indeks mesin pencari atau jika link pada halaman tersebut tidak boleh diikuti.

Berikut ini akan kami jelaskan cara mengartikan tag header robots,txt yang ada dihalaman Dashboard akun blogger anda:

a. all

Tidak ada batasan untuk pengindeksan atau penayangan. Catatan: arahan ini adalah nilai default dan tidak berpengaruh jika dicantumkan secara eksplisit.

b. noindex

Jangan tampilkan halaman ini di hasil pencarian. Jika Anda tidak menentukan aturan ini, halaman, media, atau resource tersebut dapat diindeks dan ditampilkan dalam hasil penelusuran.

c. nofollow

Jangan ikuti tautan halaman ini. Jika Anda tidak menentukan aturan ini, Google dapat menggunakan link pada halaman untuk menemukan halaman tertaut tersebut.

d. none

Setara dengan noindex, nofollow.

e. noarchive

Jangan tampilkan tautan “Cached” di hasil pencarian. Anda harus menentukan arahan ini. Jika tidak, Google dapat membuat halaman cache, dan pengguna dapat mengaksesnya melalui hasil pencarian.

f. nosnippet

Jangan tampilkan cuplikan teks atau cuplikan pratinjau video di hasil penelusuran laman ini.

g. noodp

Jangan gunakan metadata dari Proyek Direktori Terbuka untuk judul atau cuplikan yang ditampilkan pada laman ini.

h. notranslate

Jangan menawarkan terjemahan halaman ini dalam hasil pencarian.

i. noimageindex

Gambar di halaman tidak akan diindeks.

j. unavailable_after

Jangan tampilkan halaman ini di hasil pencarian setelah tanggal/waktu yang ditentukan. Tanggal/waktu harus ditentukan dalam format termasuk, namun tidak terbatas pada, RFC 822, RFC 850, dan ISO 8601.

Secara default, tidak ada tanggal kedaluwarsa untuk konten. Tag ini sebaiknya digunakan untuk konten yang tidak boleh terlihat setelah tanggal atau waktu tertentu.

Catatan: Sebelum melakukan noindexing suatu halaman, periksa apakah halaman tersebut memiliki lalu lintas organik masuk di Google Search Console. Jika ya, tentukan bagaimana situs Anda dapat terus menangkap lalu lintas ini sebelum tidak mengindeks halaman tersebut.

2. Cara Menambahkan Meta Tag Robot ke Kode HTML Template Blogger

Untuk mengaktifkan meta tag robots.txt ke template Blogger, anda harus masuk ke menu edit html template. Setelah itu anda ketikkan kode tag robots.txt. Pastikan tag tersebut muncul di antara tag <head> dan </head>,seperti contoh di bawah ini.

<?xml version="1.0" encoding="UTF-8" ?>
<!DOCTYPE html>
<html b:css='false' b:js='true' b:version='3' lang='ja' xmlns='http://www.w3.org/1999/xhtml' xmlns:b='http://www.google.com/2005/gml/b' xmlns:data='http://www.google.com/2005/gml/data' xmlns:expr='http://www.google.com/2005/gml/expr'>
<head>
<meta content='index,follow' name='robots'/>
......................................................
......................................................
......................................................
</head>

Mengaktifkan tag header robot khusus di Blogger adalah langkah penting dalam mengoptimalkan blog untuk mesin pencari. Menyesuaikan tag header robot memberi blogger kontrol lebih besar atas cara mesin pencari merayapi dan mengindeks konten mereka, sehingga meningkatkan visibilitas dan optimasi mesin pencari. Dengan mengikuti panduan langkah demi langkah yang disebutkan dalam esai ini dan memahami berbagai arahan, blogger dapat secara efektif memanfaatkan tag header robot khusus untuk meningkatkan kinerja blog mereka dalam hasil mesin pencari.