Cara Setting Robots.txt Khusus di Blogspot

Cara Setting Robots.txt Khusus di Blogspot - Sebagai blogger setidaknya kita mengetahui apa yang dimaksud dengan robots.txt khusus ? File robots.txt merupakan cara terbaik bagi para webmaster untuk mengontrol setiap halaman web pada mesin telusur. Secara singkat robots.txt dapat memabantu kita untuk mengontrol setiap konten yang ada pada web kita apakah konten tersebut boleh di rayapi oleh web crawler dan diindeks oleh mesin telusur atau sebaliknya. Untuk dapat lebih jelas memahami pengertian dari file robots.txt ini Anda dapat membaca artikelnya dibawah ini.

Baca Juga : Apa Itu Robots.txt ? Inilah Pengertian dan Fungsinya

Setelah kita paham mengenai pengertian dan fungsi utama dari robots.txt maka selanjutnya kita dapat mencoba mempraktekan atau menerapkannya kedalam blog kita. Tujuan utama mengaktifkan robots.txt ini adalah untuk mengontrol setiap konten atau halaman yang boleh dirayapi dan diindeks oleh mesin telusur, misalnya saja laman archive dan label kedua laman ini memang tidak seharusnya kita tampilkan pada mesin telusur karena tidak mengarah pada konten seseungguhnya. Namun, bagi yang tetap ingin mengindeks halaman archive dan label maka Anda bisa mengaturnya sendiri sesuai kebutuhan.
Cara Setting Robots.txt Khusus di Blogspot

Bagaimana Cara Mengaktifkan Robots.txt di Blogger ?

Secara default robots.txt pada blogger nonaktif, oleh karena itu kita perlu mengaktifkannya dan mengatur laman mana saja yang perlu diindeks mesin telusur. Berikut cara setting robots.txt khusus di blogspot :
Cara Setting Robots.txt Khusus di Blogspot Workflow
1. Masuk ke Blogger.com
2. Lalu klik pada bagian Setelan > Preferensi Penelusuran
3. Kemudian masukkan file robots.txt dibawah ini
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: http://www.caramanual.com/feeds/posts/default?orderby=UPDATED
4. Lalu klik simpan perubahan
Catatan :
http://www.caramanual.com ganti dengan URL blog Anda.

File robots.txt diatas merupakan robots.txt yang standar dan paling banyak digunakan oleh para blogger. Untuk mengetahui mengetahui jenis-jenis file robots.txt lainnya Anda bisa membacanya pada artikel selanjutnya.

Baca Juga : Kumpulan File Robots.txt SEO Friendly

Setelah mengaktifkan fitur robots.txt pada blogspot, kita juga perlu mengatur pada bagian tag tajuk robot khusus fitur ini juga sama fungsinya hanya saja yang ini untuk mengontrol pada bagian laman konten di blogspot, nah dalam mengaktifkannya Anda perlu berhati-hati kalau salah bisa-bisa konten yang kita tulis malah tidak terindex. Lalu bagaimana cara setting tag tajuk robot khusus ini, akan kita bahas pada artikel selanjutnya.

Baca Juga : Cara Setting Tag Tajuk Robot Khusus di Blogspot

Semoga dengan mengaktifkan file robots.txt pada blogger dapat memaksimalkan lagi hasil penelusuran konten kita pada mesin pencari sehingga blog kita bisa rampai di penuhi pengunjung. Jadi cobalah untuk mengaktifkannya tapi jika Anda masih ragu silahkan untuk tidak mengaktifkannya. Tetapi jika Anda berani dengan resikonya bisa Anda coba dengan mengaktifkan file robots.txt ini karena hasilnya juga akan memuaskan asalkan kita benar dalam memberikan perintah pada file robots.txt tersebut.
Cara Manual Cuman hobi nulis tentang tutorial blog jadi deh blog cara manual.

22 Komentar untuk "Cara Setting Robots.txt Khusus di Blogspot"

  1. pernah robot txt ini saya pasang mas, tapi masalahnya laporan url terindeks yang ada di search console justru malah banyak sekali yang gak diindeks. takut artikel-artikel saya gak ada yang nongol akhirnya saya copot lagi. itu gimana ya mas, gak apa-apa? atau gimana?

    BalasHapus
    Balasan
    1. itu mungkin ada perintah yang salah mas, jadi di blokir semua sama robot nya, memang perlu hati-hati kalau mau mengaktifkan fitur robots.txt ini dan kalau blog sudah berumur lama dan artikel banyak pas fitur robots di aktifkan pasti banyak yang error

      Hapus
    2. tapi robot txt yang saya pasang udah seperti yang di atas itu to mas. terus kira kira kalau robot txt gak diaktifkan efeknya gimana ya mas?

      Hapus
    3. secara default robots.txt akan merayapi setiap laman web, jadi kebanyakan robots.txt digunakan untuk memblokir laman supaya di indeks aja

      Hapus
  2. Jujur kang baru tahu kali ini deh kalau secara detailnya begini mah, ahi hi hi jadi malu ( kudet ), tapi sekarang mah kayaknya sudah tahu full movie...eh

    BalasHapus
    Balasan
    1. ya kang gpp lah kita belajar sama-sama disini hehe...

      Hapus
  3. saya kurang begitu mengerti mas, udah baca 2 kali juga masih kurang hehehee
    dan untuk masalah resikonya itu apakah akan sangat fatal mas?

    BalasHapus
    Balasan
    1. coba lah baca 3 kali, hehe
      paling artikel gak ke indeks itu saja, hihi...

      Hapus
  4. Asal jangan salah pengaturannya ya kang, robot txt ini agar bisa bekerja denagn baik..

    BalasHapus
    Balasan
    1. iya kang, kalau settingnya bener pasti bekerja dengan baik...

      Hapus
  5. Biasanya kalau kagak salahmah itu juga sering dipake supaya blog kita ndak dirayapi oleh auto visitor,,, tapi kurang tahu sihhh,,, XD

    BalasHapus
    Balasan
    1. hmmm, bisa jadi ya kang, kalau tidak mau dirayapi bot sih mending pakai user-agent googlebot jadi artikel cuman bisa di indeks google saja

      Hapus
  6. Kalau saya jujur dulu pernah juga sih mempergunakan robots txt.Dan sekarang saya lepas semua karena saya lebih suka di Webmaster Tool aja settingnya Kang..dan kayanya lebih enak..hhehee

    BalasHapus
  7. saya berpendapat.... hampir semua design template sudah di desain secara keseluruan dari pembuatnya terkait entah itu seo atau pun tag h1 sampai h5 serta elemen Robots.txt gitu Mas...

    BalasHapus
    Balasan
    1. iya betul mas, sekarang template blog rata-rata sudah pakai meta tag robots

      Hapus
  8. penerapan robot.txt yang benar akan membantu optimasi seo blog kita, saya pernah salah pasang robot.txt, walhasil blog saya banyak kerusakan link T_T

    BalasHapus
    Balasan
    1. nah kalau mau pasang robots txt sih bagusnya pas awal-awal bikin blog atau kalau masih kontennya sedikit, karena kalau sudah banyak bisa-bisa yang keblokir linknya banyak juga.

      Hapus
  9. Saya belum pernah mncobanya gan, lain waktu ane coba lah robot ini

    BalasHapus
  10. OHW...default blogger dimatikan robot txtnya...saya sih gak pernah utak atik ini mas takut salah malah trafik turun deh soalnya dengan default saja trafik dah lumayan

    BalasHapus
    Balasan
    1. iya mas, robots txt secara default dalam posisi tidur, kalau sampai di bangunkan hemm... wkwk

      Hapus
Jika ada yang masih kurang jelas, silahkan untuk bertanya pada kolom komentar di bawah ini atau dengan menghubungi kami di halaman kontak.

1. Centang kotak Notify me untuk mendapatkan notifikasi komentar.
2. Komentar kami moderasi, dan tidak semuanya dipublish.
3. Semua komentar dengan menambahkan link akan dihapus dan tidak akan dipublikasikan.

Iklan Atas Artikel

Iklan Tengah Artikel 1

Iklan Tengah Artikel 2

Iklan Bawah Artikel