4.6( 8864)

UnlimitSoft

Beranda / tutorial / Cara Setting Robots.txt di Blogger dan Webmaster 2012

Cara Setting Robots.txt di Blogger dan Webmaster 2012

Notifikasi Penting
Maaf, UnlimitSoft mengalami sedikit masalah internal, dan tidak terupdate. Dipindahkan sementara ke www.Newsinfopedia.org





Sudah cukup lama saya tidak mengupdate artikel atau tutorial. Jadi kali ini saya gunakan untuk update itu saja, saya cukupkan dulu software untuk saat ini.
Kalian mungkin para blogger sudah tahu yang namanya Robots.txt, dan mungkin sudah menggunakannya. Tetapi alangkah baiknya kalian perhatikan lagi dan cek kembali apakah settingan Robots.txt-nya sudah benar apa belum.
Apabila kita salah Setting dengan yang satu ini maka FATAL akibatnya, karena apabila kalian salah setting maka Blog/Situs kalian akan MENGHILANG dari INDEKS Search Engine, baik Google, Altavista, Yandex, Bing, dll.
Namun apabila tidak disetting Robots.txt juga ada pengaruhnya, seperti Indeks yang lamban, dan Search Engine tidak terlalu mempertajan Referernya.

Ingat! Cara yang saya tampilakan harus diperhatikan benar-benar, karena APABILA SALAH, FATAL AKIBATNYA pada Blog/Situs kalian. Ini sudah diperingatkan saat kalian akan melakukan setting nanti :


Baca pesan diatas benar-benar, karena apabila terjadi kesalahan saya tidak dapat berlaku apa-apa.

Baiklah langsung kita masuk ke Tutorial. Ini hanya ada pada Blogger New Interface. Dan saya harap semuanya sudah menggunakan New Interface tersebut.

1. Setting pada Blogger

Masuk ke Setting > Search Preferences :

Click image For complete view

Pada "Custom robots.txt" klik Edit. Kemudian masukan teks berikut : Tulislah agar tidak salah point.

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search?updated-min=
Disallow: /search?updated-max=
Allow: /

Sitemap: www.alamatsitus/blogkamu.com/feeds/posts/default?orderby=updated

teks yang berwarna kuning diatas gantilah dengan alamat Situs/Blog kamu. Apabila Situs/Blog kamu menggunakan domain berbayar seperti com, net, org, dll, maka masukan dengan menggunakan "www" tanpa "http://" tapi apabila menggunakan domain gratis seperti blogspot, maka tulis tanpa "www" tetapi menggunalan "http://".

Lalu pastekan pada kotak yang tersedia disana, sehingga akan tampak seperti ini:

Click image for complete view

Lalu klik "Save"
Maka langkah setting di blogger selesai.

2. Setting pada Webmaster

Silakan pergi menuju Webmaster Google kamu (versi bahasa Indonesia), Langsung klik pada tab "Kesehatan" > "URL yang Dicekal". Maka akan ada dua kotak seperti gambar dibawah, lalu pastekan lagi teks Robots.txt tadi pada kotak yang atas :

Click image for complete view

Kotak yang kedua (dibawah) kamu isi dengan URL yang dicoba, disini saya memasukan URL saya sendiri yaitu : http://unlimitsoft.blogspot.com karena apabila mencoba dengan URL yang lain hasilnya nihil dan sudah saya coba.
Pada Agen-Pengguna : Silakan pilih yang mana saja, disini saya menggunakan Googlebot Mobile.
Kalau sudah kamu masukan keduanya, Klik tombol "Tes". Maka hasil yang saya peroleh adalah :

Click image for complete view

URL saya telah diindeks oleh Googlebot dan Googlebot Mobile. Apakah ini berarti robots.txt telah berhasil?           
Untuk memperjelas apakah robots.txt ini mengindeks dan mengizikan blog/situs dalam pencarian maka saya mencoba cek dengan salah satu tools SEO, dan hasilnya seperti ini :

Ini adalah teks robots.txt yang kita gunakan tadi :

Click image for complete view

Dan ini hasil untuk teks setting robots.txt diatas :

Click image for complete view

Maka selesailah sudah dengan ini setting Robots.txt pada Blogger dan Webmaster. Semoga ini bisa dipelajari oleh para pengguna Blogger baru, dan lebih teliti lagi juga lebih memperhatikan efek-efeknya.

Sekali lagi, pasanglah Robots.txt apabila kalian sudah mahir dengan bahasa-bahasa rahasia ataupun teks, md5, script, hash, dll. Misalkan pada teks robots.txt disana tertulis :

"User-agent: *"  dan ada juga  "Allow: /" 

Tanda yang saya beri warna merah seperti bintang (*) adalah supaya semua diperbolehkan akses/indeks secara global. Sedang slash (/) supaya melakukan blok tertentu atau indeks. Itupun sepengetahuan saya, apabila ada kesalahan silakan dibenarkan diform komentar, karena saya juga bukan manusia yang tahu. (red)
| Langganan UnlimitSoft
Labels: , ,

61 comments dapat Anda baca di bawah ini atau tambahkan satu.

  1. PT Bintang Wangi IndotransSeptember 29, 2012 at 12:50 PM

    ow di google webmasternya juga disetting begitu ya... makasih lho infonya bos

    ReplyDelete
  2. AsukaSeptember 29, 2012 at 3:47 PM

    Pengetahuan baru nih. Nanti saya coba.

    ReplyDelete
  3. UnknownSeptember 29, 2012 at 3:50 PM

    saking fatalnya saya ragu untuk memasangnya di blog saya ini sobat...

    ReplyDelete
  4. AnonymousSeptember 29, 2012 at 4:18 PM

    <- lah baru nyadar...

    settingnya di blogger apa di webmaster atau 2-2nya ???

    ReplyDelete
  5. Muhammad Iqbal KSeptember 29, 2012 at 7:51 PM

    ijin mempraktekan sob :)

    thanks ya...

    ReplyDelete
  6. vlog media newsSeptember 29, 2012 at 8:34 PM

    Saya Belum berani coba trik ini gan ntar takut salah..tambah berabe.

    ReplyDelete
  7. Kang MuroiSeptember 29, 2012 at 9:13 PM

    sangat berguna buat ane yang masih belajar seo sobat, tengkyu sharingnya

    ReplyDelete
  8. Rohmad Nur HidayatSeptember 30, 2012 at 2:02 AM

    Bagus nih sob. Makasih

    ReplyDelete
  9. MauTahuTidakSeptember 30, 2012 at 2:22 AM

    Detective Conan Chapter 831 Bahasa Indonesia

    ReplyDelete
  10. zachflazzSeptember 30, 2012 at 2:34 AM

    ya ampun, jago banget ya soal sistem begini. asli deh kemampuan seperti ini nggak bakalan sia-sia dimiliki. hebat banget. sedangkan saya, banyak manggut2 aja baca postingan ini.

    ReplyDelete
  11. UnknownSeptember 30, 2012 at 2:53 AM

    untuk lebih bagusnya di blogger, tapi supaya sinkron bisa dua2 nya..

    ReplyDelete
  12. UnknownSeptember 30, 2012 at 3:02 AM

    @Cendekiawan IT : yo'i bro... :D

    ReplyDelete
  13. UnknownSeptember 30, 2012 at 3:02 AM

    @Yuyud : silakan bro dicoba nanti :D

    ReplyDelete
  14. UnknownSeptember 30, 2012 at 3:04 AM

    @Asis Sugianto : hehe kalo ragu jangan dipasang dulu sob.. :D

    ReplyDelete
  15. UnknownSeptember 30, 2012 at 3:05 AM

    @Cirebon Cyber : oke deh sob silakan.. :D asal jgan asal-asalan.. :)

    ReplyDelete
  16. UnknownSeptember 30, 2012 at 3:06 AM

    @cik awi : hehe gapapa sob, kalo masih blum brani.. :D

    ReplyDelete
  17. UnknownSeptember 30, 2012 at 3:08 AM

    @Muro'i : oke sob.. :D

    ReplyDelete
  18. UnknownSeptember 30, 2012 at 3:10 AM

    @Rohmad : iya sob masama.. :D

    ReplyDelete
  19. UnknownSeptember 30, 2012 at 3:11 AM

    @Mau tahu : oke brow, ntar saya kesana.. :D kalo d.conan aku udah serng liat animenya di tv, khususnya di indosiar.. :D hehe aku suka kaya onepiece.

    ReplyDelete
  20. UnknownSeptember 30, 2012 at 3:12 AM

    @zachflazz : hehe jgn gitu brow.. :D nyantai aja kita sama2 blogger kok.. :D aku juga masih pemula.

    ReplyDelete
  21. AnonymousSeptember 30, 2012 at 4:25 AM

    tapi bos yang di webmaster itu gak ada error sama sekali apa harus diganti atau dibiarkan saja o_O

    ?????

    ReplyDelete
  22. Rohis FacebookSeptember 30, 2012 at 5:26 AM

    nyimak aja sob.., takut tuk pasang soalx sy gk jago2 amat.., thx ilmux ya... *smile

    ReplyDelete
  23. UnknownSeptember 30, 2012 at 7:13 AM

    @Limit Post: kalau tidak ada error atau crawlnya tidak ada sama sekali, silakan dibiarkan saja, tidak usah disett juga gk papa bro.

    ReplyDelete
  24. UnknownSeptember 30, 2012 at 7:15 AM

    @Rohis : hohoho gk papa sob.. :D santai aja,, kalo masih takut gk usah di sett dulu,, ntar malah ilang lagi blognya dari SE. :D

    ReplyDelete
  25. AsukaSeptember 30, 2012 at 4:41 PM

    Mampir lagi disini sobat.

    ReplyDelete
  26. cerita anak kostSeptember 30, 2012 at 5:24 PM

    wah ane ga pernah ngotak atik ini gan, terlalu riskan. jadi ane biarin aja pa adanya, tapi boleh di coba lain kali. tenkyu ya.

    ReplyDelete
  27. BlogS of HariyantoOctober 1, 2012 at 1:50 AM

    asyik...akhirnya saya menemukan cara setting robotstxt di blog super ini :)

    ReplyDelete
  28. PopiOctober 1, 2012 at 1:50 AM

    waduh. Jadi inget waktu Diklat bikin Web dulu! Saya sampe merengut saking bingungnya dengan rumus2 dan kode html

    ReplyDelete
  29. Vpie ◥TwekzLibz◤ MahaDhifaOctober 1, 2012 at 2:04 AM

    . . benerin punya aq donk. huhh . .

    ReplyDelete
  30. vmediakomOctober 1, 2012 at 2:25 AM

    mantab sob penjelasannya sangat komplit, sebelumnya saya sudah set juga robots.txt cuma kotak kedua pada webmaster yang belum. terima kasih sharenya.. nanti tak coba :)

    ReplyDelete
  31. UnknownOctober 1, 2012 at 9:49 AM

    mnTap sob, langsung ane coba,, makasih sebelunya

    ReplyDelete
  32. Vpie ◥TwekzLibz◤ MahaDhifaOctober 1, 2012 at 10:07 AM

    . . aq gak paham ttg kayak ginian. huhh . .

    ReplyDelete
  33. AsukaOctober 1, 2012 at 8:06 PM

    Kunjung lagi disini. :D

    ReplyDelete
  34. UnknownOctober 1, 2012 at 11:37 PM

    @Yuyud : hehe tengkyu sob.. :D mampir terus nih.. :D

    ReplyDelete
  35. UnknownOctober 1, 2012 at 11:38 PM

    @cerita anak kost : hehe gpp bro.. :D asalkan itu bagus2 saja buat blog bro sendiri..

    ReplyDelete
  36. UnknownOctober 1, 2012 at 11:39 PM

    @Blogs of Hariyanto : hoho kita sama2 berbagi kok bang.. :D

    ReplyDelete
  37. UnknownOctober 1, 2012 at 11:40 PM

    @Popi : hehe awas mba jangan sering mangut2 kalo diberi penjelasan.. :D namanya juga blajar kok sob.. :)

    ReplyDelete
  38. UnknownOctober 1, 2012 at 11:41 PM

    @VPie : hhehe silakan dibenerin bro..:D sndiri aja ya.. atau sama om masternya kalo ada.. :D

    ReplyDelete
  39. UnknownOctober 1, 2012 at 11:43 PM

    @vmediakom : hehe gk papa sob.. :D kalo kamu gk bisa sett di WBM-nya juga gk papa, karena yang vital pada bloggernya.

    ReplyDelete
  40. UnknownOctober 1, 2012 at 11:45 PM

    @Aldio Blog : silakan bro..

    ReplyDelete
  41. UnknownOctober 1, 2012 at 11:46 PM

    VPie : hehe gk salahnya sob.. :D kan masih blajar. ;)

    ReplyDelete
  42. UnknownOctober 1, 2012 at 11:48 PM

    @Yuyud : hehe trima kasih bgt sob mau kunjungan terus nih.. :D

    ReplyDelete
  43. Hermawan.usOctober 12, 2012 at 11:06 PM

    ikut tanya ya gan, kalau di webmaster bagian URL yang dicekal 923 itu tandanya apa ya?
    masih kurang paham nih
    salam kenal dan terimakasih sudah berbagi

    ReplyDelete
    Replies
    1. UnknownOctober 13, 2012 at 5:58 PM

      artinya pada blog kamu, ada 923 url yang di disallow / tidak dijinkan untuk robot merayapinya.. :D

      kalo diindeks sih bisa saja masuk, cuman tidak ada robot yang membaca.. :D

      Delete
  44. Tropical WoodOctober 26, 2012 at 7:21 AM

    Makasih gan infonya

    ReplyDelete
  45. UnknownNovember 4, 2012 at 11:46 AM

    sob nany nih...
    berarti sitemap kita yg ini ya :
    xxxx.com/feeds/posts/default?orderby=updated
    nah kalo sitemapnya udah di terima
    baru bisa robotnya di giniin ya .com/feeds/posts/default?orderby=updated

    trims balasannya

    ReplyDelete
    Replies
    1. UnknownNovember 8, 2012 at 11:45 PM

      iya sob.. :D itu untuk robots servernya. :D
      kalo udah diterima bisa dicek dengan cara :

      tulis adress blog kamu yg udah disitemap tadi seperti ini :

      http://alamatkamu.blogspot.com/robots.txt

      atau

      www.alamatkamu.com/robots.txt (bagi yg punya domain)

      contoh punya saya :

      http://unlimitsoft.blogspot.com/robots.txt (bisa diliat)

      Delete
  46. amirNovember 7, 2012 at 5:14 AM

    Saya coba ya caranya, trims!

    ReplyDelete
  47. UnknownNovember 8, 2012 at 11:45 PM

    yoi sob silakan.. :D

    ReplyDelete
  48. arieNovember 10, 2012 at 12:52 AM

    ini untuk blogspot ya sob???

    saya baru tahu kalau blogspot kini bisa dengan mudah setting robots.txt,,

    keren artikelnya sob, jika berkenan ditunggu kunjungan baliknya, saya pun pernah menulis artikel seperti ini namun khusus untuk website dan wordpress, bukan untuk blogspot.

    salam kenal sob!

    ReplyDelete
    Replies
    1. UnknownNovember 10, 2012 at 3:18 AM

      hihi iya sob.. :D aku udah baca, itu lebih lengkap lagi sob daripada artikel punyaku diatas.. :D punya kamu jmepolan 5 deh.. :D

      Delete
  49. Media Berita TerhangatNovember 12, 2012 at 4:17 AM

    Artikelnya bermanfaat sekali untuk newbie seperti saya mas, terima kasih sudah berkenan sharing info yang bermanfaat

    ReplyDelete
  50. UnknownNovember 12, 2012 at 5:16 AM

    Gan mau tanya,
    kalau tidak ada eror / crawlnya tapi ane set robot.txt gak apa apa kan ?

    thank

    ReplyDelete
    Replies
    1. UnknownNovember 12, 2012 at 6:17 AM

      gpp gan itu bagus, karna agan gk punya crawl.. :D

      Delete
  51. Download GratisNovember 16, 2012 at 1:45 AM

    Mantap Buanget gan...
    Salam kenal:
    Amien Melody

    ReplyDelete
  52. AnonymousNovember 26, 2012 at 3:28 AM

    Tool seo nya namanya apa gan

    ReplyDelete
    Replies
    1. UnknownNovember 26, 2012 at 11:03 PM

      hhee ane minta email agan deh.. nanti biar ane beri namanya di email aja ya.. :D

      Delete

Harap berkomentar sesuai dengan isi posting & komentar spam akan dihapus. Anda dapat menggunakan tag HTML: <a href=""></a>, <strong></strong>, <b></b>, <em></em>, <i></i>.

Subscribe to: Post Comments (Atom)