Skip to main content

Cara Mengatasi URL yang Dicekal Robot.txt

Cara Mengatasi URL yang Dicekal Robot.txt
Cara Mengatasi URL Dicekal Robot.txt - Pada kali ini saya akan membahas bagaimana cara mengatasi url yg dicekal robot.txt atau menghapus pencekalan url robot.txt. Blog baru sering mengalami kejadian di mana ada url dicekal. Ini akan berdampak besar pada hasil pencarian google akan konten blog anda. Dimana konten tidak akan di akses ada di crawl oleh robot karena ada perintah untuk tidak mengakses konten tersebut. Url dicekal robot dapat dilihat melalui webmaster tool. Pada halaman webmaster, pilih menu perayapan kemudian pilih url yg dicekal. Pada halaman tersebut akan nampak jumlah url konten blog anda yg dicekal oleh robot. Bagaimana cara mengatasi url yg dicekal robot.txt, simak penjelasannya di bawah ini.

Cara Mengatasi URL Dicekal Robot.txt

Pada dasarnya format robot.txt ketika anda baru memulai blog akan terlihat seperti di bawah ini.

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://tapike.com/feeds/posts/default?orderby=updated

Tag Disallow di atas memerintahkan robot.txt untuk tidak mengakses halaman seperti /search/label/blogger dan halaman lain yg sama. Nah bagaimana cara mengatasi pencekalan url simak caranya.
  • Login ke akun blogger anda.
  • Pada dashboard pilih menu setelan > Preferensi penelusuran
  • Pada kolom Perayap dan pengindeksan,
  • Klik Edit pada robots.txt khusus.
  • Masukan kode dibawah ini.
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow:
Allow: /
Sitemap: http://tapike.com/feeds/posts/default?orderby=updated
  • Kemudian klik simpan
Tulisan yg berwarna merah silahkan anda ubah dengan url blog anda. Pada kode di atas kita hanya menghilang tag /search. Dalam 2 hari kemungkinan url yg dicekal akan terindeks kembali. Demikianlah ulasan saya mengenai cara mengatasi url yg dicekal robot.txt atau cara menghapus pencekalan url robot.txt. Semoga artikel ini dapat bermanfaat bagi kita semua.
Labels:

Comments

Post a Comment

Popular posts from this blog

10 Jembatan Paling Terkenal Di Dunia

10 Jembatan Paling Terkenal Di Dunia - Jembatan merupakan sebuah sarana untuk menyeberangi sungai ataupun lautan. Jembatan paling terkenal di dunia berikut mungkin adalah jembatan terpanjang, jembatan tertinggi di dunia. Banyak wisatawan dari penjuru dunia datang hanya untuk melihat maupun berfoto diatas jembatan ini. Berikut adalah 10 jembatan paling terkenal di dunia . 1. Jembatan Golden Gate, Amerika Serikat Jembatan paling terkenal pertama adalah jembatan Golden Gate. Jembatan Golden Gate (Golden Gate Bridge) menghubungkan antara San Fransisco dengan California. Jembatan ini memiliki panjang keseluruhan sekitar 2.727 meter dan tinggi 230 meter diatas permukaan laut. Jembatan Golden Gate dibuka pertama kali pada tahun 1937 dan merupakan jembatan paling terkenal serta menjadi daya tarik wisata paling populer di San Francisco. 2. Jembatan Menara, Inggris Jembatan paling terkenal kedua adalah jembatan Menara. Jembatan Menara (Tower Bridge) dibangun pada tahun 1886 dan ...
Post a Comment
Read more

10 Mobil Termahal Di Dunia

10 Mobil Termahal Di Dunia - Mobil merupakan kendaraan roda empat berbahan bakar bensin atau solar. Tidak seperti motor, mobil dapat mengangkut lebih dari dua orang dan dapat melindungi pengendara dari hujan dan panas. Di indonesia sendiri mobil sering di anggap sebagai tanda kekayaan dan kesuksesan seorang. Tapi apakah orang kaya Indonesia bisa membeli mobil termahal di dunia di bawah ini. Berikut 10 mobil termahal di dunia tahun 2014 versi Forbes. Mobil Mercedes-Benz CL65 AMG Coupe Negara Asal: Jerman Mesin: 621-hp, 6.0-liter, bi-turbo V-12 0-60 mph: 4.2 detik Harga : $ 215.500  Mobil Aston Martin Vanquish Negara Asal: Inggris Mesin: 565-hp, 6.0-liter V-12 0-62 mph (yaitu, 100 km per jam): 4,1 detik Harga: $ 279.995  Mobil Bentley Mulsanne Negara Asal: Inggris Mesin: 505-hp, 6.75-liter, twin-turbo V-8 0-60 mph: 5.1 detik Harga : $ 298.900  Mobil Rolls-Royce Phantom Wheelbase Negara Asal: Inggris Mesin: 453-hp, 6.75-liter V-12 0-60 mph: 5.8 detik Harga :...
Post a Comment
Read more

Siapakah Sosok Penemu Internet

Siapakah Sosok Penemu Internet - Internet adalah hal yang lumrah pada saat ini. Semua golongan masyarakat sudah mulai menggunakan internet dalam beraktivitas. Tapi kebanyakan orang menggunakan internet untuk berkomunikasi atau hanya sekedar melihat berita-berita terbaru dari penjuru dunia. Hadirnya berbagai macam sosial media pun turut menyemarakkan pengguna internet di dunia. Ada banyak sisi positif dan negatif dari adanya internet. Tapi itu semua tergantung pribadi kita bagaimana kita menggunakan internet dengan sebaik-baiknya. Tapi setelah beberapa lama anda menggunakan internet, apakah anda tahu siapa sosok di balik penemu internet yang semakin memajukan teknologi ?. Semua orang memakai internet tapi tidak pernah tau siapa penemu internet. Boleh jadi anda juga demikian, bukan ?. Leonard Kleinrock, Bapak Penemu Internet Leonard Kleinrock, adalah tokoh atau ilmuan yang dijuluki sebagai bapak internet. Julukan ini melekat pada dirinya sebab ia memang tokoh penemu internet. Leonard Kl...
Post a Comment
Read more