Skip to main content

Cara Mengatasi URL yang Dicekal Robot.txt

Cara Mengatasi URL yang Dicekal Robot.txt
Cara Mengatasi URL Dicekal Robot.txt - Pada kali ini saya akan membahas bagaimana cara mengatasi url yg dicekal robot.txt atau menghapus pencekalan url robot.txt. Blog baru sering mengalami kejadian di mana ada url dicekal. Ini akan berdampak besar pada hasil pencarian google akan konten blog anda. Dimana konten tidak akan di akses ada di crawl oleh robot karena ada perintah untuk tidak mengakses konten tersebut. Url dicekal robot dapat dilihat melalui webmaster tool. Pada halaman webmaster, pilih menu perayapan kemudian pilih url yg dicekal. Pada halaman tersebut akan nampak jumlah url konten blog anda yg dicekal oleh robot. Bagaimana cara mengatasi url yg dicekal robot.txt, simak penjelasannya di bawah ini.

Cara Mengatasi URL Dicekal Robot.txt

Pada dasarnya format robot.txt ketika anda baru memulai blog akan terlihat seperti di bawah ini.

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://tapike.com/feeds/posts/default?orderby=updated

Tag Disallow di atas memerintahkan robot.txt untuk tidak mengakses halaman seperti /search/label/blogger dan halaman lain yg sama. Nah bagaimana cara mengatasi pencekalan url simak caranya.
  • Login ke akun blogger anda.
  • Pada dashboard pilih menu setelan > Preferensi penelusuran
  • Pada kolom Perayap dan pengindeksan,
  • Klik Edit pada robots.txt khusus.
  • Masukan kode dibawah ini.
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow:
Allow: /
Sitemap: http://tapike.com/feeds/posts/default?orderby=updated
  • Kemudian klik simpan
Tulisan yg berwarna merah silahkan anda ubah dengan url blog anda. Pada kode di atas kita hanya menghilang tag /search. Dalam 2 hari kemungkinan url yg dicekal akan terindeks kembali. Demikianlah ulasan saya mengenai cara mengatasi url yg dicekal robot.txt atau cara menghapus pencekalan url robot.txt. Semoga artikel ini dapat bermanfaat bagi kita semua.

Comments

Popular posts from this blog

10 Jembatan Paling Terkenal Di Dunia

10 Jembatan Paling Terkenal Di Dunia - Jembatan merupakan sebuah sarana untuk menyeberangi sungai ataupun lautan. Jembatan paling terkenal di dunia berikut mungkin adalah jembatan terpanjang, jembatan tertinggi di dunia. Banyak wisatawan dari penjuru dunia datang hanya untuk melihat maupun berfoto diatas jembatan ini. Berikut adalah 10 jembatan paling terkenal di dunia . 1. Jembatan Golden Gate, Amerika Serikat Jembatan paling terkenal pertama adalah jembatan Golden Gate. Jembatan Golden Gate (Golden Gate Bridge) menghubungkan antara San Fransisco dengan California. Jembatan ini memiliki panjang keseluruhan sekitar 2.727 meter dan tinggi 230 meter diatas permukaan laut. Jembatan Golden Gate dibuka pertama kali pada tahun 1937 dan merupakan jembatan paling terkenal serta menjadi daya tarik wisata paling populer di San Francisco. 2. Jembatan Menara, Inggris Jembatan paling terkenal kedua adalah jembatan Menara. Jembatan Menara (Tower Bridge) dibangun pada tahun 1886 dan ...

10 Danau Paling Unik Di Dunia

10 Danau Paling Unik Di Dunia - Danau adalah sebuah genangan air yg besar dan memiliki kedalaman yg cukup untuk kehidupan hewan air. Kebanyakan danau hampir sama persis di seluruh dunia, namun berbeda dengan danau paling unik dibawah ini. Danau unik ini memiliki warna, bentuk dan keadaan yg unik sehingga masuk kedalam daftar danau terunik. Penasaran, berikut 10 danau paling unik di dunia . 10 Danau Paling Unik Di Dunia Danau Hillier, Australia Danau paling unik pertama adalah danau Hilier. Danau Hillier atau sering disebut Pink Lake (danau merah muda) adalah sebuah danau air garam yg terletak di pinggiran laut Goldfields-Esperance, Australia. Danau Hillier dengan panjang 600 meter dan lebar 250 meter memiliki keunikan karena airnya yg berwarna merah muda. Banyak pendapat mengatakan warna merah muda pada air danau tsb disebabkan oleh alga atau konsentrasi air asin yg sangat tinggi. Namun airnya tidak selalu berwarna merah muda, tergantung suhu, salinitas dan kondisi cahay...

10 Mobil Termahal Di Dunia

10 Mobil Termahal Di Dunia - Mobil merupakan kendaraan roda empat berbahan bakar bensin atau solar. Tidak seperti motor, mobil dapat mengangkut lebih dari dua orang dan dapat melindungi pengendara dari hujan dan panas. Di indonesia sendiri mobil sering di anggap sebagai tanda kekayaan dan kesuksesan seorang. Tapi apakah orang kaya Indonesia bisa membeli mobil termahal di dunia di bawah ini. Berikut 10 mobil termahal di dunia tahun 2014 versi Forbes. Mobil Mercedes-Benz CL65 AMG Coupe Negara Asal: Jerman Mesin: 621-hp, 6.0-liter, bi-turbo V-12 0-60 mph: 4.2 detik Harga : $ 215.500  Mobil Aston Martin Vanquish Negara Asal: Inggris Mesin: 565-hp, 6.0-liter V-12 0-62 mph (yaitu, 100 km per jam): 4,1 detik Harga: $ 279.995  Mobil Bentley Mulsanne Negara Asal: Inggris Mesin: 505-hp, 6.75-liter, twin-turbo V-8 0-60 mph: 5.1 detik Harga : $ 298.900  Mobil Rolls-Royce Phantom Wheelbase Negara Asal: Inggris Mesin: 453-hp, 6.75-liter V-12 0-60 mph: 5.8 detik Harga :...