Crawling adalah Cara Googlebot menemukan halaman yang diperbaharui dan akan menambahkannya ke indeks Google. Proses penjelajahan dimulai dengan sebuah daftar URL halaman web, yang dihasilkan dari proses berdasarkan perayapan sebelumnya ( indeks ), dan ditambah dengan Sitemap data yang diberikan oleh webmaster. Googlebot akan melihat isi website tersebut, mendeteksi link pada setiap halaman dan menambahkannya ke dalam daftar perayapan halaman ( indeks ) . Situs baru, dan perubahan pada situs yang ada, dan link mati dicatat dan digunakan untuk memperbarui indeks Google.
Catatan
: Untuk mengetahui LINK mati atau rusak sangatlah sulit. Pemecahannya adalah
buang artikel lama Anda ( yang menurut Anda lama atau sudah kadaluarsa
informasinya ) karena tidak menutup kemungkinan terdapatnya link mati atau
rusak. Umumnya bagi BLOG penyedia download software atau banyak menggunakan
eksternal link.
Cara
mengatasi crawl error menggunakan webmaster tool, salah satu cara optimasi blog adalah
dengan cara menghapus kesalahan perayapan yang terjadi saat Google melakukan
crawling terhadap blog Anda. Semua berjuan agar proses crawling Blog Anda menjadi
lancar, Setiap kesalahan perayapan (crawl error) akan menghambat dan mengganggu
search engine dalam proses meng-crawl dan mengindeks blog Anda.
Penyebab
paling umum crawl error
adalah menghapus artikel yang sudah dipublish dan telah terindeks oleh google. Ketika
seseorang mengklik link ( yang sudah anda hapus ) maka Mesin Pencari Google akan mengindeks link
error dan akan muncul halaman yang bertulisan Crawl Error 404 Not Found,
artinya URL yang diminta tidak ditemukan.
Jika crawl
error terjadi pada kotak komentar
penyebabnya ketika ada pengunjung yang meninggalkan link artikelnya di blog Anda
dan artikel tersebut dihapus oleh pemiliknya maka muncul peringatan Url Not
Found (tidak ditemukan).
BACA JUGA >> Cara Mengoptimalkan SEO di tahun 2016
MENGATASI CRAWL ERROR PADA BLOG
► 1. Login ke halaman Dashboard Google Webmaster Tools.
► 2. Pilih
blog yang ingin anda periksa
► 3. Kemudian
pada sidebar sebelah kiri, klik KESEHATAN
► KESALAHAN
PERAYAPAN
► 4. Centang
semua crawl error
► 5. Klik
Tandai sebagai yang Telah diperbaiki
► 6. Kemudian
Klik Ok
Akan ada pesan : Kesalahan
ini tidak akan dicantumkan lagi (tetapi mungkin akan muncul kembali jika
masalah tidak diatasi)
Jadi
jika pada kesempatan berikutnya anda mengecek lagi tapi masih tersisa beberapa
crawl error yang tidak bisa diperbaiki. Maka lakukan langkah 1 (satu) sampai 3
(tiga) diatas, sehingga langkah yang ke
► 4. Klik Not
Found.
► 5. Anda
akan dibawa ke halaman Crawl Errors. Di halaman ini akan ditunjukkan URL yang
Not Found. Kemudian Anda Copy URL tersebut.
► 7. Lalu Paste URL Not found yang dicopy tadi,
Kemudian klik Terus ( Continue )
► 8. Lalu
akan ada 3 pilihan dalam menghapus URL
► URL akan
dihapus dari hasil pencarian Google dan cache
► URL akan
dihapus dari cache saja
► URL akan
dihapus dari direktori Google
► 9. Kemudian
Klik untuk Kirim Permintaan
Error 404 100% disebabkan oleh link rusak atau broken link
BACA JUGA >> Cara Cepat Mencari dan Menghapus Link Rusak ( Broken Link ) Di Blog
BACA JUGA >> Cara Cepat Mencari dan Menghapus Link Rusak ( Broken Link ) Di Blog
thanks infonya gan....
ReplyDeletewww.agaric-pro.com
This comment has been removed by the author.
Deletethanks gan, penjelasannya cukup julas, sekarang saya ngerti cara ngatasinya,,, salam kenal
ReplyDeleteterima kasih atas kunjungannya... salam kenal juga
Deletekunjungan siang gan
ReplyDeleteikut belajar disini, banyak link error di webmaster soalnya..
DeleteTerima kasih untuk artikel nya sangat bagus gan. Sangat membantu.
ReplyDeletesaya mau daftarin di webmaster, tapi hasilnya CRAWL ERROR, bisa bantu ????
ReplyDeleteklo cuma daftar gk ada cral error Gan....
DeleteThanks Infonya gan.... Salam kenal
ReplyDeletejamesfikri.blogspot.com
kalau langsung di ambil tindakan mark as fixed apakah akan berpengaruh pada perayapan juga?
ReplyDeletetidak Gan..!!!! Perayapan berpengaruh ketika kita salah dalam menerapkan robot.txt..termasuk salah pilih apa yang kita centang didalamnya... makanya gooogle memperingatkan untuk berhati2 mererapkan robot.txt
Deletemakasih infonya gan, jangan lupa kunjungi blog saya di http://tips-erma.blogspot.com/
ReplyDeleteMbak Ermawati knp Blog tidak ada kolom komentar..??? kurang SEO lha
DeleteMasih Ingat dengan Power balance yang katanya bisa menambah Stamina seseorang ? yuk initip ulasan lebih salam di :
ReplyDeletehttp://goo.gl/7jdY3d
Masih Ingat dengan Power balance yang katanya bisa menambah Stamina seseorang ? yuk initip ulasan lebih salam di :
ReplyDeletehttp://goo.gl/7jdY3d
baguss
ReplyDeletenice info brohh.. efektif juga pake cara itu....
ReplyDeleteregrats Jasa Buat Website
jasabuatwebsite.co
suwun suwun
makasih sob,
ReplyDeletesatu lagi nih sob,, kalo misalnya harus dihapus, berarti artikel yang sudah saya posting, kehapus juga ya sob...
Artikel di hapus sudah barang tentu posting terhapus atau tidak lagi muncul, namun links-nya akan tetap ada, karena sebelumnya telah ter-indek oleh google.
DeleteMas Bambang memang kehapus, namun linknya tetep ada...ini yang nantinya akan menjadi link error atau yang biasa kita temui error 404 bgt.. nah Sampean harus rajin lihat di webmaster untuk menghapus link error "404" lewat menu crawl error yang tersedia
ReplyDeletekadang lama bangets detect errorenya, napa tuh pak, kalo masalah remove url
ReplyDeletegue paling takut kalo maen remove url, paling gak berani saya tp sepertinya perlu dicoba kren kliatan mudah di lakukan, makasih ilmunya sob salam karimunjawa tour
kadang lama bangets detect errorenya, napa tuh pak, kalo masalah remove url
ReplyDeletegue paling takut kalo maen remove url, paling gak berani saya tp sepertinya perlu dicoba kren kliatan mudah di lakukan, makasih ilmunya sob salam
Iya memang lama untuk meng-FIX kan crawl error, CRAWL ini salah satu penyebabnya Anda pernah menghapus salah satu POSTING di BLOG Anda, sementara LINK posting yang ANda HAPUS masih tertanam pada Search Enggine GOOGLE.
ReplyDeleteKetika seseorang meng-klik LINK POSTING yang sudah terhapus maka akan muncul informasi ERROR 404, tetunya Anda pernah menjumpai hal seperti ini kan ????
Semoga sedikit penjelasan ini bisa membantu ..Thanks Kunjungannya Gan
nice info gan :)
ReplyDeleterefsablogs.blogspot.com
blog saya selalu crawl errornya banyak sekali, pening sekali saya dibuatnya
ReplyDeleteSering2 cek di Webmaster tool dan rajin bersih'in crawl errornya Mas Bro
DeleteDi webmaster tool, blog saya sering dapat notifikasi Kesalahan URL yang ditaut dari blog saya sendiri. Bagaimana solusinya?
ReplyDeleteSaya jelasin ya Gan,,
Deleteketika LINK yang di tautkan di Blog anda yang tadinya hidup ( link yg masih memiliki tautan )kemudian LINK tersebuh dihapus maka akan menjadi LINK MATI atau RUSAK.
ini yang disebut broken link.. umumnya banyak terdapat pada kolom komentar yaitu link link yang dipasang oleh pengunjung Blog Anda.
terima kasih infonya bos
ReplyDeleteTutorial yang sangat bagus dan ini menjadi tempat rujukan saya nanti. Terima kasih mas....
ReplyDeletebanyak sekali yang saya temukan kesalahan perayapan pada blog saya... sangat berpengaruh pada jumlah visitor...
ReplyDeletesukses selalu untuk blognya..
Salam:
www.miniblogger28.com
makasih sob salam kenal saya admn skipzen.blogspot.com
ReplyDeletemakasih dr http://bosinformasi.tk
ReplyDeleteasalamualaikum gan.
ReplyDeleteane sudah melakukan tutorial seperti di jelaskan alhamdulillah berhasil.
cuman kalo hapus url itu ngga berbahaya buat blog gan? thank informasinya.
hapus URL tidak aktif atau mati atau disebut broken link, ini malah menjadi manfaat jika dihapus ( umumnya banyak terpasang di kolom komentar blog )... Kalau itu URL yang memiliki tautan trus dihapus maka akan menjadi link rusak ( karena URL tak memiliki tautan lagi )
DeleteMakasih infonya. Salam kenal..
ReplyDeleteKunjungi juga blog saya di http://www.jendelailmu.net/
wah, terimakasih gan. di blog download lagu saya banyak banget kesalahan crawl gini. mudah mudahan bisa diperbaiki nih.
ReplyDeleteTerima kasih atas informasinya gan, izin coba
ReplyDeletesalam sukses Blog Remaja
dari tiga pilihan diatas bagusnya pilih yang mana gan? biar tidak diindex lagi ole google
ReplyDeletetemplate kita sama gan in4youlike.blogspot.com
ReplyDelete:))
ReplyDeleteSangat Membantu Gan, Thanks Infonya :D Visit http://stillhealthy.com/
ReplyDeletethanks atas infonya..
ReplyDeleteohya kenalin ini blog ane yang mau kunjungi http://whussaya.blogspot.co.id/ ya makasih
ReplyDeletebaru tahu saya, mksh ya bro
ReplyDeleteNice info mas bro ;)
ReplyDeleteijin blog walking yaaa...
www.zonasel.com
Terima kasih, informasinya sangat gamblang...
ReplyDeleteSaya baru saja migrasi dari blogspot ke wp dan banyak melakukan perubahan. Akibatnya banyak crawl error....
Makasih gan infonya
ReplyDeletesangat berguna karena sedang mencari caranya
Blog tentang payoneer gan
payoneerindonesiav.blogspot.co.id
artikel ini yang saya cari-cari untuk mengatasi masalah error di webmaster saya.
ReplyDeletemakasih y mas informasi sangat bermanfaat sekali bagi pemula.
Makasih Mas Cara Memperbaiki URL Crawl Error di WEBMASTER TOOLS berhasil Saya terapkan
ReplyDeletesuwun cak. Salam kenal. pasuruan ndi sampean cak? Aku dari kraton cak tp tinggal di gresik hehe...
ReplyDeleteThanks Kunjungannya... Mas Wahyudi, Rumah saya di belakang Giant " Poncol" Pasuruan.
DeleteMantab gab tutorialnya...
ReplyDeleteOia barangkali ada yang suka download2 lagu mp3 mp4 3gp flv wmv silahkan masuk ke www.duniapanda.com lagunya komplit, selalu update setiap hari.
thx gan..
ReplyDeletekunjung balik ye
www.carasayurdanbuah.web.id
mantab artikel nya kunjungan balik nya saya nantikan gan www.johanadsense.com
ReplyDeleteMakasih gan.. Membantu banget.. Crawl error saya terus meningkat smpai sekarang ini udah jadi 18 -_- www.ryandjide.com
ReplyDeleteTerimakasih gan infonya,,, ternyata blog download kerap mengalami masalah pada crawling.. ini karena versi software mengalami pembaharuan..
ReplyDeletewww.zonapendidikan.com
Harus satu-satu ya hapus link yang terdeteksi error di webmaster nya .. blog saya ada banyak sekali link error nya..
ReplyDeleteiya muzhas emang harus satu satu, http://spcenews.id/
Deletebagus banget euy http://togel12.wapka.mobi
ReplyDeleteGood bro http://targetlagu.id/
ReplyDeletePunya saya kadang sudah di delete tetep aja masih ada.. fyuhh
ReplyDeletetq...sangat membantu...
ReplyDeletefrom saudagar
http://www.wanshahstore.com
huhuhu...saya sampai pusing Kang memperbaiki error di webmaster. Belum lagi yang masalah image_url, nggak hilang padahal udah saya hapus.
ReplyDeleteOke, saya akan coba tips di atas. Terima kasih
Mantap abis tutorialnya....
ReplyDeleteUpdate! BW + Koment!
http://mas-mahendra.blogspot.co.id/2016/06/trik-seo-untuk-menghadapi-pembaruan.html
Gan ane udah pernah coba hal ini tapi pada akhirnya URL yg udah dihapus tetap aja muncul di Crawl Error, itu kenapa ya kira2?
ReplyDeleteNumpang majang pasang iklan di blog ane: http://www.kaskus-dimension.com
Artikelnya sangat membantu..
ReplyDeletehttp://memekpedia.com
KALAU MENGATASI URL YG DI CEKAL ROBOT GIMANA
ReplyDeleteMantap kebetulan saya habis menghapus beberapa postingan yang telh trindex google jadi menimbulkan error
ReplyDeleteSaya masih beum ngeeeh gan,,
ReplyDeleteAssalam'mualaikum Mas Usman Kurniawan,
ReplyDeleteSaya ada masalah pada Google webmaster tools -> HTML Improvements -> Duplicate meta descriptions, Short meta descriptions, and Duplicate title tags
Bisa bantu direct solved Mas ?
mohon pencerahannya,
Terima kasih.
Regards
Eky
Whatsapp : 085211999979
waalaikum salam warochmah
DeleteMas Eky kalau Web/Blog ketika kita cek diwebmaster tool tidak ada satupu web sempurna tanpa masalah ( termasuk crawl ) umumnya disebabkan LINK MATI yang tersimpan didalam komentar blog kita..
Mas alamat Blognya apa ? bisa di tuliskan di kotak komentar ?
terimakasih banyak atas informasinya
ReplyDeletetempat tidur anak
makasih gan, blog ane jadi bersih lagi nih
ReplyDeletehttp://www.mastahbloging.com/
Terimakasih informasinya dari artikel anda, tentang Bisnis software house berikut artikel yang terkait tersebut di PELUANG BISNIS SOFTWARE HOUSE YANG SEMUA SERBA DIGITAL
ReplyDeleteNB: Mohon tolong admin untuk di approve komentar saya, kita saling membantu saja...kalau tidak ada dirugiakan apa salahnya saling membantu,, untuk kepentingan Seo dan kepentingan pengunjung blog anda mendapatkan informasi yang terkait terimakasih admin
Saya sangat setuju dengan Error terlanjur index karena Post yg sudah dihapus...
ReplyDeleteyg kedua karena link yg ditanam itu broken, Maka saya sarankan jika menaruh link tarulah link anda sendiri dan diakun anda sendiri. misalnya di Google Drive atau 4Shared punya sendiri...
Bagus sangat informasi dari artikel ini..sy dari lokmanamirul.com
ReplyDeletealhamdulillah, nemu yang kucari. Trims advise via blogging masbro. Salam juga buat pasuruan CB komunitas yg akan menasional via baksosnya
ReplyDeleteartikelnya sangat membantu banyak. kunjungi juga kami ya gan http://jualfurnitureminimalis.com/
ReplyDeleteThaks gan info nya, sangat berguna untuk blogger newbie seperti saya.
ReplyDeletebonbitcoin.blogspot.com
thx
ReplyDeleteNah lho..Akhirnya ketemu juga..Dicoba dulu ah,.makasih kak info dan sharingnya.
ReplyDeleteOk. terimakasih infonya gan.
ReplyDeleteThanks gan,visit juga https://idekevin.blogspot.com
ReplyDeleteBang blog gw kan gw index tapi kok, URL tidak ada di google: terjadi error pengindexan. Itu gmna mengatasinya bang?
ReplyDelete