Pakar Semalt: Panduan Mencegah Google Dari Merangkak Peta Laman Lama

Semasa laman web anda berkembang, anda akan berusaha sebaik mungkin untuk mencari jalan untuk meningkatkan keterlihatan dan kredibilitinya di internet. Kadang-kadang, kesan bagaimana laman web kita berfungsi tetap ketinggalan, dan di sinilah kita harus memperhatikan.

Dapatkan petua berikut dari Max Bell, Pengurus Kejayaan Pelanggan Semalt , untuk mengelakkan Google merayap laman web lama.

Beberapa minggu yang lalu, salah seorang pelanggan saya memberitahu saya bahawa dia mempunyai laman web e-dagang. Ia melalui pelbagai perubahan: dari struktur URL hingga peta laman, semuanya diubah untuk menjadikan laman web lebih kelihatan.

Pelanggan menyedari beberapa perubahan pada Konsol Carian Google-nya dan mendapati terdapat kesalahan Rangkak di sana. Apa yang dia perhatikan bahawa terdapat sebilangan besar URL lama dan baru yang menghasilkan lalu lintas palsu. Sebilangan daripada mereka, bagaimanapun, menunjukkan kesalahan Access Denied 403 dan Not Found 404.

Pelanggan saya memberitahu saya bahawa masalah terbesar yang dia ada adalah peta laman lama yang ada di folder root. Laman webnya menggunakan pelbagai plugin Peta Laman Google XML sebelumnya, tetapi sekarang dia bergantung pada SEO SEO oleh Yoast untuk peta laman web tersebut. Berbagai plugin peta laman web lama, bagaimanapun, menimbulkan kekacauan untuknya. Mereka hadir di folder root bernama sitemap.xml.gz. Sejak dia mula menggunakan plugin Yoast untuk membuat peta laman untuk semua catatan, kategori halaman dan tag, dia tidak memerlukan plugin itu lagi. Malangnya, orang tersebut tidak menghantar sitemap.xml.gz ke Google Search Console. Dia hanya menyerahkan peta laman Yoastnya, dan Google juga merangkak peta laman lamanya.

Apa yang hendak merangkak?

Orang itu tidak memadamkan peta laman lama dari folder root, sehingga juga diindeks. Saya kembali kepadanya dan menjelaskan bahawa peta laman hanya merupakan cadangan tentang apa yang harus dijelajahi dalam hasil enjin carian. Anda mungkin berpendapat bahawa memadam peta laman web lama akan menghentikan Google daripada merangkak URL yang tidak berfungsi, tetapi itu tidak benar. Pengalaman saya mengatakan bahawa Google cuba mengindeks setiap URL lama beberapa kali sehari, memastikan bahawa kesalahan 404 itu nyata dan bukan kemalangan.

Googlebot dapat menyimpan memori pautan lama dan baru yang akan dijumpai di peta laman web anda. Ia mengunjungi laman web anda secara berkala, memastikan bahawa setiap halaman diindeks dengan betul. Googlebot cuba menilai sama ada pautan itu sah atau tidak sah sehingga pelawat tidak mengalami masalah.

Jelas bahawa webmaster akan keliru apabila jumlah Kesalahan Perayapan mereka meningkat. Semua mereka mahu mengurangkannya dengan banyak. Bagaimana cara memberitahu Google untuk mengabaikan semua peta laman lama? Anda boleh melakukannya dengan membunuh semua perayapan peta laman yang tidak diingini dan aneh. Sebelum ini, satu-satunya cara untuk memungkinkannya adalah fail .htaccess. Terima kasih kepada WordPress kerana menyediakan beberapa pemalam kepada kami.

Laman web WordPress mempunyai fail ini di folder root mereka. Oleh itu, anda hanya perlu mengakses FTP dan mengaktifkan fail tersembunyi di cPanel. Pergi ke pilihan Pengurus Fail untuk mengedit fail ini mengikut keperluan anda. Anda tidak boleh lupa bahawa mengeditnya dengan salah boleh merosakkan laman web anda, jadi anda harus selalu membuat sandaran semua data.

Setelah anda menambahkan coretan ke fail, semua URL yang telah tamat tempoh akan hilang dari Kesalahan Perayapan anda dalam masa yang singkat. Anda tidak boleh lupa bahawa Google mahu anda memastikan laman web anda tetap hidup, mengurangkan kemungkinan kesalahan 404.