Web sitesi işletme yaparken, özellikle web sıralama optimizasyonu yaparken, arama motoru örümceklerini web sayfalarını taramaya ve eklemeye nasıl yönlendireceğimizi her zaman düşünürüz. Ancak, birçok zaman bazı web siteleri, farklı kullanıcı grupları ve hedef bölgeler nedeniyle arama motorları tarafından kullanılmak istemiyor, bu sorunu nasıl çözebiliriz? Bugün yazar Xiao Dan ile birlikte çalışalım!
Taramayı engellemek istediğimizde, çoğu SEO robots.txt dosyayı düşünür. Çünkü bilişimizde, robot dosyaları Dujie arama motoruyla belirli sayfaları etkili bir şekilde tarayabilir. Ama biliyorsunuz, bu yöntem çok iyi olsa da, Xiaodan bunun tamamlanmamış web sitesi için daha uygun olduğunu düşünüyor, böylece gelecekte ölü bağlantı veya araştırma dönemi yaşanmamak için.
Sadece bir arama motorunun taramasını engellemek istiyorsak, alanı yüklememize gerek yok, sadece biraz kod kullanıyoruz. Örneğin, Baidu örümceklerinin sürünmesini engellemek istiyoruz
Hepsi bu. Tabii ki, bu sadece Baidu'nun taramasını engellemenin bir yolu, herhangi bir arama motoru istiyorsanız, Baiduspider'ı arama motorunu değiştiren bir örümcekle değiştirin.
Yaygın arama motoru örümcek isimleri şunlardır:
1. BaiduSpider Baidu'nun kapsamlı indeks örümceği
2. Googlebot'ta Google Örümcek
3. Googlebot-Image, özellikle görüntü yakalamak için kullanılan bir örümcekdir
4. Mediapartners-Google Reklam Bağlı Kuruluş Kodu Örümceği
5. Yahoo Slurp Yahoo Spider
6、Yaşasın! Slup Çin Yahoo Çin Örümceği
7. Yahoo!-AdCrawler Yahoo Reklam Örümceği
8. YodaoBot NetEase örümceği
9. Sosospider Tencent SOSO entegre örümcek
10. Sogou Örümceği Sogou kapsamlı örümcek
11. MSNBot Live entegre örümcek
Ancak, tüm arama motorlarını engellemek istiyorsanız, robot dosyası kullanın:
Bu noktada, birçok arkadaşım kodda web snapshot'larının oluşturulmasını yasaklayan komutun noarchive olduğunu anlamalı. Bu nedenle, arama motorlarında kısıtlamalar varsa, yasaklanan anlık nesnelerimize göre kodu doğrudan web sayfasına ekleyebiliriz; Aksine, tek bir kod parçası eklemeden ise, büyük arama motorlarının web sitesine normal erişim ve anlık görüntüler oluşturmasını sağlayabilirsiniz.
(Lütfen yeniden baskıyı belirtin: www.wangzhan.net.cn/news/n1913.htm, teşekkürler!) Başkalarının emeğinin meyvelerini değerli kılmak, kendine saygı göstermektir! ) |