Cuando operamos sitios web, especialmente optimización de posicionamiento, siempre pensamos en cómo guiar a los motores de búsqueda para que rastreen páginas web e incluyéndolas. Sin embargo, muchas veces algunos sitios web no quieren ser frecuentados por los motores de búsqueda debido a los diferentes grupos de usuarios y regiones objetivo, ¿cómo solucionamos este problema? ¡Vamos a estudiarlo hoy con el autor Xiao Dan!
Cuando vemos que queremos bloquear el rastreo, la mayoría de los SEO piensan en robots.txt archivos. Porque en nuestra cognición, los archivos robotizados pueden rastrear eficazmente ciertas páginas con el motor de búsqueda Dujie. Pero sabes, aunque este método es muy bueno, Xiaodan piensa que es más adecuado para la web que no está terminada, para evitar el enlace muerto o el periodo de investigación en el futuro.
Si solo queremos bloquear un motor de búsqueda para que no rastree, no tenemos que cargar el espacio, solo usar un poco de código. Por ejemplo, queremos bloquear que las arañas Baidu no se arrastren
Eso es todo. Por supuesto, esto es solo una forma de bloquear el rastreo de Baidu; si quieres cualquier motor de búsqueda, simplemente sustituye Baiduspider por una spider que cambie el motor de búsqueda.
Los nombres comunes de arañas en motores de búsqueda son los siguientes:
1. BaiduSpider Araña índice integral de Baidu
2. Googlebot Google Spider
3. Googlebot-Image es una araña especialmente utilizada para capturar imágenes
4. Araña del código de afiliado de Mediapartners-Google Ad
5. Yahoo Slurp Yahoo Spider
6、¡Yahoo! Slup China Yahoo China Spider
7. Yahoo!-AdCrawler Yahoo Araña de anuncios
8. Araña YodaoBot NetEase
9. Sosospider Tencent araña integrada SOSO
10. Araña Sogou Araña integral de Sogou
11. Araña integrada MSNBot Live
Sin embargo, si quieres bloquear todos los motores de búsqueda, entonces usa un archivo robot:
A estas alturas, muchos amigos deberían entender que el comando que prohíbe la creación de instantáneas web en el código es noarchive. Por lo tanto, si tenemos restricciones en los motores de búsqueda, podemos añadir el código directamente a la página web según nuestros objetos snapshot prohibidos; Por el contrario, sin añadir ni un solo fragmento de código, puedes asegurarte de que los principales motores de búsqueda puedan acceder al sitio web con normalidad y crear instantáneas.
(Por favor, indique la reimpresión de: www.wangzhan.net.cn/news/n1913.htm, ¡gracias!) ¡Valorar los frutos del trabajo ajeno es respetarte a uno mismo! ） |
Publicado en 13/1/2016 10:16:38
|
|
|
