Veebilehe haldamisel, eriti veebisaidi järjestuse optimeerimisel, mõtleme alati, kuidas suunata otsingumootori ämblikke veebilehti indekseerima ja neid lisama. Kuid sageli ei taha mõned veebisaidid, et otsingumootorid neid külastaksid, kuna kasutajagrupid ja sihtpiirkonnad on erinevad, kuidas me seda probleemi lahendame? Õpime seda täna koos autori Xiao Daniga!
Kui näeme, et tahame blokeerida crawlingut, mõtlevad enamik SEO-sid robots.txt failidele. Sest meie kognitsioonis suudavad robotfailid Dujie otsingumootori abil teatud lehti tõhusalt indekseerida. Aga tead, kuigi see meetod on väga hea, arvab Xiaodan, et see sobib paremini veebilehe jaoks, mis pole lõpetatud, et vältida surnud linki või uurimisperioodi tulevikus.
Kui tahame lihtsalt blokeerida otsingumootori indekseerimist, ei pea me ruumi koormama, kasutame lihtsalt natuke koodi. Näiteks tahame takistada Baidu ämblikke roomamast
See ongi kõik. Muidugi on see lihtsalt viis Baidu roomamise blokeerimiseks, kui soovid otsingumootorit, asenda Baiduspider ämblikuga, mis muudab otsingumootorit.
Levinumad otsingumootori ämblikunimed on järgmised:
1. BaiduSpider Baidu põhjalik indeksämblik
2. Google-robot Google Spider
3. Googlebot-Image on ämblik, mida kasutatakse spetsiaalselt piltide püüdmiseks
4. Mediapartners-Google reklaami siduskood Spider
5. Yahoo Lurp Yahoo Spider
6、Jee! Slup China Yahoo China Spider
7. Yahoo!-AdCrawler Yahoo reklaamiämblik
8. YodaoBot NetEase ämblik
9. Sosospider Tencent SOSO integreeritud ämblik
10. Sogou ämblik Sogou põhjalik ämblik
11. MSNBot Live integreeritud ämblik
Kui aga soovid blokeerida kõik otsingumootorid, siis kasuta robotfaili:
Selleks ajaks peaksid paljud sõbrad mõistma, et käsk, mis keelab veebipildi loomise koodis, on noarchive. Seega, kui meil on otsingumootoritele piirangud, saame koodi lisada otse veebilehele vastavalt meie keelatud hetktõmmise objektidele; Vastupidi, ilma ühtegi koodi lisamata saad tagada, et suuremad otsingumootorid pääsevad veebilehele tavapäraselt ligi ja loovad hetktõmmisi.
(Palun märkige kordustrükk: www.wangzhan.net.cn/news/n1913.htm, aitäh!) Teiste inimeste töö vilju hinnata tähendab iseenda austamist! ) |