Meklētājprogrammu rāpuļprogrammas: labi roboti, slikti roboti Zirnekļroboti, kas pazīstami arī kā tīmekļa zirnekļi vai meklētājprogrammu rāpuļprogrammas, ir rīki, kas automatizē atkārtotus uzdevumus internetā. Viņi lasīja gandrīz visu pārmeklētajā tīmekļa lapā. Robotu savāktie dati tiek apstrādāti un izmantoti dažādos veidos, tāpēc roboti ir abpusējs zobens. Tie var sniegt lielas priekšrocības, uzlabojot interneta funkcionalitāti un uzņēmējdarbību, taču tie var būt arī kaitīgi, radot drošības riskus un ētiskas bažas atkarībā no tā, kā un kādam nolūkam tie tiek izmantoti.
Daudzi tīmekļa rāpuļprogrammas un roboti, piemēram, Googlebot, Bingbot, Baiduspider, Slurp bot (Yahoo bot), Yandexbot, Sogou bot, Alexa crawler, DuckDuckBot, Slackbot, Facebook bot, GPTBot utt., pastāvīgi meklē internetā.
Balto sarakstu meklētājprogrammu rāpuļprogrammas (roboti) ugunsmūros:Hipersaites pieteikšanās ir redzama. |