See artikkel on masintõlke peegelartikkel, palun klõpsake siia, et hüpata algse artikli juurde.

Vaade: 106044|Vastuse: 24

[WinForm] ASP.NET veebikraapija

[Kopeeri link]
Postitatud 06.11.2017 18:36:20 | | | |
Paljud interneti roomikud on kirjutatud pythonis ja mõni aeg tagasi kirjutati ka aps.net lihtne roomaja, mis suudab soovitud andmeid indekseerida. Tänapäeval on paljud veebilehed loonud tagasikraapimise mehhanismi, mis teeb indekseerijatel andmete kraapimise väga keeruliseks. Tõenäoliselt on enamiku veebilehtede tagurpidi indekseerimiseks mitmeid viise: on olemas kinnituskoodid, IP-aadressid, mustad nimekirjad jne ning mõned keerukamad tagurpidi indekseerimise meetodid.
See roomik on võtnud ka meetmeid indekseerimise vastase kontrolli, verifitseerimiskoodide möödahiilimise, prokside kasutamise jms probleemide lahendamiseks, kleepige osa allolevast koodist, arutage ja õppige koos teiega, palun parandage, mis viga on!
See roomik on peamiselt suunatud kindlale veebisaidile.

Pärast URL-i sisestamist saad andmeid URL-i järgi tagasi roomata ning seejärel filtreerida ja puhastada andmeid XPathi kaudu, et saada soovitud andmed
Tagasipöördumise vältimiseks saad kasutada proxy IP-d ligipääsuks, alla laadida või haarata kõrge peidetud IP-d internetist ja seejärel juhuslikult vahetada proxy IP-d grab-i jaoks
Ülaltoodud kood on esmalt selleks, et kindlaks teha, kas lülitatud IP on ligipääsetav
Vaata konkreetse koodi lähtekoodi ja esita lähtekood!

Lähtekoodi allalaadimine
Turistid, kui soovite näha selle postituse peidetud sisu, palunVastuse

Skoor

Osalejate arv3MB+3 Aitavad kaasa+3 Ahenda põhjus
Väike algaja, kes armastab õppida + 1 + 1 Väga võimas!
moxuan + 1 + 1 Toeta üürileandjat, et ta postitaks hea postituse
Väike sodi + 1 + 1 Väga võimas!

Vaata kõiki hinnanguid





Eelmine:{:1_7:} {:1_9:}
Järgmine:Lähtesta vs2017 arenduskeskkond
 Üürileandja| Postitatud 07.11.2017 09:30:14 |
Avaldatud 2017-11-6 18:44
Olen postituse sisu sinu jaoks korda teinud

Aitäh, tahtsin lihtsalt duplikaadi kustutada! Aitäh raske töö eest!
Postitatud 13.12.2019 10:32:09 |
Ma tahan teada, milline on see salvestatud protseduur, mille sa kirjutasid, mees.
Postitatud 06.11.2017 18:44:57 |
Olen postituse sisu sinu jaoks korda teinud   
Postitatud 07.11.2017 15:00:04 |
Aitäh jagamast, vaatame lähemalt
Postitatud 08.11.2017 15:46:42 |
Vaata esmalt lähtekoodi
Postitatud 10.11.2017 17:14:31 |
ASP.NET veebikraapija
Postitatud 08.12.2017 22:15:43 |
Õpi õppima
Postitatud 10.12.2017 08:25:22 |
ASP.NET veebikraapija hea mõte!
Postitatud 23.12.2017 20:54:35 |
ASP.NET veebikraapija
Postitatud 16.04.2019 11:46:03 |
Aitäh jagamast, õpi sellest.
Disclaimer:
Kõik Code Farmer Networki poolt avaldatud tarkvara, programmeerimismaterjalid või artiklid on mõeldud ainult õppimiseks ja uurimistööks; Ülaltoodud sisu ei tohi kasutada ärilistel ega ebaseaduslikel eesmärkidel, vastasel juhul kannavad kasutajad kõik tagajärjed. Selle saidi info pärineb internetist ning autoriõiguste vaidlused ei ole selle saidiga seotud. Ülaltoodud sisu tuleb oma arvutist täielikult kustutada 24 tunni jooksul pärast allalaadimist. Kui sulle programm meeldib, palun toeta originaaltarkvara, osta registreerimist ja saa paremaid ehtsaid teenuseid. Kui esineb rikkumist, palun võtke meiega ühendust e-posti teel.

Mail To:help@itsvse.com