Acest articol este un articol oglindă al traducerii automate, vă rugăm să faceți clic aici pentru a sări la articolul original.

Architect_Programmer_Code Rețeaua Agricolă»Arhitect › Programare › Java › Crawler-ul scris recent în Java are acum doar capacitatea de a descărca imagini (adâncime 1), va ...
Vedere: 32261|Răspunde: 11

[JavaSE] Crawler-ul scris în Java are acum doar capacitatea de a descărca imagini (adâncime 1) și va continua...

[Copiază linkul]
Postat pe 03.06.2015 02:38:12 | | | |
Așa cum sugerează titlul

crawler.rar (62.53 KB, Numărul de descărcări: 5, Prețul de vânzare: 2 Grain MB)




Precedent:Știi ce containere web asp.net avea? Cu excepția IIS
Următor:deduplicarea datelor și returnarea colecției

Postări conexe
Postat pe 03.06.2015 21:05:36 |
Implementare simplă care nu depinde de alte pachete

  1. package test;

  3. import java.io.File;
  4. import java.io.IOException;
  5. import java.io.InputStreamReader;
  6. import java.net.MalformedURLException;
  7. import java.net.URL;
  8. import java.util.regex.Matcher;
  9. import java.util.regex.Pattern;

  11. import javax.imageio.ImageIO;

  13. public class Test {
  14.         public static void main(String[] args) {
  15.                 String web="http://www.itsvse.com/";
  16.                 try {
  17.                         URL url=new URL(web);
  18.                         InputStreamReader reader=new InputStreamReader(url.openStream());
  19.                        
  20.                         StringBuilder builder=new StringBuilder();
  21.                         char[] buff=new char[1024];
  22.                         int n;
  23.                         while((n=reader.read(buff))!=-1){
  24.                                 builder.append(buff,0,n);
  25.                         }
  26.                        
  27.                         Pattern pattern=Pattern.compile("<img.*?src="(.*?)(gif|png|jpg)"");
  28.                        
  29.                         Matcher m=pattern.matcher(builder);
  30.                         while (m.find()) {
  31.                                 String u=m.group(1)+m.group(2);
  32.                                 System.out.println("dowing.."+u);
  33.                                 URL img=null;
  34.                                 if(u.startsWith("http")){
  35.                                         img=new URL(u);
  36.                                 }else{
  37.                                         img=new URL(url,u);
  38.                                 }
  39.                                 ImageIO.write(ImageIO.read(img), m.group(2), new File("D:/img/"+System.currentTimeMillis()+"."+m.group(2)));
  40.                                
  41.                         }
  42.                        
  43.                 } catch (MalformedURLException e) {
  44.                         // TODO Auto-generated catch block
  45.                         e.printStackTrace();
  46.                 } catch (IOException e) {
  47.                         // TODO Auto-generated catch block
  48.                         e.printStackTrace();
  49.                 }
  50.         }
  51. }
Cod de copiere
Postat pe 04.06.2015 19:19:48 |
Delver_Si Postat la 2015-6-3 23:57
Eficiența ta inițială în dezvoltarea codului este prea scăzută, recenzie proastă

Nu am vrut să spun nimic, dar ai spus că dezvoltarea este ineficientă。。。。。

Programul necesită calitatea și performanța codului și, în final, are puține funcții, o capacitate slabă de extindere și performanțe slabe


Rulează de 10 ori la rând, ignoră latența rețelei de fiecare dată, ignoră salvările locale și calculează doar timpul pentru a analiza documentele html, programul tău este departe de asta.
De asemenea, există erori în codul tău, așa că nu voi spune nimic

Postat pe 03.06.2015 13:00:52 |
Delver_Si Postat la 2015-6-3 12:57
Cum este studiul?

Nu am instalat eclipse și m-am uitat la el într-un carnețel, am luat mai întâi codul sursă HTML al paginii web, apoi am obținut valoarea după src și apoi am salvat-o   

Nu știu dacă e corect  
Postat pe 03.06.2015 07:49:23 |
Pot fi preluate imagini în format PNG?
 Proprietarul| Postat pe 03.06.2015 10:17:34 |
Cuțit mic zburător cuțit zburător publicat la 2015-6-3 07:49
Pot fi preluate imagini în format PNG?

Da, nu am judecat sufixul acum, toate sunt salvate ca jpg, de fapt, imaginea png poate fi deschisă cu sufixul jpg și voi îmbunătăți sufixul
Postat pe 03.06.2015 12:52:13 |
Lasă-mă să studiez cercetarea
 Proprietarul| Postat pe 03.06.2015 12:57:13 |
Small slag Postat la 2015-6-3 12:52
Lasă-mă să studiez cercetarea

Cum este studiul?
 Proprietarul| Postat pe 03.06.2015 13:05:27 |
Xiao Zhazha A postat la 2015-6-3 13:00
Nu am instalat Eclipse și m-am uitat la el într-un carnețel, mai întâi am luat codul sursă html al paginii web, apoi am luat valoarea după src, și apoi am salvat varianta brută ...

Asta este adevărat
Postat pe 03.06.2015 21:12:09 |
microxdd a postat la 2015-6-3 21:05
Implementare simplă care nu depinde de alte pachete

Acesta este ritmul care mă obligă să instalez myeclipse!
 Proprietarul| Postat pe 03.06.2015 23:57:27 |
microxdd a postat la 2015-6-3 21:05
Implementare simplă care nu depinde de alte pachete

Eficiența ta inițială în dezvoltarea codului este prea scăzută, recenzie proastă
Disclaimer:
Tot software-ul, materialele de programare sau articolele publicate de Code Farmer Network sunt destinate exclusiv scopurilor de învățare și cercetare; Conținutul de mai sus nu va fi folosit în scopuri comerciale sau ilegale, altfel utilizatorii vor suporta toate consecințele. Informațiile de pe acest site provin de pe Internet, iar disputele privind drepturile de autor nu au legătură cu acest site. Trebuie să ștergi complet conținutul de mai sus de pe calculatorul tău în termen de 24 de ore de la descărcare. Dacă îți place programul, te rugăm să susții software-ul autentic, să cumperi înregistrarea și să primești servicii autentice mai bune. Dacă există vreo încălcare, vă rugăm să ne contactați prin e-mail.
Mail To:help@itsvse.com