Il crawler appena scritto in Java ora ha solo la possibilità di scaricare immagini (profondità 1), e continuerà...

Delver_Si · Pubblicato su 03/06/2015 02:38:12

Come suggerisce il titolo

crawler.rar (62.53 KB, Numero di download: 5, Prezzo di vendita: 2 Grain MB)

microxdd · Pubblicato su 03/06/2015 21:05:36

Implementazione semplice che non dipende da altri pacchetti

package test;
import java.io.File;
import java.io.IOException;
import java.io.InputStreamReader;
import java.net.MalformedURLException;
import java.net.URL;
import java.util.regex.Matcher;
import java.util.regex.Pattern;
import javax.imageio.ImageIO;
public class Test {
public static void main(String[] args) {
String web="http://www.itsvse.com/";
try {
URL url=new URL(web);
InputStreamReader reader=new InputStreamReader(url.openStream());
StringBuilder builder=new StringBuilder();
char[] buff=new char[1024];
int n;
while((n=reader.read(buff))!=-1){
builder.append(buff,0,n);
}
Pattern pattern=Pattern.compile("<img.*?src="(.*?)(gif|png|jpg)"");
Matcher m=pattern.matcher(builder);
while (m.find()) {
String u=m.group(1)+m.group(2);
System.out.println("dowing.."+u);
URL img=null;
if(u.startsWith("http")){
img=new URL(u);
}else{
img=new URL(url,u);
}
ImageIO.write(ImageIO.read(img), m.group(2), new File("D:/img/"+System.currentTimeMillis()+"."+m.group(2)));
}
} catch (MalformedURLException e) {
// TODO Auto-generated catch block
e.printStackTrace();
} catch (IOException e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
}
}

Copia codice

microxdd · Pubblicato su 04/06/2015 19:19:48

Delver_Si Pubblicato il 3-6-2015 alle 23:57
La tua efficienza nello sviluppo del codice originale è troppo bassa, recensione negativa

Non volevo dire nulla, ma hai detto che lo sviluppo è inefficiente。。。。。

Il programma richiede la qualità e le prestazioni del codice e, alla fine, ha poche funzioni, scarsa capacità di espansione e scarse prestazioni

Esegui 10 volte di fila, ignora ogni volta la latenza di rete, ignora i salvataggi locali e calcola solo il tempo per analizzare i documenti html, il tuo programma è tutt'altro che questo.
Inoltre, ci sono errori nel tuo codice, quindi non dirò nulla

Piccola feccia · Pubblicato su 03/06/2015 13:00:52

Delver_Si Pubblicato il 3-6-2015 12:57
Com'è lo studio?

Non ho installato Eclipse e l'ho guardato in un blocco note, prima ho preso il codice sorgente HTML della pagina web, poi il valore dopo src, e infine l'ho salvato

Non so se sia giusto

Il coltello sta volando · Pubblicato su 03/06/2015 07:49:23

È possibile acquisire immagini in formato PNG?

Delver_Si · Pubblicato su 03/06/2015 10:17:34

Coltello piccolo volante coltello volante volando pubblicato il 3-6-2015 alle 07:49
È possibile acquisire immagini in formato PNG?

Sì, non ho giudicato il suffisso finora, tutti sono salvati come jpg, infatti l'immagine png può essere aperta con un suffisso jpg, e migliorerò il suffisso

Piccola feccia · Pubblicato su 03/06/2015 12:52:13

Lasciami studiare la ricerca

Delver_Si · Pubblicato su 03/06/2015 12:57:13

Small slag Pubblicato il 3-6-2015 12:52
Lasciami studiare la ricerca

Com'è lo studio?

Delver_Si · Pubblicato su 03/06/2015 13:05:27

Xiao Zhazha Pubblicato il 3-6-2015 alle 13:00
Non ho installato Eclipse e l'ho guardato in un notebook, prima prendo il codice sorgente html della pagina web, poi ottengo il valore dopo src, e infine salvo il grosso ...

Questo è vero

Piccola feccia · Pubblicato su 03/06/2015 21:12:09

microxdd pubblicato il 3-6-2015 alle 21:05
Implementazione semplice che non dipende da altri pacchetti

Questo è il ritmo che mi costringe a installare myeclipse!

Delver_Si · Pubblicato su 03/06/2015 23:57:27

microxdd pubblicato il 3-6-2015 alle 21:05
Implementazione semplice che non dipende da altri pacchetti

La tua efficienza nello sviluppo del codice originale è troppo bassa, recensione negativa

[JavaSE] Il crawler appena scritto in Java ora ha solo la possibilità di scaricare immagini (profondità 1), e continuerà...

Post correlati