O crawler acabado de escrever em Java agora só tem a capacidade de baixar imagens (profundidade 1), e continuará...

Delver_Si · Publicado em 03/06/2015 02:38:12

Como o título sugere

crawler.rar (62.53 KB, Número de downloads: 5, Preço de venda: 2 Grain MB)

microxdd · Publicado em 03/06/2015 21:05:36

Implementação simples que não depende de outros pacotes

package test;
import java.io.File;
import java.io.IOException;
import java.io.InputStreamReader;
import java.net.MalformedURLException;
import java.net.URL;
import java.util.regex.Matcher;
import java.util.regex.Pattern;
import javax.imageio.ImageIO;
public class Test {
public static void main(String[] args) {
String web="http://www.itsvse.com/";
try {
URL url=new URL(web);
InputStreamReader reader=new InputStreamReader(url.openStream());
StringBuilder builder=new StringBuilder();
char[] buff=new char[1024];
int n;
while((n=reader.read(buff))!=-1){
builder.append(buff,0,n);
}
Pattern pattern=Pattern.compile("<img.*?src="(.*?)(gif|png|jpg)"");
Matcher m=pattern.matcher(builder);
while (m.find()) {
String u=m.group(1)+m.group(2);
System.out.println("dowing.."+u);
URL img=null;
if(u.startsWith("http")){
img=new URL(u);
}else{
img=new URL(url,u);
}
ImageIO.write(ImageIO.read(img), m.group(2), new File("D:/img/"+System.currentTimeMillis()+"."+m.group(2)));
}
} catch (MalformedURLException e) {
// TODO Auto-generated catch block
e.printStackTrace();
} catch (IOException e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
}
}

Copiar código

microxdd · Publicado em 04/06/2015 19:19:48

Delver_Si Postado em 2015-6-3 às 23:57
Sua eficiência de desenvolvimento original de código está muito baixa, avaliação ruim

Eu não quis dizer nada, mas você disse que o desenvolvimento é ineficiente。。。。。

O programa exige a qualidade e o desempenho do código e, no final, possui poucas funções, pouca capacidade de expansão e baixo desempenho

Execute 10 vezes seguidas, ignore a latência da rede todas as vezes, ignore os saves locais e calcule apenas o tempo para analisar documentos html, seu programa está longe disso.
Além disso, há erros no seu código, então não vou dizer nada

Pequeno · Publicado em 03/06/2015 13:00:52

Delver_Si Postado em 2015-6-3 às 12:57
Como é o estudo?

Eu não instalei o eclipse e olhei em um bloco de notas, primeiro peguei o código-fonte HTML da página web, depois obtive o valor depois do src, e então salvei

Não sei se é certo

A faca está voando · Publicado em 03/06/2015 07:49:23

Imagens em formato PNG podem ser capturadas?

Delver_Si · Publicado em 03/06/2015 10:17:34

Faca pequena voadora faca voadora voando publicado em 2015-6-3 07:49
Imagens em formato PNG podem ser capturadas?

Sim, ainda não julguei o sufixo, todos eles são salvos como jpg, na verdade, a imagem png pode ser aberta com um sufixo jpg, e vou melhorar o sufixo

Pequeno · Publicado em 03/06/2015 12:52:13

Deixe-me estudar a pesquisa

Delver_Si · Publicado em 03/06/2015 12:57:13

Small slag Postado em 2015-6-3 12:52
Deixe-me estudar a pesquisa

Como é o estudo?

Delver_Si · Publicado em 03/06/2015 13:05:27

Xiao Zhazha Postado em 2015-6-3 13:00
Eu não instalei o Eclipse e olhei em um bloco de notas, primeiro pego o código-fonte html da página web, depois pego o valor depois do src, e então salvo o bruto...

Isso é verdade

Pequeno · Publicado em 03/06/2015 21:12:09

microxdd postado em 03-06-2015 às 21:05
Implementação simples que não depende de outros pacotes

Esse é o ritmo que me obriga a instalar o myeclipse!

Delver_Si · Publicado em 03/06/2015 23:57:27

microxdd postado em 03-06-2015 às 21:05
Implementação simples que não depende de outros pacotes

Sua eficiência de desenvolvimento original de código está muito baixa, avaliação ruim

[JavaSE] O crawler acabado de escrever em Java agora só tem a capacidade de baixar imagens (profundidade 1), e continuará...

Posts Relacionados