자바로 작성된 크롤러는 이제 이미지 다운로드(깊이 1)만 가능하며, 계속 진행될 것입니다...

Delver_Si · 게시됨 2015. 6. 3. 오전 2:38:12

제목에서 알 수 있듯이요

crawler.rar (62.53 KB, 다운로드 횟수: 5, 판매 가격: 2 그레인 MB)

마이크로XDD · 게시됨 2015. 6. 3. 오후 9:05:36

다른 패키지에 의존하지 않는 간단한 구현

package test;
import java.io.File;
import java.io.IOException;
import java.io.InputStreamReader;
import java.net.MalformedURLException;
import java.net.URL;
import java.util.regex.Matcher;
import java.util.regex.Pattern;
import javax.imageio.ImageIO;
public class Test {
public static void main(String[] args) {
String web="http://www.itsvse.com/";
try {
URL url=new URL(web);
InputStreamReader reader=new InputStreamReader(url.openStream());
StringBuilder builder=new StringBuilder();
char[] buff=new char[1024];
int n;
while((n=reader.read(buff))!=-1){
builder.append(buff,0,n);
}
Pattern pattern=Pattern.compile("<img.*?src="(.*?)(gif|png|jpg)"");
Matcher m=pattern.matcher(builder);
while (m.find()) {
String u=m.group(1)+m.group(2);
System.out.println("dowing.."+u);
URL img=null;
if(u.startsWith("http")){
img=new URL(u);
}else{
img=new URL(url,u);
}
ImageIO.write(ImageIO.read(img), m.group(2), new File("D:/img/"+System.currentTimeMillis()+"."+m.group(2)));
}
} catch (MalformedURLException e) {
// TODO Auto-generated catch block
e.printStackTrace();
} catch (IOException e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
}
}

코드 복사

마이크로XDD · 게시됨 2015. 6. 4. 오후 7:19:48

Delver_Si 2015-6-3 23:57에 게시됨
원래 코드 개발 효율이 너무 낮아서 나쁜 리뷰가 있어요

아무 말도 하고 싶지 않았는데, 개발이 비효율적이라고 하셨잖아요。。。。。

이 프로그램은 코드의 품질과 성능을 요구하며, 결국 기능이 적고 확장 능력과 성능이 떨어집니다

10번 연속으로 실행하고, 매번 네트워크 지연을 무시하고, 로컬 저장도 무시하며, HTML 문서 파싱 시간만 계산하세요. 당신의 프로그램은 아직 그 수준과는 거리가 멉니다.
또한, 코드에 오류가 있으니 굳이 말하지 않겠습니다

작은 쓰레기 같은 놈들 · 게시됨 2015. 6. 3. 오후 1:00:52

Delver_Si 2015-6-3 12:57에 게시됨
연구는 어떤가요?

저는 Eclipse를 설치하지 않고 메모장에서 먼저 웹페이지의 HTML 소스 코드를 가져와서 값을 받아 저장했습니다

이게 맞는지 모르겠어요

칼이 날아다닌다 · 게시됨 2015. 6. 3. 오전 7:49:23

PNG 형식의 이미지를 캡처할 수 있나요?

Delver_Si · 게시됨 2015. 6. 3. 오전 10:17:34

작은 칼 날아다니는 칼 날아다니는 날아다니는 칼 2015-6-3 07:49에 게시됨
PNG 형식의 이미지를 캡처할 수 있나요?

네, 지금은 접미사를 판단하지 않았어요. 모두 jpg 형식으로 저장되어 있고, 사실 png 이미지는 jpg 접미사로 열 수 있고, 접미사를 개선할 예정입니다

작은 쓰레기 같은 놈들 · 게시됨 2015. 6. 3. 오후 12:52:13

연구를 살펴보자고 합니다

Delver_Si · 게시됨 2015. 6. 3. 오후 12:57:13

작은 슬래그, 2015-6-3 12:52에 게시됨
연구를 살펴보자고 합니다

연구는 어떤가요?

Delver_Si · 게시됨 2015. 6. 3. 오후 1:05:27

샤오자자 2015-6-3 13:00에 게시됨
저는 Eclipse를 설치하지 않고 메모장에서 먼저 웹페이지의 html 소스 코드를 가져와서 src 값 값을 얻고, 대략적인 ...

그건 사실이에요

작은 쓰레기 같은 놈들 · 게시됨 2015. 6. 3. 오후 9:12:09

마이크로xdd가 2015-6-3 21:05에 게시했습니다
다른 패키지에 의존하지 않는 간단한 구현

이런 리듬이 저를 일식을 설치하게 만듭니다!

Delver_Si · 게시됨 2015. 6. 3. 오후 11:57:27

마이크로xdd가 2015-6-3 21:05에 게시했습니다
다른 패키지에 의존하지 않는 간단한 구현

원래 코드 개발 효율이 너무 낮아서 나쁜 리뷰가 있어요

[자바SE] 자바로 작성된 크롤러는 이제 이미지 다운로드(깊이 1)만 가능하며, 계속 진행될 것입니다...