.NET/C# 고성능 기능은 여러 파일을 하나의 파일로 병합합니다

작은 쓰레기 같은 놈들 · 2024-2-14 12:04:26에 게시됨

요구사항: 큰 파일을 청크로 업로드할 때, 백엔드는 서로 다른 블록을 순서대로 하나의 파일로 병합해야 하며, 아카이브 파일을 절단할 때는 절단된 파일을 원본 파일로 병합해야 합니다.

리눅스는 분할 파일 절단 방식을 사용합니다
https://www.itsvse.com/thread-10716-1-1.html

먼저, 다음 명령어로 테스트할 100M 파일 두 개를 준비하세요:

로그인이 보이네요.

Windows는 지정된 크기의 파일을 생성합니다
https://www.itsvse.com/thread-10732-1-1.html

코드는 다음과 같습니다:

로그인이 보이네요.

두 가지 다른 합병 시나리오가 테스트되었습니다. 아래에 나와 있습니다:

VS 2022 디버그 -> 프로파일러 -> ".NET Object Allocation Trace"를 체크하세요:

merge1 총 크기는 16,778,034, merge2 총 크기는 164,270,총 할당량은 merge1이 merge2보다 102배 크며, 크기가 클수록 성능이 나쁘다는 것을 보여줍니다。

PerfView를 사용하여 CPU 스택과 GC 힙 넷 메모리 스택 분석을 별도로 볼 수 있습니다. 아래 그림에 나타난 바와 같습니다:

말:Inc% - 포함 비용은 모든 샘플의 총 비용에 대한 백분율로 표현됩니다(100% ROOT 노드에 해당합니다). 이 글로 분류할 수 있습니다.

작은 쓰레기 같은 놈들 · 2024-2-14 12:09:30에 게시됨

VS 2022 디버그 -> 성능 프로파일러 -> 체크 "메모리 사용량"으로 테스트하세요:

merge1은 실행 시 808MB를 차지합니다
merge2는 실행 시 12MB를 차지합니다

merge2 메서드를 단독으로 실행하면 프로그램은 6MB에서 시작되며, 함수 실행 중과 완료 후 항상 6MB를 차지합니다.

작은 쓰레기 같은 놈들 · 2025-1-1 10:20:06에 게시됨

글쓰기 스타일을 최적화하세요

로그인이 보이네요.

[출처] .NET/C# 고성능 기능은 여러 파일을 하나의 파일로 병합합니다

관련 게시물

본 섹션