.NET/C# Wysoka wydajność łączy wiele plików w jeden plik

Mały śmiecie · Opublikowano 2024-2-14 12:04:26

Wymagania: Przy przesyłaniu dużych plików w kawałkach, backend musi łączyć różne bloki w jeden plik w kolejności, lub przy cięciu pliku archiwalnego łączyć pliki wycięte z plikiem źródłowym.

Linux stosuje split file cutting
https://www.itsvse.com/thread-10716-1-1.html

Najpierw przygotuj dwa pliki 100M do testowania, wykonując następujące polecenie:

Logowanie jest widoczne.

Windows tworzy plik o określonym rozmiarze
https://www.itsvse.com/thread-10732-1-1.html

Kod jest następujący:

Logowanie jest widoczne.

Przetestowano dwa różne scenariusze połączenia. Jak pokazano poniżej:

Rozpocznij testowanie za pomocą debugowania VS 2022 -> Profiler -> zaznacz ".NET Object Allocation Trace":

Łączny rozmiar merge1 to: 16 778 034, merge2 całkowity rozmiar: 164 270,Całkowita alokacja pokazuje, że merge1 jest 102 razy większa niż merge2, a im większy, tym gorsza wydajność。

Użyj PerfView do osobnego przeglądania stosów CPU i GC Heap Net Mem stosów, jak pokazano na poniższym rysunku:

Uwaga:In% - Koszt włącznie wyrażany jest jako procent całkowitego kosztu dla wszystkich próbek(100% dla węzłów korzeniowych). Można to sortować według niej.

Mały śmiecie · Opublikowano 2024-2-14 o 12:09:30

Testuj z VS 2022 Debug -> Performance Profiler -> zaznacz "Memory Usage":

merge1 zajmuje 808MB po uruchomieniu
merge2 zajmuje 12MB po uruchomieniu

Jeśli metoda merge2 jest wykonywana samodzielnie, program uruchamia się na 6MB i zawsze zajmuje 6MB podczas wykonywania funkcji oraz po jej zakończeniu.

Mały śmiecie · Opublikowano 1.01.2025 1. 10:20:06

Optymalizuj styl pisania

Logowanie jest widoczne.

[Źródło] .NET/C# Wysoka wydajność łączy wiele plików w jeden plik

Powiązane wpisy

Oglądane sekcje