.NET/C# High performance об'єднує кілька файлів в один файл

Маленька покидька · Опубліковано 2024-2-14 12:04:26

Вимоги: При використанні великих файлів для завантаження частинами, бекенд повинен об'єднувати різні блоки в один файл по порядку, або при розрізі архівного файлу об'єднувати вирізані файли з вихідним файлом.

Linux використовує розділення розділених файлів
https://www.itsvse.com/thread-10716-1-1.html

Спочатку підготуйте два файли по 100M для тестування з такою командою:

Вхід видно.

Windows створює файл вказаного розміру
https://www.itsvse.com/thread-10732-1-1.html

Код виглядає так:

Вхід видно.

Було протестовано два різні сценарії злиття. Як показано нижче:

Почніть тестування з VS 2022 debug -> Profiler -> позначте ".NET Object Allocation Trace":

merge1 загальний розмір: 16 778 034, merge2 загальний розмір: 164 270,Загальний розподіл показує, що merge1 у 102 рази більший за merge2, і чим більший, тим гірша продуктивність。

Використовуйте PerfView для перегляду аналізу стеків CPU та мережевих мем-стеків купи GC окремо, як показано на наступному рисунку:

Зауваження:Inc% - Інклюзивна вартість виражається у відсотках від загальної вартості для всіх зразків(100% для ROOT вузлів). Це можна відсортувати за ним.

Маленька покидька · Опубліковано 2024-2-14 12:09:30

Тестуйте з VS 2022 Debug -> Performance Profiler -> позначте "Використання пам'яті":

merge1 займає 808 МБ при виконанні
merge2 займає 12 МБ при виконанні

Якщо метод merge2 виконується окремо, програма запускається на 6 МБ і завжди займає 6 МБ під час виконання функції та після завершення.

Маленька покидька · Опубліковано 2025-1-1 10:20:06

Оптимізуйте стиль письма

Вхід видно.

[Джерело] .NET/C# High performance об'єднує кілька файлів в один файл

Пов'язані дописи

Переглянуті розділи