.NET/C# didelis našumas sujungia kelis failus į vieną failą

Mažai purvo · Publikuota: 2024-2-14 12:04:26

Reikalavimai: Kai naudojate didelius failus įkelti dalimis, užpakalinė sistema turi sujungti skirtingus blokus į vieną failą eilės tvarka arba, pjaustant archyvo failą, sujungti iškirptus failus į šaltinio failą.

"Linux" naudoja padalintų failų pjaustymo padalijimus
https://www.itsvse.com/thread-10716-1-1.html

Pirmiausia paruoškite du 100 milijonų failus testavimui naudodami šią komandą:

Prisijungimas matomas.

Windows sukuria nurodyto dydžio failą
https://www.itsvse.com/thread-10732-1-1.html

Kodas yra toks:

Prisijungimas matomas.

Buvo išbandyti du skirtingi sujungimo scenarijai. Kaip parodyta žemiau:

Pradėkite testavimą naudodami VS 2022 derinimą -> Profiler -> pažymėkite ".NET Object Allocation Trace":

merge1 bendras dydis: 16,778,034, merge2 bendras dydis: 164,270,Bendras paskirstymas rodo, kad merge1 yra 102 kartus didesnis nei merge2, ir kuo jis didesnis, tuo prastesnis našumas。

Naudokite "PerfView", kad atskirai peržiūrėtumėte procesoriaus rietuvių ir "GC Heap Net Mem Stacks" analizę, kaip parodyta toliau pateiktame paveikslėlyje:

Pastaba:Inc% – įskaičiuotos išlaidos išreiškiamos visų pavyzdžių bendros kainos procentais(100% ROOT mazgams). Jį galima rūšiuoti pagal jį.

Mažai purvo · Publikuota: 2024-2-14 12:09:30

Testas su VS 2022 Debug -> Performance Profiler -> pažymėkite "Atminties naudojimas":

merge1 užima 808 MB, kai vykdomas
merge2 užima 12 MB, kai vykdomas

Jei merge2 metodas vykdomas vienas, programa paleidžia 6 MB ir visada užima 6 MB funkcijos vykdymo metu ir užbaigus.

Mažai purvo · Publikuota: 2025-1-1 10:20:06

Optimizuokite rašymo stilių

Prisijungimas matomas.

[Šaltinis] .NET/C# didelis našumas sujungia kelis failus į vieną failą

Susijusios žinutės

Peržiūrėtos sekcijos