.NET/C# Kõrge jõudlus ühendab mitu faili üheks failiks

Väike sodi · Postitatud 2024-2-14 12:04:26

Nõuded: Kui kasutada suuri faile tükkidena üleslaadimiseks, peab backend ühendama erinevad plokid üheks failiks järjekorras või arhiivifaili lõikamisel lõigatud failid lähtefailiks ühendama.

Linux kasutab failide lõikamise jagamisi
https://www.itsvse.com/thread-10716-1-1.html

Esmalt valmistage testimiseks ette kaks 100M faili, kasutades järgmist käsku:

Sisselogimine on nähtav.

Windows loob määratud suurusega faili
https://www.itsvse.com/thread-10732-1-1.html

Kood on järgmine:

Sisselogimine on nähtav.

Testiti kahte erinevat ühinemisstsenaariumi. Nagu allpool näidatud:

Alusta testimist VS 2022 debugiga -> Profiler -> märgi ".NET objekti jaotuse jälg":

Merge1 kogusuurus on: 16 778 034, Merge2 kogusuurus on: 164 270,Kogujaotus näitab, et merge1 on 102 korda suurem kui merge2 ning mida suurem see on, seda kehvem on jõudlus。

Kasuta PerfView'd, et vaadata CPU virnasid ja GC Heap Net Mem Stacks analüüsi eraldi, nagu näidatud järgmisel joonisel:

Märkus:Inc% – Kaasatud kulu on väljendatud protsendina kõigi proovide kogukulust(100% ROOT-sõlmede puhul). Seda saab selle järgi sorteerida.

Väike sodi · Postitatud 2024-2-14 12:09:30

Testi VS 2022 Debug -> Performance Profiler -> märgi "Memory Use":

merge1 võtab käivitamisel 808MB
merge2 võtab käivitamisel 12MB

Kui merge2 meetod käivitatakse üksi, käivitab programm 6MB ja võtab alati 6MB funktsiooni täitmise ajal ja pärast lõpetamist.

Väike sodi · Postitatud 2025-1-1 10:20:06

Optimeeri kirjutamisstiili

Sisselogimine on nähtav.

[Allikas] .NET/C# Kõrge jõudlus ühendab mitu faili üheks failiks

Seotud postitused

Vaadatud sektsioonid