电脑知识|欧美黑人一区二区三区|软件|欧美黑人一级爽快片淫片高清|系统|欧美黑人狂野猛交老妇|数据库|服务器|编程开发|网络运营|知识问答|技术教程文章 - 好吧啦网

您的位置:首頁(yè)技術(shù)文章
文章詳情頁(yè)

.NET一行代碼實(shí)現(xiàn)GC調(diào)優(yōu),讓程序不再占用內(nèi)存

瀏覽:262日期:2022-06-09 09:23:06
目錄
  • 解決方案一:去掉ToArray()
  • 解決方案二:把class改成struct
  • 解決方案三: 手動(dòng)GC
  • 解決方案四:調(diào)整GC的類型

經(jīng)常看到有群友調(diào)侃“為什么搞Java的總在學(xué)習(xí)JVM調(diào)優(yōu)?那是因?yàn)镴ava爛!我們.NET就不需要搞這些!”真的是這樣嗎?今天我就用一個(gè)案例來(lái)分析一下。

昨天,一位學(xué)生問(wèn)了我一個(gè)問(wèn)題:他建了一個(gè)默認(rèn)的ASP.NET Core Web API的項(xiàng)目,也就是那個(gè)WeatherForecast的默認(rèn)項(xiàng)目模板,然后他把默認(rèn)的生成5條數(shù)據(jù)的代碼,改成了生成150000條數(shù)據(jù),其他代碼沒(méi)變,如下:

public IEnumerable<WeatherForecast> Get()

{

    return Enumerable.Range(1, 150000).Select(index => new WeatherForecast

    {

Date = DateOnly.FromDateTime(DateTime.Now.AddDays(index)),

TemperatureC = Random.Shared.Next(-20, 55),

Summary = Summaries[Random.Shared.Next(Summaries.Length)]

    })

    .ToArray();

}

然后他用壓力測(cè)試工具對(duì)這個(gè).NET編寫的Web API模擬了1000個(gè)并發(fā)請(qǐng)求,發(fā)現(xiàn)內(nèi)存一路飆升到7GB,并且在壓力測(cè)試結(jié)束之后,內(nèi)存占用也不見(jiàn)回落。而他用Python編寫的同樣功能的Web API項(xiàng)目,他用壓力測(cè)試工具對(duì)這個(gè)Python編寫的Web API模擬了同樣多的請(qǐng)求,發(fā)現(xiàn)內(nèi)存同樣飆升,但是在壓力測(cè)試結(jié)束之后,內(nèi)存占用很快回落到了正常的水平。

他不由得發(fā)出了疑問(wèn)“這樣簡(jiǎn)單的程序就有內(nèi)存泄漏了嗎?.NET的性能這么差嗎?”

我用了四種方式“解決”了他的這個(gè)問(wèn)題,下面我將會(huì)依次分析這幾種方式的做法和原理。在這之前,我先簡(jiǎn)單科普一下垃圾回收(GC)的基本原理:

一個(gè)被創(chuàng)建出來(lái)的對(duì)象是占據(jù)內(nèi)存的,我們必須在對(duì)象不再需要被使用之后把對(duì)象占據(jù)的內(nèi)存釋放出來(lái),從而避免程序的內(nèi)存占用越來(lái)越高。在C語(yǔ)言中,需要程序員來(lái)使用malloc來(lái)進(jìn)行內(nèi)存的申請(qǐng),然后使用free進(jìn)行內(nèi)存的釋放。而在C#、Java、Python等現(xiàn)代編程語(yǔ)言中,程序員很少需要去關(guān)心一個(gè)被創(chuàng)建出來(lái)的對(duì)象,程序員只需要根據(jù)需要盡情地new對(duì)象出來(lái)即可,垃圾回收器(Garbage Collector,簡(jiǎn)稱GC)會(huì)幫我們把用不到的對(duì)象進(jìn)行回收。

關(guān)于GC還有“0代、1代”等問(wèn)題,這些問(wèn)題大家可以看如下.NET官方的資料:https://learn.microsoft.com/en-us/dotnet/standard/garbage-collection/?WT.mc_id=DT-MVP-5004444

下面開(kāi)始談這幾種“解決方案”。

解決方案一:去掉ToArray()

做法:Get方法的返回值就是IEnumerable<WeatherForecast>類型,而Select()方法的返回值也就是同樣的類型,所以完全沒(méi)必要再ToArray()轉(zhuǎn)換為數(shù)組再返回,因此我們把ToArray()去掉。代碼如下:

public IEnumerable<WeatherForecast> Get()

{

    return Enumerable.Range(1, 150000).Select(index => new WeatherForecast

    {

Date = DateOnly.FromDateTime(DateTime.Now.AddDays(index)),

TemperatureC = Random.Shared.Next(-20, 55),

Summary = Summaries[Random.Shared.Next(Summaries.Length)]

    });

}

再運(yùn)行同樣的壓力測(cè)試,驚人的一幕發(fā)生了,峰值內(nèi)存占用也不到100MB。

原理分析:

這是為什么呢?IEnumerable以及LINQ默認(rèn)是以一種“流水線”的方式在工作,也就是說(shuō)使用IEnumerable的消費(fèi)者(比如這里消費(fèi)IEnumerable的應(yīng)該是Json序列化器)每調(diào)用MoveNext()一次獲取一條數(shù)據(jù)才執(zhí)行一次Select()來(lái)創(chuàng)建一個(gè)新的WeatherForecast對(duì)象。而加上ToArray()之后,則是一次性生成150000個(gè)WeatherForecast對(duì)象,并且把這150000個(gè)對(duì)象放到一個(gè)數(shù)組中才把這個(gè)大數(shù)組返回。

對(duì)于不采用ToArray()的“流水線式”工作方式,對(duì)象是一個(gè)個(gè)產(chǎn)生、一個(gè)個(gè)的消費(fèi),因此同時(shí)并發(fā)生成的對(duì)象是“緩緩流淌”地,因此不會(huì)有ToArray()那樣逐漸累積150000個(gè)對(duì)象的操作,因此并發(fā)內(nèi)存占用更小。同時(shí),由于WeatherForecast對(duì)象是流水線式生產(chǎn)、消費(fèi)的,因此當(dāng)一個(gè)WeatherForecast對(duì)象被消費(fèi)完成后,就“可以”被GC回收了。而用ToArray()之后,數(shù)組對(duì)象會(huì)持有那150000個(gè)WeatherForecast對(duì)象的引用,因此只有數(shù)組對(duì)象被標(biāo)記為“可回收”之后,那150000個(gè)WeatherForecast對(duì)象才有可能被標(biāo)記為“可回收”,因此WeatherForecast對(duì)象被回收的機(jī)會(huì)被大大推后。

不知道為什么微軟官方要給WeatherForecast這個(gè)Web API例子項(xiàng)目代碼里給出ToArray()這樣沒(méi)必要的寫法,我要去找微軟的人去反饋,誰(shuí)也別攔著我!

這給我們的啟示就是:盡量讓Linq“流水線式”工作,盡量使用IEnumerable類型,而不是數(shù)組或者List類型,每次對(duì)IEnumerable類型使用ToArray()、ToList()操作的時(shí)候要謹(jǐn)慎。

上面這個(gè)方案是最完美的方案,下面的幾種方案只是為了幫助大家更深入的理解GC。

解決方案二:把class改成struct

做法:仍然保留原始的ToArray(),但是把WeatherForecast類型從class改為struct(結(jié)構(gòu)體),代碼如下:

public struct WeatherForecast

{

    public DateOnly Date { get; set; }

    public int TemperatureC { get; set; }

    public int TemperatureF => 32 + (int)(TemperatureC / 0.5556);

    public string? Summary { get; set; }

}

再運(yùn)行同樣的壓力測(cè)試,用struct的峰值內(nèi)存占用只有用class的大約一半,同樣的,在壓力測(cè)試結(jié)束之后,內(nèi)存占用沒(méi)有回落。

原理分析:class對(duì)象包含的信息更多,而struct包含的信息更少,而且struct的內(nèi)存結(jié)構(gòu)更加緊湊,因此包含同樣成員的struct比class對(duì)象內(nèi)存占用更小。這就是為什么把class改為struct之后,峰值內(nèi)存占用降低的原因。

有的朋友可能會(huì)問(wèn)“不是說(shuō)struct對(duì)象是分配在棧上,會(huì)用完了之后自動(dòng)回收,不需要GC回收嗎?為什么在壓力測(cè)試結(jié)束后內(nèi)存占用沒(méi)有回落呢?難道struct的內(nèi)存沒(méi)有被自動(dòng)回收嗎?”。需要注意的是“struct對(duì)象會(huì)自動(dòng)回收,不需要GC”這種情況只發(fā)生在struct對(duì)象沒(méi)有被引用類型對(duì)象所引用的情況,一旦一個(gè)struct對(duì)象被一個(gè)引用類型對(duì)象引用之后,struct對(duì)象也需要由GC來(lái)回收。我們的代碼中由于進(jìn)行了ToArray()操作,所以這150000個(gè)struct對(duì)象會(huì)被一個(gè)數(shù)組引用,因此這些struct對(duì)象就必須依賴于GC的回收了。

當(dāng)然不要因?yàn)閟truct比class占內(nèi)存小就濫用struct,和class相比,struct也有缺點(diǎn),具體請(qǐng)自行搜索資料。

解決方案三: 手動(dòng)GC

做法:既然由于GC沒(méi)有及時(shí)執(zhí)行導(dǎo)致在壓力測(cè)試結(jié)束之后內(nèi)存居高不下,那么我們可以在壓力測(cè)試結(jié)束后手動(dòng)調(diào)用GC,強(qiáng)制運(yùn)行垃圾回收。

仍然保留原始的ToArray()。我們?cè)賱?chuàng)建一個(gè)新的Controller,然后在Action中調(diào)用一下GC.Collect()來(lái)強(qiáng)制執(zhí)行內(nèi)存回收。代碼如下:

public class ValuesController : ControllerBase

{

    [HttpGet(Name = "RunGC")]

    public string RunGC()

    {

GC.Collect();

return "ok";

    }

}

我們?cè)賵?zhí)行壓力測(cè)試,在壓力測(cè)試完成后,很顯然內(nèi)存占用沒(méi)有回落。然后我們多請(qǐng)求幾次RunGC(),我們就能發(fā)現(xiàn)內(nèi)存占用回落到100多MB了。

原理分析:GC.Collect();就是強(qiáng)制執(zhí)行內(nèi)存回收,所以那些還沒(méi)有被回收的WeatherForecast對(duì)象就會(huì)被回收了。為什么要多次調(diào)用GC.Collect();才會(huì)讓內(nèi)存占用回落到初始狀態(tài)呢?那是因?yàn)閮?nèi)存回收是比較消耗CPU的操作,為了避免對(duì)程序性能造成影響,所以不會(huì)一次執(zhí)行垃圾回收的時(shí)候把所有用不到的對(duì)象一次性全部回收。

主要注意的是,手動(dòng)調(diào)用GC.Collect()不是一個(gè)好的習(xí)慣,因?yàn)镚C會(huì)根據(jù)策略選擇合適的時(shí)機(jī)來(lái)執(zhí)行內(nèi)存回收,手動(dòng)的執(zhí)行垃圾回收可能會(huì)造成程序的性能問(wèn)題。如果需要手動(dòng)GC.Collect()來(lái)降低讓程序內(nèi)存占用的達(dá)到你的期望的目的,要么是你的程序需要優(yōu)化,要么是你對(duì)程序的內(nèi)存占用的期望是錯(cuò)誤的。什么叫“對(duì)程序的內(nèi)存占用的期望是錯(cuò)誤的”呢?下面這個(gè)解決方案會(huì)提到。

解決方案四:調(diào)整GC的類型

做法:仍然保留原始的ToArray(),然后在ASP.NET Core項(xiàng)目文件(也就是csproj文件)中加入如下的配置:

<PropertyGroup>

    <ServerGarbageCollection>false</ServerGarbageCollection>

</PropertyGroup>

再運(yùn)行同樣的壓力測(cè)試,壓力測(cè)試結(jié)束后,內(nèi)存占用很快就回落到初始的100多MB了。

原理分析:我們知道,我們開(kāi)發(fā)的程序常用的有兩種類別:桌面程序(如WinForms、WPF)和服務(wù)器端程序(如ASP.NET Core)。

桌面程序一般不會(huì)獨(dú)占整個(gè)操作系統(tǒng)的內(nèi)存和CPU資源,因?yàn)椴僮飨到y(tǒng)上還有很多其他程序在運(yùn)行,因此桌面程序在內(nèi)存和CPU占用上比較保守。對(duì)于一個(gè)桌面程序,如果它內(nèi)存占用過(guò)多,我們會(huì)認(rèn)為它不好。

與之相反,服務(wù)器端程序通常是擁有整個(gè)服務(wù)器的內(nèi)存和CPU資源的(因?yàn)檎5南到y(tǒng)都會(huì)把數(shù)據(jù)庫(kù)、Web Server、Redis等部署到不同的計(jì)算機(jī)中),所以充分利用內(nèi)存和CPU能夠提升網(wǎng)站程序的性能。這就是為什么Oracle數(shù)據(jù)庫(kù)默認(rèn)會(huì)占滿服務(wù)器的大部分內(nèi)存的原因,因?yàn)閮?nèi)存閑著也是閑著,不如用起來(lái)提高性能。對(duì)于一個(gè)網(wǎng)站程序,如果可以通過(guò)占盡可能多的內(nèi)存提升性能,但是它卻占很少的內(nèi)存,我們會(huì)認(rèn)為它對(duì)內(nèi)存利用不足,當(dāng)然這里指的不是濫用內(nèi)存。

對(duì)應(yīng)的,.NET的GC有Workstation和Server兩種模式。Workstation模式是為桌面程序準(zhǔn)備的,內(nèi)存占用偏保守,而Server模式是為服務(wù)器端程序準(zhǔn)備的,內(nèi)存占用上更激進(jìn)。我們知道垃圾回收比較消耗資源,對(duì)于服務(wù)器端程序來(lái)講,頻繁的GC會(huì)降低性能,因此Server模式下,只要還有足夠的可用內(nèi)存,.NET會(huì)盡量降低GC的頻率和范圍。而桌面程序?qū)C造成的性能影響容忍度高,而對(duì)內(nèi)存占用過(guò)多則容忍度低。因此Workstation模式下,GC會(huì)更高頻的運(yùn)行,從而保證程序內(nèi)存占用小;而Server模式下,只要還有足夠多的可用內(nèi)存,GC就盡量少運(yùn)行,運(yùn)行的時(shí)候也不會(huì)長(zhǎng)時(shí)間的進(jìn)行大量對(duì)象的回收。當(dāng)然,這兩種模式還有很多其他的區(qū)別,詳細(xì)請(qǐng)查看微軟的文檔: https://learn.microsoft.com/en-us/dotnet/standard/garbage-collection/workstation-server-gc?WT.mc_id=DT-MVP-5004444

ASP.NET Core程序默認(rèn)就是啟用的Server模式的GC,所以壓力測(cè)試結(jié)束后,內(nèi)存也沒(méi)有回落。而通過(guò)<ServerGarbageCollection>false</ServerGarbageCollection>禁用Server模式的GC之后,GC就變成了Workstation模式后,程序就會(huì)更激進(jìn)地回收內(nèi)存了。當(dāng)然把服務(wù)器端程序改為Workstation模式之后,程序的性能就會(huì)受影響,因此除非有充足的理由,否則不建議這樣做,畢竟對(duì)于服務(wù)器來(lái)講,內(nèi)存閑著就是一種浪費(fèi)。

除了GC的模式之外,.NET中也像Java的JVM中一樣可以設(shè)置堆內(nèi)存的大小、百分比等各種復(fù)雜的GC調(diào)優(yōu)參數(shù),詳細(xì)請(qǐng)閱讀微軟的文檔 https://learn.microsoft.com/en-us/dotnet/core/runtime-config/garbage-collector?WT.mc_id=DT-MVP-5004444

總結(jié):盡量使用LINQ的“流水線”操作,盡量避免對(duì)大數(shù)據(jù)量的數(shù)據(jù)源進(jìn)行ToArray()或者ToList();避免手動(dòng)GC;建立對(duì)程序內(nèi)存占用的正確期望,對(duì)于服務(wù)器端程序來(lái)講并不是內(nèi)存占用越低越好;用好GC的模式,從而滿足不同程序的性能和內(nèi)存占用的不同追求;可以通過(guò)GC的參數(shù)來(lái)對(duì)于程序的性能進(jìn)行更加個(gè)性化的設(shè)置。

到此這篇關(guān)于.NET一行代碼實(shí)現(xiàn)GC調(diào)優(yōu),讓程序不再占用內(nèi)存的文章就介紹到這了,更多相關(guān).NET一行代碼實(shí)現(xiàn)GC調(diào)優(yōu)內(nèi)容請(qǐng)搜索以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持!

標(biāo)簽: ASP.NET
主站蜘蛛池模板: 震动筛选机|震动分筛机|筛粉机|振筛机|振荡筛-振动筛分设备专业生产厂家高服机械 | 诚暄电子公司首页-线路板打样,pcb线路板打样加工制作厂家 | 杭州高温泵_热水泵_高温油泵|昆山奥兰克泵业制造有限公司 | 防伪溯源|防窜货|微信二维码营销|兆信_行业内领先的防伪防窜货数字化营销解决方案供应商 | 心肺复苏模拟人|医学模型|急救护理模型|医学教学模型上海康人医学仪器设备有限公司 | 山东商品混凝土搅拌楼-环保型搅拌站-拌合站-分体仓-搅拌机厂家-天宇 | 北京自然绿环境科技发展有限公司专业生产【洗车机_加油站洗车机-全自动洗车机】 | 粘弹体防腐胶带,聚丙烯防腐胶带-全民塑胶| 悬浮拼装地板_篮球场木地板翻新_运动木地板价格-上海越禾运动地板厂家 | 电主轴,车床电磨头,变频制动电机-博山鸿达特种电机 | 头条搜索极速版下载安装免费新版,头条搜索极速版邀请码怎么填写? - 欧远全 | 聚合氯化铝_喷雾聚氯化铝_聚合氯化铝铁厂家_郑州亿升化工有限公司 | 硫化罐-电加热蒸汽硫化罐生产厂家-山东鑫泰鑫智能装备有限公司 | 大立教育官网-一级建造师培训-二级建造师培训-造价工程师-安全工程师-监理工程师考试培训 | 地图标注|微信高德百度地图标注|地图标记-做地图[ZuoMap.com] | 礼堂椅厂家|佛山市艺典家具有限公司 | 西装定制/做厂家/公司_西装订做/制价格/费用-北京圣达信西装 | 股指期货-期货开户-交易手续费佣金加1分-保证金低-期货公司排名靠前-万利信息开户 | 全自动真空上料机_粉末真空上料机_气动真空上料机-南京奥威环保科技设备有限公司 | 分类168信息网 - 分类信息网 免费发布与查询| 定制防伪标签_防伪标签印刷_防伪标签厂家-510品保防伪网 | 免费B2B信息推广发布平台 - 推发网 | 净化车间装修_合肥厂房无尘室设计_合肥工厂洁净工程装修公司-安徽盛世和居装饰 | 爆破器材运输车|烟花爆竹运输车|1-9类危险品厢式运输车|湖北江南专用特种汽车有限公司 | 淄博不锈钢无缝管,淄博不锈钢管-鑫门物资有限公司 | 泉州陶瓷pc砖_园林景观砖厂家_石英砖地铺石价格 _福建暴风石英砖 | 壹作文_中小学生优秀满分作文大全| 质构仪_鱼糜弹性仪-上海腾拔仪器科技有限公司 | 欧美日韩国产一区二区三区不_久久久久国产精品无码不卡_亚洲欧洲美洲无码精品AV_精品一区美女视频_日韩黄色性爱一级视频_日本五十路人妻斩_国产99视频免费精品是看4_亚洲中文字幕无码一二三四区_国产小萍萍挤奶喷奶水_亚洲另类精品无码在线一区 | 股票入门基础知识_股票知识_股票投资大师_格雷厄姆网 | 假肢-假肢价格-假肢厂家-河南假肢-郑州市力康假肢矫形器有限公司 | 众品家具网-家具品牌招商_家具代理加盟_家具门户的首选网络媒体。 | 岛津二手液相色谱仪,岛津10A液相,安捷伦二手液相,安捷伦1100液相-杭州森尼欧科学仪器有限公司 | 热镀锌槽钢|角钢|工字钢|圆钢|H型钢|扁钢|花纹板-天津千百顺钢铁贸易有限公司 | 长沙一级消防工程公司_智能化弱电_机电安装_亮化工程专业施工承包_湖南公共安全工程有限公司 | 自动记录数据电子台秤,记忆储存重量电子桌称,设定时间记录电子秤-昆山巨天 | 常州减速机_减速机厂家_常州市减速机厂有限公司 | 电动卫生级调节阀,电动防爆球阀,电动软密封蝶阀,气动高压球阀,气动对夹蝶阀,气动V型调节球阀-上海川沪阀门有限公司 | 硬齿面减速机[型号全],ZQ减速机-淄博久增机械 | 砍排机-锯骨机-冻肉切丁机-熟肉切片机-预制菜生产线一站式服务厂商 - 广州市祥九瑞盈机械设备有限公司 | 金属软管_不锈钢金属软管_巩义市润达管道设备制造有限公司 |