ToList<>()所带来的性能影响

简介:
 前几天优化师弟写的代码,有一个地方给我留下很深刻的印象,就是我发现他总是将PLINQ的结果ToList<>(),然后再返回给主程序,对于这一点我十分不解,于是去问他是什么原因,得到的答案很幽默:因为习惯。
    有时候对于方法的不甚了解加上“习惯”,往往是程序性能和稳定性终结者,就拿这个Case来说吧,原始代码如下:
 

var query = from cr in LCRNormal.AsParallel()
                        let listId = from crt in LCRNormal
                                     group crt by crt.KeyValue into m
                                     select m.Max(n => n.DBID)
                        where listId.Contains(cr.DBID) && !cr.IsRegularRecord && cr.Status != 3
                        select new ComputingResultForTemp()
                        {
                            KeyValue = cr.KeyValue,
                            DBID = cr.DBID,
                            Status = cr.Status
                        };

query.ToList<ComputingResultForTemp>();

  

    经过以上PLINQ后,泛型列表中大概还剩下60万至100万条数据,然后我们这位师弟做了两个很“施瓦辛格”的动作:ToList<>()和Count(),测试程序运行在一台4*2G HZ,12GB内存的服务器上,竟然跑了2天多!我觉得正式这两个方法导致了程序性能的降低,为了  确定我的判断,我分别在以上代码、ToList<>()和Count()周围加上了StopWatch计时器,然后将结果以文本的形式输出:
    ● 100万数据PLINQ查询:
           ==========3/26/2011 01:34:31 PM ===========
           **(GetDeletedRecords)Start PLINQ(LINQ FITTER)
           ==========3/26/2011 01:38:38 PM ===========
           **(GetDeletedRecords)Finish PLINQ (LINQ FITTER)
   ●  80万数据ToList <>():
           ==========3/26/2011 03:22:10 PM ===========
           **(GetDeletedRecords)Start Get List
●  80万数据Count():
           ==========3/28/2011 02:12:09 PM ===========
           **(GetDeletedRecords)Start Get Count
           ==========3/28/2011 08:50:55 PM ===========
           ** (GetDeletedRecords)Finish Get Count
    日志格式是这样:任务开始时输出当前时间和“Start”,任务结束时输出“Finish”,当从日志中可以看出,PLINQ的效率还是很高的,只运行了几分钟;ToList<>()方法在运行了1天多后人为终止,所以只有Start没有Finish;Count()方法也运行了6小时多。
    所以最终优化方案很简单,去掉了ToList和Count,改用其他方法代替,程序从几天的运行时间一下缩短到几个小时。


本文转自Aicken(李鸣)博客园博客,原文链接:http://www.cnblogs.com/isline/archive/2011/05/10/2041822.html,如需转载请自行联系原作者

相关文章
|
存储 算法 调度
探索AIOS:LLM智能代理操作系统的未来
【4月更文挑战第5天】AIOS是一种创新的LLM智能代理操作系统,旨在解决资源分配、上下文维护和异构代理集成的挑战。它将OS作为代理的“大脑”,采用模块化设计优化LLM功能,包括代理调度、上下文管理、内存和存储管理。AIOS提供并发执行、工具集成及访问控制,提升效率和安全性。其SDK加速应用开发,开源特性促进研究合作。尽管有调度优化、上下文管理效率和安全性的改进空间,AIOS为智能代理的发展开辟了新途径。
832 11
探索AIOS:LLM智能代理操作系统的未来
关于Qt的pri模块化编程详解
今天在移植一份代码的时候遇到了了Qt的`pri`文件,在CSDN上看了一下怎么用,都告诉我新建文件夹,直接Ctrl+S的,试了半天不行,看了一下需要移植的代码,茅塞顿开,分享给大家详细过程。
|
人工智能 算法 安全
基于YOLOv8的交通车辆实时检测系统【训练和系统源码+Pyside6+数据集+包运行】
基于YOLOv8的交通车辆实时检测系统,使用5830张图片训练出有效模型,开发了Python和Pyside6的GUI界面系统,支持图片、视频和摄像头实时检测,具备模型权重导入、检测置信度调节等功能,旨在提升道路安全和改善交通管理。
1648 1
基于YOLOv8的交通车辆实时检测系统【训练和系统源码+Pyside6+数据集+包运行】
|
测试技术
深入理解与应用软件测试中的边界值分析法
【5月更文挑战第27天】 本文聚焦于软件测试中一种常见而有效的测试设计技术——边界值分析法。不同于传统摘要的宽泛概述,我们将直接点明边界值分析的核心原理、实施步骤以及其在提高测试覆盖率和发现潜在错误方面的实际意义。文章将通过理论阐述与实例演练的方式,揭示如何利用边界值分析法在软件测试过程中识别并验证关键的边缘条件,从而提升软件产品的质量与可靠性。
|
JavaScript UED 开发者
解决iframe实时获取资源页面显示空白的问题
解决iframe实时获取资源页面显示空白的问题
969 0
|
机器学习/深度学习 域名解析 弹性计算
阿里云ECS服务器和轻量应用性能差别如何选择?(搞懂了)
阿里云ECS服务器和轻量应用性能差别如何选择?(搞懂了)阿里云轻量应用服务器和云服务器有什么区别?轻量相对于ECS云服务器属于轻量级的云服务器,适合个人开发者或中小企业使用,轻量用来搭建网站应用、测试环境等单机应用,云服务器ECS是专业级云服务器,用来搭建集群类高可用、高容灾应用,科学计算、大数据分析及深度学习等应用
|
人工智能 监控 安全
什么是智慧工地和智慧工地源码?
什么是智慧工地和智慧工地源码?
230 0