【软件基础】Linq优化双重for循环、批量写入Excel以提升程序运行速度、常见代码优化方法

本文主要是介绍【软件基础】Linq优化双重for循环、批量写入Excel以提升程序运行速度、常见代码优化方法,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

文章目录

  • 前言
  • 一、使用Linq优化双重for循环
  • 二、使用Office插件批量写入Excel
  • 三、常见代码优化方法
      • 1、字符串拼接
      • 2、使用 LINQ 查询
      • 3、频繁访问数据库
      • 4、频繁使用大对象图
      • 5、未使用索引进行查找
      • 6、频繁的装箱和拆箱操作
      • 7、使用递归导致堆栈溢出
      • 8、频繁的文件I/O操作
      • 9、未使用并行处理
  • 总结


前言

在软件开发过程中,性能优化是一个至关重要的环节。当处理大量数据时,传统的双重for循环和逐个写入Excel的方式可能会成为性能瓶颈。本文将介绍两种优化方法:使用Linq来替代双重for循环,以及使用Office插件的批量写入功能来提升数据写入Excel的效率。

一、使用Linq优化双重for循环

双重for循环在处理二维数组或列表时很常见,但如果数据量较大,这种循环方式可能会导致性能问题。Linq(Language Integrated Query)是C#提供的一种强大的查询功能,它允许我们以声明性方式查询和操作数据,而无需编写显式的循环代码。

以下是一个使用双重for循环的示例:

int[,] matrix = { {1, 2, 3}, {4, 5, 6}, {7, 8, 9} };  
List<int> results = new List<int>();  for (int i = 0; i < matrix.GetLength(0); i++)  
{  for (int j = 0; j < matrix.GetLength(1); j++)  {  if (matrix[i, j] % 2 == 0) // 假设我们找所有偶数  results.Add(matrix[i, j]);  }  
}

使用Linq优化后的代码:

int[,] matrix = { {1, 2, 3}, {4, 5, 6}, {7, 8, 9} };  
List<int> results = Enumerable.Range(0, matrix.GetLength(0))  .SelectMany(i => Enumerable.Range(0, matrix.GetLength(1)).Select(j => matrix[i, j]))  .Where(num => num % 2 == 0)  .ToList();

在上面的Linq示例中,我们使用Enumerable.Range来模拟二维数组的索引,然后使用SelectMany来“展平”二维结构,并通过Where筛选出偶数。最后,使用ToList将结果转换为列表。

二、使用Office插件批量写入Excel

当使用Office插件(如Microsoft.Office.Interop.Excel)将数据写入Excel时,逐个写入单元格的方式可能会导致性能下降。为了提高性能,我们可以使用批量写入的方式,即一次性将多个值写入一个范围。

以下是一个逐个写入单元格的示例:

Excel.Application excelApp = new Excel.Application();  
Excel.Workbook workbook = excelApp.Workbooks.Add();  
Excel.Worksheet worksheet = (Excel.Worksheet)workbook.Sheets[1];  for (int i = 1; i <= 1000; i++)  
{  worksheet.Cells[i, 1] = "数据" + i;  
}  workbook.SaveAs("C:\\temp\\Test.xlsx");  
workbook.Close();  
excelApp.Quit();

使用批量写入优化后的代码:

Excel.Application excelApp = new Excel.Application();  
Excel.Workbook workbook = excelApp.Workbooks.Add();  
Excel.Worksheet worksheet = (Excel.Worksheet)workbook.Sheets[1];  // 准备要写入的数据  
object[,] data = new object[1000, 1];  
for (int i = 0; i < 1000; i++)  
{  data[i, 0] = "数据" + (i + 1);  
}  // 批量写入数据  
Excel.Range range = worksheet.Range[worksheet.Cells[1, 1], worksheet.Cells[1000, 1]];  
range.Value2 = data;  workbook.SaveAs("C:\\temp\\Test_Batch.xlsx");  
workbook.Close();  
excelApp.Quit();

在上面的优化示例中,我们首先创建了一个二维对象数组data来存储要写入的数据。然后,我们定义了一个Excel范围range,它覆盖了我们要写入的单元格。最后,我们将整个data数组一次性写入该范围,从而避免了逐个写入单元格的开销。

三、常见代码优化方法

1、字符串拼接

string result = "";
for (int i = 0; i < 1000; i++)
{result += i.ToString();
}

优化:
使用 StringBuilder 类来优化字符串拼接。

StringBuilder sb = new StringBuilder();
for (int i = 0; i < 1000; i++)
{sb.Append(i);
}
string result = sb.ToString();

2、使用 LINQ 查询

var result = list.Where(x => x.Property == value).ToList();

优化
对于简单的过滤,使用 foreach 循环。

List<T> result = new List<T>();
foreach (var item in list)
{if (item.Property == value){result.Add(item);}
}

3、频繁访问数据库

foreach (var item in items)
{var data = dbContext.GetData(item.Id);// Process data
}

优化
尽可能减少对数据库的访问,可以考虑在循环外部一次性获取所有数据。

var itemIds = items.Select(i => i.Id).ToList();
var data = dbContext.GetDataForItems(itemIds);foreach (var item in items)
{var itemData = data.FirstOrDefault(d => d.Id == item.Id);// Process itemData
}

4、频繁使用大对象图

public class Person
{public string Name { get; set; }public List<Address> Addresses { get; set; }// Other properties
}List<Person> people = GetPeopleFromDatabase();
foreach (var person in people)
{ProcessPerson(person);
}

优化
尽量避免加载完整的对象图,可以使用延迟加载或仅加载必要的属性。

List<Person> people = GetPeopleFromDatabase();
foreach (var person in people)
{// Load addresses only when neededperson.Addresses = GetAddressesForPerson(person.Id);ProcessPerson(person);
}

5、未使用索引进行查找

var item = list.FirstOrDefault(x => x.Id == searchId);

优化
如果列表较大,应该使用索引进行快速查找。

var dictionary = list.ToDictionary(x => x.Id);
var item = dictionary.ContainsKey(searchId) ? dictionary[searchId] : null;

6、频繁的装箱和拆箱操作

int sum = 0;
for (int i = 0; i < 1000; i++)
{sum += i;object boxedSum = sum; // Boxing operationint unboxedSum = (int)boxedSum; // Unboxing operation
}

优化
避免不必要的装箱和拆箱操作,尽可能直接使用值类型。

int sum = 0;
for (int i = 0; i < 1000; i++)
{sum += i;
}

7、使用递归导致堆栈溢出

public int Factorial(int n)
{if (n == 0){return 1;}else{return n * Factorial(n - 1); // Recursive call}
}

优化
避免深度递归调用,可以改为使用迭代或尾递归优化。

public int Factorial(int n)
{int result = 1;for (int i = 1; i <= n; i++){result *= i;}return result;
}

8、频繁的文件I/O操作

foreach (var file in files)
{string content = File.ReadAllText(file);// Process file content
}

优化
减少文件I/O操作次数,尽可能合并读写操作。

List<string> contents = new List<string>();
foreach (var file in files)
{contents.Add(File.ReadAllText(file));
}
// Process file contents

9、未使用并行处理

List<int> numbers = Enumerable.Range(1, 1000000).ToList();
List<int> squaredNumbers = new List<int>();
foreach (var num in numbers)
{squaredNumbers.Add(num * num);
}

优化
使用并行处理可以提高处理速度。

List<int> numbers = Enumerable.Range(1, 1000000).ToList();
List<int> squaredNumbers = new List<int>();
Parallel.ForEach(numbers, num =>
{squaredNumbers.Add(num * num);
});

总结

通过这两种优化方法,我们可以显著提高程序处理大量数据时的性能。但是,请注意,在使用Linq和Office插件时,还需要考虑其他性能因素,如内存使用和垃圾回收等。

这篇关于【软件基础】Linq优化双重for循环、批量写入Excel以提升程序运行速度、常见代码优化方法的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1058373

相关文章

golang中reflect包的常用方法

《golang中reflect包的常用方法》Go反射reflect包提供类型和值方法,用于获取类型信息、访问字段、调用方法等,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值... 目录reflect包方法总结类型 (Type) 方法值 (Value) 方法reflect包方法总结

C# 比较两个list 之间元素差异的常用方法

《C#比较两个list之间元素差异的常用方法》:本文主要介绍C#比较两个list之间元素差异,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考下吧... 目录1. 使用Except方法2. 使用Except的逆操作3. 使用LINQ的Join,GroupJoin

MySQL查询JSON数组字段包含特定字符串的方法

《MySQL查询JSON数组字段包含特定字符串的方法》在MySQL数据库中,当某个字段存储的是JSON数组,需要查询数组中包含特定字符串的记录时传统的LIKE语句无法直接使用,下面小编就为大家介绍两种... 目录问题背景解决方案对比1. 精确匹配方案(推荐)2. 模糊匹配方案参数化查询示例使用场景建议性能优

关于集合与数组转换实现方法

《关于集合与数组转换实现方法》:本文主要介绍关于集合与数组转换实现方法,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、Arrays.asList()1.1、方法作用1.2、内部实现1.3、修改元素的影响1.4、注意事项2、list.toArray()2.1、方

Python中注释使用方法举例详解

《Python中注释使用方法举例详解》在Python编程语言中注释是必不可少的一部分,它有助于提高代码的可读性和维护性,:本文主要介绍Python中注释使用方法的相关资料,需要的朋友可以参考下... 目录一、前言二、什么是注释?示例:三、单行注释语法:以 China编程# 开头,后面的内容为注释内容示例:示例:四

Python中win32包的安装及常见用途介绍

《Python中win32包的安装及常见用途介绍》在Windows环境下,PythonWin32模块通常随Python安装包一起安装,:本文主要介绍Python中win32包的安装及常见用途的相关... 目录前言主要组件安装方法常见用途1. 操作Windows注册表2. 操作Windows服务3. 窗口操作

一文详解Git中分支本地和远程删除的方法

《一文详解Git中分支本地和远程删除的方法》在使用Git进行版本控制的过程中,我们会创建多个分支来进行不同功能的开发,这就容易涉及到如何正确地删除本地分支和远程分支,下面我们就来看看相关的实现方法吧... 目录技术背景实现步骤删除本地分支删除远程www.chinasem.cn分支同步删除信息到其他机器示例步骤

Java easyExcel实现导入多sheet的Excel

《JavaeasyExcel实现导入多sheet的Excel》这篇文章主要为大家详细介绍了如何使用JavaeasyExcel实现导入多sheet的Excel,文中的示例代码讲解详细,感兴趣的小伙伴可... 目录1.官网2.Excel样式3.代码1.官网easyExcel官网2.Excel样式3.代码

MyBatisPlus如何优化千万级数据的CRUD

《MyBatisPlus如何优化千万级数据的CRUD》最近负责的一个项目,数据库表量级破千万,每次执行CRUD都像走钢丝,稍有不慎就引起数据库报警,本文就结合这个项目的实战经验,聊聊MyBatisPl... 目录背景一、MyBATis Plus 简介二、千万级数据的挑战三、优化 CRUD 的关键策略1. 查

ModelMapper基本使用和常见场景示例详解

《ModelMapper基本使用和常见场景示例详解》ModelMapper是Java对象映射库,支持自动映射、自定义规则、集合转换及高级配置(如匹配策略、转换器),可集成SpringBoot,减少样板... 目录1. 添加依赖2. 基本用法示例:简单对象映射3. 自定义映射规则4. 集合映射5. 高级配置匹