深入探讨Python中的os模块：基础大总结与实战【第109篇—os模块】

2024-03-01 10:20
文章标签 python 基础 实战 模块 总结 109 深入探讨 os

本文主要是介绍深入探讨Python中的os模块：基础大总结与实战【第109篇—os模块】，希望对大家解决编程问题提供一定的参考价值，需要的开发者们随着小编来一起学习吧！

深入探讨Python中的os模块：基础大总结与实战

在Python编程中，操作系统(os)模块是一个强大的工具，它提供了与操作系统交互的各种功能，使得开发者能够轻松地执行文件和目录操作、获取系统信息以及执行系统命令。在本篇技术博客中，我们将深入研究os模块的基础知识，并通过实际代码示例演示其强大的功能。

IMG_20231006_130640

1. os模块基础知识

1.1 os模块简介

os模块是Python标准库中的一部分，提供了一种与操作系统进行交互的方法。主要功能包括文件和目录的操作、路径处理、进程管理等。在使用os模块之前，我们需要先导入它：

import os

1.2 常用os模块函数

1.2.1 文件和目录操作
  • os.getcwd(): 获取当前工作目录。
  • os.chdir(path): 改变当前工作目录。
  • os.listdir(path='.'): 返回指定目录下的所有文件和目录列表。
1.2.2 路径处理
  • os.path.join(path, *paths): 将多个路径组合成一个路径。
  • os.path.abspath(path): 返回path的绝对路径。
  • os.path.exists(path): 判断路径是否存在。
  • os.path.isfile(path): 判断路径是否为文件。
  • os.path.isdir(path): 判断路径是否为目录。
1.2.3 系统命令执行
  • os.system(command): 在系统 shell 中执行命令。

2. 代码实战：文件操作与路径处理

2.1 获取当前工作目录并改变工作目录

import os# 获取当前工作目录
current_directory = os.getcwd()
print("当前工作目录:", current_directory)# 改变工作目录
os.chdir('/path/to/new/directory')
print("新工作目录:", os.getcwd())

2.2 遍历指定目录下的文件和目录

import osdef list_files_and_directories(directory):print(f"目录 {directory} 下的文件和目录:")for item in os.listdir(directory):item_path = os.path.join(directory, item)if os.path.isfile(item_path):print(f"文件: {item_path}")elif os.path.isdir(item_path):print(f"目录: {item_path}")# 指定目录
target_directory = '/path/to/target/directory'
list_files_and_directories(target_directory)

2.3 判断路径是否存在并获取绝对路径

import osdef check_and_get_absolute_path(path):if os.path.exists(path):absolute_path = os.path.abspath(path)print(f"路径 {path} 存在，绝对路径为: {absolute_path}")else:print(f"路径 {path} 不存在")# 指定路径
target_path = '/path/to/some/file_or_directory'
check_and_get_absolute_path(target_path)

4. 进一步的实战：系统命令执行与异常处理

4.1 执行系统命令并获取输出

os.system(command)函数可以执行系统命令，但它无法获取命令的输出。为了更灵活地处理系统命令，我们可以使用subprocess模块。

import subprocessdef execute_system_command(command):try:result = subprocess.run(command, shell=True, check=True, stdout=subprocess.PIPE, text=True)print(f"命令执行结果:\n{result.stdout}")except subprocess.CalledProcessError as e:print(f"命令执行失败，错误信息: {e.stderr}")# 示例：执行系统命令 'ls -l'（列出当前目录下的文件和目录）
execute_system_command('ls -l')

4.2 异常处理与错误信息

在实际应用中，可能会遇到文件不存在、权限不足等问题。因此，合理的异常处理对于保障程序的稳定运行非常重要。

import osdef file_operation_with_exception_handling(file_path):try:with open(file_path, 'r') as file:content = file.read()print(f"文件内容:\n{content}")except FileNotFoundError:print(f"文件 {file_path} 不存在")except PermissionError:print(f"无权限读取文件 {file_path}")except Exception as e:print(f"发生未知错误: {e}")# 示例：读取文件内容并处理异常
target_file = '/path/to/some/file.txt'
file_operation_with_exception_handling(target_file)

6. 进阶应用：递归遍历文件夹与路径规范化

6.1 递归遍历文件夹

os模块还提供了递归遍历文件夹的方法，使得我们能够方便地获取文件夹内所有文件和子文件夹。

import osdef recursive_list_files(directory):for root, dirs, files in os.walk(directory):for file in files:file_path = os.path.join(root, file)print(f"文件: {file_path}")# 示例：递归遍历目录 '/path/to/target/directory'
target_directory = '/path/to/target/directory'
recursive_list_files(target_directory)

6.2 路径规范化

使用os.path.normpath(path)函数可以规范化路径，消除路径中的双斜杠、解析相对路径等问题。

import osdef normalize_path(path):normalized_path = os.path.normpath(path)print(f"原始路径: {path}")print(f"规范化路径: {normalized_path}")# 示例：规范化路径 '/path/to/../target/directory'
target_path = '/path/to/../target/directory'
normalize_path(target_path)

7. 高级应用：环境变量与进程管理

7.1 获取环境变量

通过os.environ字典，我们能够轻松获取系统的环境变量。

import osdef get_environment_variables():print("环境变量:")for key, value in os.environ.items():print(f"{key}: {value}")# 示例：获取系统环境变量
get_environment_variables()

7.2 进程管理

os模块也提供了一些基本的进程管理功能，如os.spawn*系列函数。

import osdef execute_command_in_new_process(command):new_process_id = os.spawnlp(os.P_NOWAIT, '/bin/sh', 'sh', '-c', command)print(f"新进程已创建，进程ID: {new_process_id}")# 示例：在新进程中执行命令 'echo "Hello, os module!"'
execute_command_in_new_process('echo "Hello, os module!"')

通过深入研究os模块的高级应用，我们拓展了对其功能的认识，包括递归遍历文件夹、路径规范化、环境变量获取以及基本的进程管理。这些功能为Python开发者在操作系统层面进行更深入、更灵活的操作提供了便利。

在实际项目中，结合os模块的高级功能，我们可以更好地处理复杂的文件结构、规范化路径、获取系统信息等任务。同时，进一步了解与os模块相关的模块，如subprocess、shutil等，将有助于提高代码的效率和可维护性。

希望本文能够帮助读者更全面地了解和应用os模块，使其在Python开发中更加得心应手。在未来的学习中，建议深入研究相关模块，挖掘更多强大的功能，提高自己在系统级编程方面的水平。

9. 拓展应用：文件和目录的创建、删除与复制

9.1 创建目录与文件

os模块提供了创建目录和文件的方法，分别为os.mkdir(path)和os.makedirs(path)。其中，os.makedirs()能够递归创建多层目录。

import osdef create_directory_and_file(directory_path, file_path):# 创建目录os.makedirs(directory_path, exist_ok=True)print(f"目录 '{directory_path}' 已创建")# 创建文件with open(file_path, 'w') as file:file.write("Hello, os module!")print(f"文件 '{file_path}' 已创建")# 示例：创建目录 '/path/to/new/directory' 和文件 '/path/to/new/directory/example.txt'
new_directory = '/path/to/new/directory'
new_file = '/path/to/new/directory/example.txt'
create_directory_and_file(new_directory, new_file)

9.2 删除目录与文件

通过os.remove(path)和os.rmdir(path)可以删除文件和目录，分别对应删除文件和删除空目录的操作。若要删除非空目录，可以使用shutil.rmtree(path)。

import os
import shutildef delete_directory_and_file(directory_path, file_path):# 删除文件os.remove(file_path)print(f"文件 '{file_path}' 已删除")# 删除目录os.rmdir(directory_path)print(f"目录 '{directory_path}' 已删除")# 示例：删除目录 '/path/to/new/directory' 和文件 '/path/to/new/directory/example.txt'
delete_directory_and_file(new_directory, new_file)

9.3 复制文件与目录

shutil模块提供了复制文件和目录的方法，分别为shutil.copy(src, dst)和shutil.copytree(src, dst)。

import shutildef copy_directory_and_file(source_path, destination_path):# 复制文件shutil.copy(source_path, destination_path)print(f"文件 '{source_path}' 已复制到 '{destination_path}'")# 复制目录shutil.copytree(new_directory, '/path/to/copied/directory')print(f"目录 '{new_directory}' 已复制到 '/path/to/copied/directory'")# 示例：复制文件 '/path/to/new/directory/example.txt' 和目录 '/path/to/new/directory'
copy_directory_and_file(new_file, '/path/to/copied/directory/example_copied.txt')

11. 安全性与异常处理加强

11.1 安全性考虑

在文件和目录操作中，安全性是至关重要的。在使用os模块进行文件和目录操作时，务必谨慎处理用户输入，以防止潜在的安全漏洞。使用绝对路径、验证文件/目录是否存在，以及合理使用异常处理都是确保安全性的关键步骤。

import osdef safe_file_operation(file_path):try:# 获取文件的绝对路径absolute_path = os.path.abspath(file_path)# 确保文件存在if os.path.exists(absolute_path) and os.path.isfile(absolute_path):with open(absolute_path, 'r') as file:content = file.read()print(f"文件内容:\n{content}")else:print(f"文件 {absolute_path} 不存在或不是文件")except Exception as e:print(f"发生错误: {e}")# 示例：安全地读取文件内容
unsafe_path = '/path/to/some/file/../../malicious_file.txt'
safe_file_operation(unsafe_path)

11.2 异常处理进阶

对于文件和目录操作，更细致的异常处理可以帮助我们更好地理解问题。例如，当涉及到文件读写时，我们可能会遇到UnicodeDecodeError等异常，需要有相应的处理方式。

import osdef advanced_exception_handling(file_path):try:with open(file_path, 'r', encoding='utf-8') as file:content = file.read()print(f"文件内容:\n{content}")except FileNotFoundError:print(f"文件 {file_path} 不存在")except PermissionError:print(f"无权限读取文件 {file_path}")except UnicodeDecodeError:print(f"文件 {file_path} 包含非UTF-8编码的内容")except Exception as e:print(f"发生未知错误: {e}")# 示例：高级异常处理，读取文件内容
problematic_file = '/path/to/some/problematic_file.txt'
advanced_exception_handling(problematic_file)

12. Python 3.8+ 的 pathlib 模块

在Python 3.4及以后的版本中，引入了pathlib模块，提供了更面向对象的路径操作方式。这种方式更加直观和安全，建议在新项目中优先使用pathlib。

from pathlib import Pathdef pathlib_example(file_path):try:# 创建Path对象path = Path(file_path)# 读取文件内容content = path.read_text(encoding='utf-8')print(f"文件内容:\n{content}")except FileNotFoundError:print(f"文件 {path} 不存在")except PermissionError:print(f"无权限读取文件 {path}")except UnicodeDecodeError:print(f"文件 {path} 包含非UTF-8编码的内容")except Exception as e:print(f"发生未知错误: {e}")# 示例：使用pathlib读取文件内容
pathlib_example(problematic_file)

14. 文件和目录权限管理

在实际应用中，我们经常需要处理文件和目录的权限。os模块和pathlib模块提供了一些基本的权限管理方法，同时，使用shutil模块中的函数也能有效地处理复制时的权限。

14.1 修改文件和目录权限

使用os模块中的os.chmod(path, mode)函数可以修改文件或目录的权限。mode参数是一个数字，代表新的权限。

import osdef change_file_permissions(file_path, new_mode):try:os.chmod(file_path, new_mode)print(f"文件 {file_path} 权限已修改为 {new_mode:o}")except Exception as e:print(f"发生错误: {e}")# 示例：修改文件权限为可读写
sample_file = '/path/to/some/sample_file.txt'
change_file_permissions(sample_file, 0o600)

14.2 复制文件时保留权限

在使用shutil模块的shutil.copy(src, dst)函数复制文件时，默认情况下，会保留文件的权限信息。

import shutildef copy_file_preserving_permissions(source_path, destination_path):try:shutil.copy(source_path, destination_path)print(f"文件 '{source_path}' 已复制到 '{destination_path}'，并保留了权限")except Exception as e:print(f"发生错误: {e}")# 示例：复制文件并保留权限
source_file = '/path/to/source_file.txt'
destination_file = '/path/to/destination_file.txt'
copy_file_preserving_permissions(source_file, destination_file)

14.3 使用pathlib管理权限

在pathlib模块中，Path对象也提供了chmod(mode)方法，用于修改文件或目录的权限。

from pathlib import Pathdef pathlib_change_permissions(file_path, new_mode):try:path = Path(file_path)path.chmod(new_mode)print(f"文件 {file_path} 权限已修改为 {new_mode:o}")except Exception as e:print(f"发生错误: {e}")# 示例：使用pathlib修改文件权限
pathlib_change_permissions(sample_file, 0o644)

15. 文件和目录的时间戳管理

对于文件和目录，系统维护着三个时间戳：访问时间（atime）、修改时间（mtime）和状态改变时间（ctime）。os模块和pathlib模块提供了获取和修改这些时间戳的方法。

15.1 获取时间戳

使用os.path.getatime(path)、os.path.getmtime(path)和os.path.getctime(path)可以获取文件或目录的访问、修改和状态改变时间戳。

import osdef get_timestamps(file_path):try:atime = os.path.getatime(file_path)mtime = os.path.getmtime(file_path)ctime = os.path.getctime(file_path)print(f"文件 {file_path} 的时间戳信息:")print(f"访问时间: {atime}")print(f"修改时间: {mtime}")print(f"状态改变时间: {ctime}")except Exception as e:print(f"发生错误: {e}")# 示例：获取文件时间戳信息
timestamp_file = '/path/to/timestamp_file.txt'
get_timestamps(timestamp_file)

15.2 修改时间戳

使用os.utime(path, (atime, mtime))可以修改文件或目录的访问和修改时间戳。

import osdef set_timestamps(file_path, new_atime, new_mtime):try:os.utime(file_path, (new_atime, new_mtime))print(f"文件 {file_path} 的访问和修改时间戳已修改")except Exception as e:print(f"发生错误: {e}")# 示例：修改文件访问和修改时间戳
set_timestamps(timestamp_file, 1644019200, 1644105600)

15.3 使用pathlib管理时间戳

在pathlib模块中，Path对象提供了stat()方法，返回一个os.stat_result对象，其中包含了访问、修改和状态改变时间戳等信息。

from pathlib import Pathdef pathlib_get_timestamps(file_path):try:path = Path(file_path)stat_info = path.stat()print(f"文件 {file_path} 的时间戳信息:")print(f"访问时间: {stat_info.st_atime}")print(f"修改时间: {stat_info.st_mtime}")print(f"状态改变时间: {stat_info.st_ctime}")except Exception as e:print(f"发生错误: {e}")# 示例：使用pathlib获取文件时间戳信息
pathlib_get_timestamps(timestamp_file)

17. 目录压缩与解压缩

在实际应用中，我们常常需要对目录进行压缩和解压缩，以便于文件传输、备份等需求。Python中的shutil模块和第三方库zipfile提供了相关的功能。

17.1 压缩目录

使用shutil模块的shutil.make_archive(base_name, format, root_dir)函数可以将目录压缩为指定格式的归档文件。常见的格式包括zip、tar等。

import shutildef compress_directory(directory_path, output_path, format='zip'):try:shutil.make_archive(output_path, format, root_dir=directory_path)print(f"目录 '{directory_path}' 已压缩到 '{output_path}.{format}'")except Exception as e:print(f"发生错误: {e}")# 示例：压缩目录 '/path/to/compress' 到 '/path/to/compressed_archive.zip'
compress_directory('/path/to/compress', '/path/to/compressed_archive', 'zip')

17.2 解压缩目录

使用shutil模块的shutil.unpack_archive(filename, extract_dir)函数可以将归档文件解压缩到指定目录。

import shutildef decompress_archive(archive_path, extract_path):try:shutil.unpack_archive(archive_path, extract_path)print(f"归档文件 '{archive_path}' 已解压缩到 '{extract_path}'")except Exception as e:print(f"发生错误: {e}")# 示例：解压缩 '/path/to/compressed_archive.zip' 到 '/path/to/extracted'
decompress_archive('/path/to/compressed_archive.zip', '/path/to/extracted')

17.3 使用zipfile库进行更灵活的操作

zipfile库提供了更灵活的方式进行压缩和解压缩，可以逐个文件添加、删除等。

import zipfile
import osdef compress_directory_zipfile(directory_path, output_path):try:with zipfile.ZipFile(output_path, 'w') as zip_file:for root, dirs, files in os.walk(directory_path):for file in files:file_path = os.path.join(root, file)arc_name = os.path.relpath(file_path, directory_path)zip_file.write(file_path, arcname=arc_name)print(f"目录 '{directory_path}' 已使用zipfile压缩到 '{output_path}'")except Exception as e:print(f"发生错误: {e}")# 示例：使用zipfile压缩目录 '/path/to/compress' 到 '/path/to/compressed_archive_zipfile.zip'
compress_directory_zipfile('/path/to/compress', '/path/to/compressed_archive_zipfile.zip')

在实际应用中，选择适合场景的方式进行目录的压缩和解压缩操作，可以根据需求使用shutil模块或zipfile库。希望通过这部分内容，读者能够更加熟练地进行文件和目录的压缩解压缩操作。

总结

本文深入探讨了Python中os模块的基础知识和高级应用，以及相关的安全性、异常处理、权限管理、时间戳处理、目录压缩与解压缩等方面的技术。以下是本文的主要内容总结：

  1. 基础知识和常用函数： 学习了os模块的基础知识，包括文件和目录操作、路径处理、系统命令执行等，通过代码实例演示了其常用函数。

  2. 文件和目录的管理： 涵盖了文件和目录的创建、删除、复制、遍历、规范化等操作，通过实战示例展示了这些操作的灵活应用。

  3. 异常处理与安全性考虑： 加强了对异常处理的理解，结合文件操作，介绍了如何安全地处理文件和目录，避免潜在的安全漏洞。

  4. 进阶应用： 拓展了os模块的功能，包括环境变量获取、进程管理、递归遍历目录、路径规范化等，以及pathlib模块的使用。

  5. 文件和目录的权限管理： 学习了如何修改文件和目录的权限，以及通过shutil模块和pathlib模块管理权限的方法。

  6. 文件和目录的时间戳管理： 探讨了获取和修改文件和目录的时间戳，介绍了pathlib模块的使用，以及如何使用os.utime进行时间戳的修改。

  7. 目录压缩与解压缩： 学习了使用shutil模块和zipfile库进行目录的压缩和解压缩，通过实例展示了不同的方式。

通过学习这些内容，读者将能够更全面地了解和应用os模块，提高在Python文件和目录操作方面的技能。同时，本文强调了在文件操作中的安全性、异常处理的重要性，以及一些高级应用的技巧。希望读者通过本文的指导，能够更加自信地处理文件和目录的操作，提高代码的可读性和可维护性。

这篇关于深入探讨Python中的os模块：基础大总结与实战【第109篇—os模块】的文章就介绍到这儿，希望我们推荐的文章对编程师们有所帮助！


http://www.chinasem.cn/article/762115。

相关文章

网页解析 lxml 库--实战

网页解析 lxml 库--实战

lxml库使用流程 lxml 是 Python 的第三方解析库，完全使用 Python 语言编写，它对 XPath表达式提供了良好的支 持，因此能够了高效地解析 HTML/XML 文档。本节讲解如何通过 lxml 库解析 HTML 文档。 pip install lxml lxm| 库提供了一个 etree 模块，该模块专门用来解析 HTML/XML 文档，下面来介绍一下 lxml 库
阅读更多...
HarmonyOS学习(七)——UI（五）常用布局总结

HarmonyOS学习(七)——UI（五）常用布局总结

自适应布局 1.1、线性布局（LinearLayout） 通过线性容器Row和Column实现线性布局。Column容器内的子组件按照垂直方向排列，Row组件中的子组件按照水平方向排列。 属性说明space通过space参数设置主轴上子组件的间距，达到各子组件在排列上的等间距效果alignItems设置子组件在交叉轴上的对齐方式，且在各类尺寸屏幕上表现一致，其中交叉轴为垂直时，取值为Vert
阅读更多...
python: 多模块(.py)中全局变量的导入

python: 多模块(.py)中全局变量的导入

文章目录 global关键字可变类型和不可变类型数据的内存地址单模块(单个py文件)的全局变量示例总结 多模块(多个py文件)的全局变量from x import x导入全局变量示例 import x导入全局变量示例 总结 global关键字 global 的作用范围是模块(.py)级别： 当你在一个模块（文件）中使用 global 声明变量时，这个变量只在该模块的全局命名空
阅读更多...
学习hash总结

学习hash总结

2014/1/29/   最近刚开始学hash，名字很陌生，但是hash的思想却很熟悉，以前早就做过此类的题，但是不知道这就是hash思想而已，说白了hash就是一个映射，往往灵活利用数组的下标来实现算法，hash的作用：1、判重；2、统计次数；
阅读更多...
性能分析之MySQL索引实战案例

性能分析之MySQL索引实战案例

文章目录 一、前言二、准备三、MySQL索引优化四、MySQL 索引知识回顾五、总结 一、前言 在上一讲性能工具之 JProfiler 简单登录案例分析实战中已经发现SQL没有建立索引问题，本文将一起从代码层去分析为什么没有建立索引？ 开源ERP项目地址：https://gitee.com/jishenghua/JSH_ERP 二、准备 打开IDEA找到登录请求资源路径位置
阅读更多...
深入探索协同过滤：从原理到推荐模块案例

深入探索协同过滤：从原理到推荐模块案例

文章目录 前言一、协同过滤1. 基于用户的协同过滤（UserCF）2. 基于物品的协同过滤（ItemCF）3. 相似度计算方法 二、相似度计算方法1. 欧氏距离2. 皮尔逊相关系数3. 杰卡德相似系数4. 余弦相似度 三、推荐模块案例1.基于文章的协同过滤推荐功能2.基于用户的协同过滤推荐功能 前言     在信息过载的时代，推荐系统成为连接用户与内容的桥梁。本文聚焦于
阅读更多...
【Python编程】Linux创建虚拟环境并配置与notebook相连接

【Python编程】Linux创建虚拟环境并配置与notebook相连接

1.创建 使用 venv 创建虚拟环境。例如，在当前目录下创建一个名为 myenv 的虚拟环境： python3 -m venv myenv 2.激活 激活虚拟环境使其成为当前终端会话的活动环境。运行： source myenv/bin/activate 3.与notebook连接 在虚拟环境中，使用 pip 安装 Jupyter 和 ipykernel： pip instal
阅读更多...
C#实战|大乐透选号器[6]：实现实时显示已选择的红蓝球数量

C#实战|大乐透选号器[6]：实现实时显示已选择的红蓝球数量

哈喽，你好啊，我是雷工。 关于大乐透选号器在前面已经记录了5篇笔记，这是第6篇； 接下来实现实时显示当前选中红球数量，蓝球数量； 以下为练习笔记。 01 效果演示 当选择和取消选择红球或蓝球时，在对应的位置显示实时已选择的红球、蓝球的数量； 02 标签名称 分别设置Label标签名称为：lblRedCount、lblBlueCount
阅读更多...
零基础学习Redis(10) -- zset类型命令使用

零基础学习Redis(10) -- zset类型命令使用

zset是有序集合，内部除了存储元素外，还会存储一个score，存储在zset中的元素会按照score的大小升序排列，不同元素的score可以重复，score相同的元素会按照元素的字典序排列。 1. zset常用命令 1.1 zadd  zadd key [NX | XX] [GT | LT]   [CH] [INCR] score member [score member ...]
阅读更多...
【机器学习】高斯过程的基本概念和应用领域以及在python中的实例

【机器学习】高斯过程的基本概念和应用领域以及在python中的实例

引言 高斯过程（Gaussian Process，简称GP）是一种概率模型，用于描述一组随机变量的联合概率分布，其中任何一个有限维度的子集都具有高斯分布 文章目录 引言一、高斯过程1.1 基本定义1.1.1 随机过程1.1.2 高斯分布 1.2 高斯过程的特性1.2.1 联合高斯性1.2.2 均值函数1.2.3 协方差函数（或核函数） 1.3 核函数1.4 高斯过程回归（Gauss
阅读更多...

Copyright China编程 23002807@qq.com

沪ICP备2023033072号-2