news 2026/5/25 18:18:20

DAY28 元组和OS模块

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
DAY28 元组和OS模块

前言:今天主要学习了两个方面的基础知识--元组和OS模块。理解和应用好这两个方面将为我们后续进阶深度学习打下了坚实的基础。

一、元组

元组的特点:

1. 有序,可以重复,这一点和列表一样

2. 元组中的元素不能修改,这一点非常重要,深度学习场景中很多参数、形状定义好了确保后续不能被修改。

对于元组方面基础的一些用法在此我们不做过多的赘述,我们主要来讲一讲其和列表结合起来在管道工程中的应用。

3.示例

管道工程中pipeline类接收的是一个包含多个小元组的 列表 作为输入。

可以这样理解这个结构

(1) 列表 []: 定义了步骤执行的先后顺序。Pipeline 会按照列表中的顺序依次处理数据。之所以用列表,是未来可以对这个列表进行修改。

(2) 元组 (): 用于将每个步骤的名称和处理对象捆绑在一起。名称用于在后续访问或设置参数时引用该步骤,而对象则是实际执行数据转换或模型训练的工具。固定了操作名+操作

示例代码:

# 管道按顺序执行以下步骤: # - StandardScaler(): 标准化数据(移除均值并缩放到单位方差) # - LogisticRegression(): 逻辑回归分类器 pipeline = Pipeline([ ('scaler', StandardScaler()), ('logreg', LogisticRegression()) ])

二、OS模块

好的代码组织和有效的文件管理是大型深度学习项目的基石。os 模块是实现这些目标的重要组成部分。

一些基本操作:

1、获取当前工作目录

示例代码:

import os # os是系统内置模块,无需安装 os.getcwd() # get current working directory 获取当前工作目录的绝对路径

2、获取当前工作目录下的文件列表

示例代码:

os.listdir() # list directory 获取当前工作目录下的文件列表

3、环境变量方法

示例代码:

# os.environ 表现得像一个字典,包含所有的环境变量 os.environ # 使用 .items() 方法可以方便地同时获取变量名(键)和变量值,之前已经提过字典的items()方法,可以取出来键和值 # os.environ是可迭代对象 for variable_name, value in os.environ.items(): # 直接打印出变量名和对应的值 print(f"{variable_name}={value}") # 你也可以选择性地打印总数 print(f"\n--- 总共检测到 {len(os.environ)} 个环境变量 ---")

4.目录树

os.walk() 是 Python os 模块中一个非常有用的函数,它用于遍历(或称“行走”)一个目录树。其遍历过程采取的是深度优先策略。

其每次遍历主要返回三个顺序的参数:

当前访问目录 (dirpath)

子目录列表 (dirnames)

文件列表 (filenames)

以下面这个目录结构为例:

my_project/
├── data/
│ ├── processed/ ← 空文件夹
│ └── raw/
│ └── data1.csv
├── src/
│ ├── models/
│ │ └── model_a.py
│ └── utils.py
├── main.py
└── README.md

访问流程:

步骤1: 到达 my_project

看到: 子目录=['data', 'src'], 文件=['main.py', 'README.md']
先进入第一个子目录 'data'

步骤2: 到达 my_project/data

看到: 子目录=['processed', 'raw'], 文件=[]
先进入第一个子目录 'processed'

步骤3: 到达 my_project/data/processed

看到: 子目录=[], 文件=[]
这是死胡同,退回到 my_project/data

步骤4: 还在 my_project/data

进入下一个子目录 'raw'

步骤5: 到达 my_project/data/raw

看到: 子目录=[], 文件=['data1.csv']
这是死胡同,退回到 my_project/data
但 my_project/data 的子目录都探索完了,退回到 my_project

步骤6: 回到 my_project

进入下一个子目录 'src'

步骤7: 到达 my_project/src

看到: 子目录=['models'], 文件=['utils.py']
进入子目录 'models'

步骤8: 到达 my_project/src/models

看到: 子目录=[], 文件=['model_a.py']
探索完成!

示例代码:

import os start_directory = os.getcwd() # 假设这个目录在当前工作目录下 print(f"--- 开始遍历目录: {start_directory} ---") for dirpath, dirnames, filenames in os.walk(start_directory): print(f" 当前访问目录 (dirpath): {dirpath}") print(f" 子目录列表 (dirnames): {dirnames}") print(f" 文件列表 (filenames): {filenames}")

@浙大疏锦行

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/5/25 23:16:53

时序数据选型、存储模型与选型

时序数据选型、存储模型与选型 一、时序数据的特征与挑战 时间戳驱动:数据天然带有时间维度,典型场景包括监控指标、传感器采集、交易日志。高吞吐写入:数据持续产生,要求数据库具备批量写入与乱序处理能力。查询模式特殊&#xf…

作者头像 李华
网站建设 2026/5/26 1:41:06

基于微信小程序的家政服务系统

博主介绍:java高级开发,从事互联网行业六年,熟悉各种主流语言,精通java、python、php、爬虫、web开发,已经做了多年的设计程序开发,开发过上千套设计程序,没有什么华丽的语言,只有实…

作者头像 李华
网站建设 2026/5/24 16:46:19

MindSpore高效训练指南:从数据流水线到混合精度实战

在昇腾(Ascend)NPU上进行深度学习模型训练时,我们经常会遇到GPU转NPU的代码迁移问题,或者发现算力虽然强劲,但训练速度受限于IO或显存。作为一名在昇腾生态摸爬滚打的开发者,今天我想分享几个基于MindSpore…

作者头像 李华
网站建设 2026/5/25 23:03:43

两阶段鲁棒优化在主动配电网动态无功优化中的实践

两阶段鲁棒优化的主动配电网动态无功优化 关键词:两阶段鲁棒优化,CCG算法,储能 仿真算例采用33节点,采用matlabyalmipcplex编写,两阶段模型采用CCG算法求解。 模型中一阶段变量主要包括01变量和无功优化变量&#xff0…

作者头像 李华
网站建设 2026/5/26 5:35:12

探索 DSPLLC 开关电源模块设计的宝藏世界

DSPLLC开关电源模块设计资料DSP数字LLC电源源代码原理图软件学习,包含磁件设计、软件设计报告、硬件设计报告、硬件原理、主功率计算书、LLC环路设计、仿真、BOM、使用说明,调试波形等全面且详细的全套资料最近在研究电源相关的技术,发现了一…

作者头像 李华
网站建设 2026/5/26 5:34:20

基于推荐算法的校园电子图书听书系统

Spring Boot基于推荐算法的校园电子图书听书系统是一个专为校园师生设计的数字化阅读平台。以下是对该系统的详细介绍: 一、系统背景与目的 随着信息技术的不断发展,数字化阅读已经成为校园阅读的新趋势。为了满足校园师生对电子图书和听书资源的需求&am…

作者头像 李华