news 2026/4/16 9:18:49

sklearn中fit、transform、fit_transform用法详解

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
sklearn中fit、transform、fit_transform用法详解

1. 基本概念

这三个方法是 scikit-learn 转换器(Transformer)的核心方法:

fit() - 学习数据的参数(如均值、标准差等)

transform() - 应用学到的参数转换数据

fit_transform() - 一次性完成学习和转换

2. 详细解释

fit() - 训练/学习阶段

# 只学习参数,不转换数据scaler.fit(X_train)

计算并存储数据的统计信息(如均值、方差等)

不返回转换后的数据,只返回转换器对象本身

通常用于训练集

transform() - 转换阶段

# 使用已学习的参数转换数据X_train_scaled=scaler.transform(X_train)X_test_scaled=scaler.transform(X_test)# 对测试集用相同的参数

应用之前 fit() 学到的参数

返回转换后的数据

可用于训练集和测试集

fit_transform() - 训练+转换

# 一次性完成学习和转换X_train_scaled=scaler.fit_transform(X_train)

相当于先调用 fit() 再调用 transform()

只返回转换后的数据(不返回转换器)

仅用于训练集

3. 实际示例

示例1:标准化 (StandardScaler)

from sklearn.preprocessingimportStandardScalerimportnumpy as np# 创建数据X_train=np.array([[1,2],[3,4],[5,6]])X_test=np.array([[7,8],[9,10]])# 创建标准化器scaler=StandardScaler()# 正确用法scaler.fit(X_train)# 只在训练集上学习参数X_train_scaled=scaler.transform(X_train)X_test_scaled=scaler.transform(X_test)# 测试集用相同参数# 或者用快捷方式X_train_scaled=scaler.fit_transform(X_train)# 训练集X_test_scaled=scaler.transform(X_test)# 测试集print("训练集标准化后:")print(X_train_scaled)print("\n测试集标准化后:")print(X_test_scaled)

示例2:PCA降维

from sklearn.decompositionimportPCA# 创建PCA对象,保留2个主成分pca=PCA(n_components=2)# 在训练集上学习主成分X_train_pca=pca.fit_transform(X_train)# 相当于 fit() + transform()# 在测试集上应用相同的主成分X_test_pca=pca.transform(X_test)# 只用 transform()print(f"解释方差比例: {pca.explained_variance_ratio_}")

4. 重要注意事项

绝对不能这样用!

# ❌ 错误:测试集上调用 fit_transform()X_test_scaled=scaler.fit_transform(X_test)# 错误!# ❌ 错误:训练集只transform不fitX_train_scaled=scaler.transform(X_train)# 报错:没有先fit

为什么测试集只用 transform()?
保证训练集和测试集使用相同的转换规则

防止数据泄露(Data Leakage)

确保模型评估的准确性

5. 流程总结

# 训练阶段(训练集)X_train_transformed=transformer.fit_transform(X_train)# 测试/预测阶段(测试集/新数据)X_test_transformed=transformer.transform(X_test)# 如果有新数据需要预测new_data_transformed=transformer.transform(new_data)

记忆技巧
fit = 学习规则(只在训练集做一次)

transform = 应用规则(训练集、测试集都要做)

fit_transform = fit + transform(训练集的快捷方式)

记住这个原则:训练集可以了解数据,测试集只能应用从训练集学到的规则。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/15 16:59:37

未来10年就业率高的四个专业,毕业生很好就业,家长可放心!

未来10年就业率高的四个专业,毕业生很好就业,家长可放心! 填报志愿季又到了 . 家长群里炸开了锅. "选什么专业孩子以后不愁工作?"这个问题, 我每年都被问几百遍. 说实话. 市场在变. 专业冷热也在轮转. 但有四个专业, 未来十年的…

作者头像 李华
网站建设 2026/4/16 9:20:33

用Nginx日志风格复刻《黑客帝国》代码雨:终端里的赛博朋克特效

前言:《黑客帝国》的绿色数字雨是赛博朋克经典符号,也是不少人对“代码之美”的初印象。出于对这个经典画面的喜爱,我决定复刻一款数字雨脚本。 网上现存版本多有痛点:单系统适配、易闪烁乱码、依赖第三方库。因此我用Python内置库…

作者头像 李华
网站建设 2026/4/16 9:18:03

Thinkphp-Laravel微信小程序的社区后勤报修系统

目录摘要项目开发技术介绍PHP核心代码部分展示系统结论源码获取/同行可拿货,招校园代理摘要 ThinkPHP-Laravel微信小程序社区后勤报修系统是一款基于Web和移动端的综合性服务平台,旨在为社区居民提供便捷的报修、投诉及后勤管理功能。系统采用ThinkPHP和Laravel双框…

作者头像 李华
网站建设 2026/4/16 10:13:43

动态加载库:dlopen详解-deepseek

功能:dlopen 用于在运行时打开动态链接库,并返回一个句柄给调用进程。 基本语法:void* dlopen(const char* filename, int flag);,其中 filename 是库文件的路径,flag 是打开模式(如 RTLD_NOW 或 RTLD_LAZ…

作者头像 李华