-
python机器学习:线性回归中的哑变量转换
- 网站名称:python机器学习:线性回归中的哑变量转换
- 网站分类:技术文章
- 收录时间:2025-08-04 22:23
- 网站地址:
“python机器学习:线性回归中的哑变量转换” 网站介绍
之前其实写过一个在python中如何进行哑变量转化的文章,今天又遇到了相同的问题,为了加强学习效果,决定今天和线性回归一起再写一遍。
什么是哑变量
举一个例子,假设变量“职业”的取值分别为:农民、工人、学生、企业职员、其他,共5种选项,此时我们用1,2,3,4,5来代表这5个职业类型是解释不通的。我们可以用4个哑变量来代替“职业”这个变量,分别为D1(1=农民/0=非农民)、D2(1=工人/0=非工人)、D3(1=学生/0=非学生)、D4(1=企业职员/0=非企业职员),最后一个选项“其他”的信息已经包含在这4个变量中了,所以不需要再增加一个D5(1=其他/0=非其他)了。在这种情况下,我们称“其他”为参考组。建模分析出来结果都是相对于“其他”组而言的。
实战操作
首先导入相关库和数据,代码如下:
import pandas as pd
import seaborn as sns
from sklearn import linear_model
tips=sns.load_dataset('tips')
tips
上面的代码中,我导入了seborn自带的数据集‘tips',可以看到,我们的数据长这样:
我们现在要做的是拟合'total_bill','size','sex'对'tip'的线性回归,运行以下代码:
lr=linear_model.LinearRegression()
lr.fit(X=tips[['total_bill','size','sex']],y=tips['tip'])
发现,报错“could not convert string to float",这个就是提醒我们要把”sex"转化为数值型变量,因为其为非等级的分类变量,所以我们就得用到哑变量转化,代码如下:
pd.get_dummies(tips)
我们直接用pandas自带的.get_dummies方法就可以啦,运行代码后输出如下:
可以看到,这个方法将数据集中所有的分类变量都自动转化为了哑变量。非常方便。
通常情况下,如果某个变量有n种选择,则将其用哑变量引入模型时,要设置n-1个哑变量,以避免完全的多重共线性。如性别的选择有两种,则引入一个哑变量,是男则数值为1,否则为0,当然也可以设置为女为1,否则为0。季节的选择有4个,则引入3个哑变量,哑变量1:春为1,否则为0。哑变量2:夏为1,否则为0。哑变量3:秋为1,否则为0。
请注意,以上我们用.get_dummies的方法得到的哑变量是n个,比如“sex"本来有2种选择,我们只需要
1个哑变量足够,所以,在上图中得到的哑变量,我们得减去一个然后建模,代码如下:
pd.get_dummies(tips,drop_first=True)
可以看到,.get_dummies方法给我们提供了删掉头一个哑变量的参数drop_first,我们将其设置为True就可以了,得到结果如下:
此时,我们就可以顺利的进行线性回归的拟合了
tips_dummy=pd.get_dummies(tips,drop_first=True)
lr=linear_model.LinearRegression()
lr.fit(X=tips_dummy[['total_bill','size','sex_Female']],y=tips_dummy['tip'])
lr.coef_
lr.intercept_
结果如图
可以看到,经过哑变量转化后,模型顺利输出了sex这个变量的系数。
结论
今天还是用一个线性回归的实例给大家介绍了哑变量的实际应用,希望对大家有帮助。感谢大家耐心看完。发表这些东西的主要目的就是督促自己,希望大家关注评论指出不足,一起进步。内容我都会写的很细,用到的数据集也会在原文中给出链接,你只要按照文章中的代码自己也可以做出一样的结果,一个目的就是零基础也能懂,因为自己就是什么基础没有从零学Python的,加油。
(站外链接发不了,请关注后私信回复“数据链接”获取本头条号所有使用数据)
往期精彩:
更多相关网站
- 谷歌、南加州发布:从视频中自监督学习,研究机器人行为
- 一种基于深度学习的全自动纸心电图数字化算法
- 高斯混合模型 GMM 的详细解释(高斯混合模型与kmeans)
- 重磅好文透彻理解,异构图上 Node 分类理论与DGL源码实战
- 不敢想象自动给训练数据打标签能有多爽
- 通俗易懂-三哥讲机器学习-03-机器学习-决策树-Decision Tree
- [机器学习] Yellowbrick使用笔记1-快速入门
- 大数据集特征工程实践:将54万样本预测误差降低68%代码实现详解
- pydotplus的安装、基本入门和决策树的可视化
- 机器学习应用之:搞懂客户的购物车!
- Python趣味打怪:60秒学会一个例子,147段代码助你从入门到大师
- 最近发表
- 标签列表
-
- mydisktest_v298 (35)
- sql 日期比较 (33)
- document.appendchild (35)
- 头像打包下载 (35)
- 二调符号库 (23)
- acmecadconverter_8.52绿色版 (25)
- 梦幻诛仙表情包 (36)
- 魔兽模型 (23)
- java面试宝典2019pdf (26)
- disk++ (30)
- 加密与解密第四版pdf (29)
- iteye (26)
- centos7.4下载 (32)
- intouch2014r2sp1永久授权 (33)
- usb2.0-serial驱动下载 (24)
- jdk1.8.0_191下载 (27)
- axure9注册码 (30)
- virtualdrivemaster (26)
- 数据结构c语言版严蔚敏pdf (25)
- 兔兔工程量计算软件下载 (27)
- 代码整洁之道 pdf (26)
- ccproxy破解版 (31)
- aida64模板 (28)
- engine=innodb (33)
- shiro jwt (28)