python对离散变量的one-hot编码
来源:互联网 发布:mac壁纸2560x1600 编辑:程序博客网 时间:2024/05/06 18:12
我们在进行建模时,变量中经常会有一些变量为离散型变量,例如性别。这些变量我们一般无法直接放到模型中去训练模型。因此在使用之前,我们往往会对此类变量进行处理。一般是对离散变量进行one-hot编码。下面具体介绍通过python对离散变量进行one-hot的方法。
① pd.get_dummies(prefix=)
pandas的get_dummies()可以直接对变量进行one-hot编码,其中prefix是为one-hot编码后的变量进行命名。
②LabelEncoder和OneHotEncoder
我们也可以通过sklearn的模块实现对离散变量的one-hot编码,其中LabelEncoder是将离散变量替换为数字,
OneHotEncoder则实现对替换为数字的离散变量进行one-hot编码。
注:get_dummies()可以直接对字符型变量进行one-hot编码,但OneHotEncoder不能直接对字符型变量编码,因此我们需要先将字符型变量转换为数值型变量。这就是为什么在OneHotEncoder之前需要LabelEncoder的原因。
下面我们通过实例来介绍这两种方法的具体使用:
①数据的导入
import pandas as pdimport osos.getcwd() os.chdir('E:\study\kaggle\Titanic')from sklearn.preprocessing import OneHotEncoder from sklearn.preprocessing import LabelEncoder data = pd.read_csv('train.csv')②数据熟悉
data['Sex'].value_counts()Out[38]: male 577female 314Name: Sex, dtype: int64 #可以看到,变量Sex为字符型变量,取值有male和female两种③get_dummies
Sex_ohe_1 = pd.get_dummies(data['Sex'])Sex_ohe_1.head()Out[40]: female male0 0 11 1 02 1 03 1 04 0 1④OneHotEncoder
Sex_ohe_2 = OneHotEncoder(sparse=False).fit_transform(data['Sex'].reshape((-1,1))) ValueError: could not convert string to float: male可以看到OneHotEncoder无法直接对字符型变量进行编码,需要通过OneHotEncoder将字符型变量转换为数值型变量。
le_sex=LabelEncoder().fit(data['Sex']) Sex_label=le_sex.transform(data['Sex']) Sex_label= LabelEncoder().fit_transform(data['Sex']) #fit_transform等价于fit和transform两个函数结合ohe_sex=OneHotEncoder(sparse=False).fit(Sex_label.reshape(-1,1)) Sex_ohe=ohe_sex.transform(Sex_label.reshape(-1,1)) Sex_ohe_3 = OneHotEncoder(sparse=False).fit_transform(Sex_label.reshape((-1,1)))
注:get_dummies返回的为数据框,OneHotEncoder返回的为数组。
阅读全文
0 0
- python对离散变量的one-hot编码
- python sklearn one-hot编码
- 处理离散型特征和连续型特征共存的情况 归一化 论述了对离散特征进行one-hot编码的意义
- One-hot编码:Python sklearn CTR实验
- 【python】pd.get_dummies进行one-hot编码
- one-hot编码
- one-hot编码
- one-hot编码
- 关于One-hot编码
- ONE HOT 编码
- 生成one-hot编码
- 大神手把手教你:(Python)序列数据的One Hot编码
- 大神手把手教你:(Python)序列数据的One Hot编码
- one hot encoding/哑编码
- [数据预处理]one-hot编码
- Tensorflow学习: one-hot编码
- 关于one-hot编码引发相关问题的一点感想
- python的scikit-learn将特征转成one-hot特征
- 欢迎使用CSDN-markdown编辑器
- @RequestParam,@PathVariable,@ResponseBody,@RequestBody,@ModelAttribute
- 设计模式--适配器模式
- thinkphp如何防止用户同时操作一张表, sleep(1);
- postman中 form-data、x-www-form-urlencoded、raw、binary的区别
- python对离散变量的one-hot编码
- ios与H5交互,H5调取本地相册图片
- 实验二 预测分析算法的设计与实现
- Solr集群架构具体实现
- Windows 10 环境下配置 TensorFlow(2):Anaconda问题
- Textview自带展开和收起功能
- strtoul和errno的合作
- mysql5.6之my.cnf配置详解
- javascript之Object类型属性、方法