文本数值化

最新推荐文章于 2023-05-12 15:37:58 发布

DiamondTan-覃

最新推荐文章于 2023-05-12 15:37:58 发布

阅读量1.8k

点赞数 3

分类专栏：机器学习文章标签：文本数值化数据预处理

本文链接：https://blog.csdn.net/Tan_HandSome/article/details/89447515

版权

机器学习专栏收录该内容

8 篇文章

订阅专栏

对于文本数据进行机器学习算法分析之前我们需要对文本数据进行数值化，下面是一种比较常用的使用数值替换文本的方法。

import pandas as pd
from collections import defaultdict
train = pd.read_csv(r'E:\MathModel\MathModelingData\D\process\all_copy.csv')
d = defaultdict(LabelEncoder)  # 数值化
X_trans = X.apply(lambda x: d[x.name].fit_transform(x.astype(str)))  # 文本数值化处理符号
X_trans.to_csv(r'E:\MathModel\MathModelingData\D\process\all_copy_numeralization.csv', encoding='utf-8', index=False, index_label=None)