RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics

文章目录

  • 处理分类特征
    • 把分类特征转化为数值特征
    • 应用one-hot编码
    • indice要从1开始而不能从0开始
    • 数据处理
    • 为什么使用one-hot向量
  • 处理文本数据
    • Step1:将文本分割成单词
    • Step2:计算单词的频度
      • 按频度递减的方式排序
    • Step3:One-Hot编码

处理分类特征

把分类特征转化为数值特征

RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第1张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第2张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第3张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第4张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第5张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第6张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第7张图片

应用one-hot编码

RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第8张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第9张图片

indice要从1开始而不能从0开始

RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第10张图片

数据处理

RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第11张图片

为什么使用one-hot向量

RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第12张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第13张图片

处理文本数据

Step1:将文本分割成单词

RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第14张图片

Step2:计算单词的频度

RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第15张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第16张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第17张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第18张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第19张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第20张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第21张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第22张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第23张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第24张图片

按频度递减的方式排序

RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第25张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第26张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第27张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第28张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第29张图片

Step3:One-Hot编码

RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第30张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第31张图片
RNN模型与NLP应用(1/9):数据处理基础Data Processing Basics_第32张图片
如果想获取更多神经网络深度学习强化学习资料可以私信我。之后我会持续更新,如果喜欢我的文章,请记得一键三连哦,点赞关注收藏,你的每一个赞每一份关注每一次收藏都将是我前进路上的无限动力 !!!↖(▔▽▔)↗感谢支持!

你可能感兴趣的:(RNN模型与NLP应用基础知识,机器学习,人工智能,RNN,NLP,数据处理)