feature_column相关接口

2024-09-06 05:48
文章标签 feature column 接口 相关

本文主要是介绍feature_column相关接口,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在TensorFlow中,特征列(Feature column)是原始数据和 Estimator 之间的接口,它告诉Estimator如何使用数据。

原始数据集包含各种各样的特征,有的特征是数值,比如年龄,长度、速度;有的特征是文字,比如,地址、Email内容、数据库查询语句等

神经网络接受的输入,只能是数值,而且是整理好的数值

所以,原始数据 和 神经网络输入需求之间需要一个桥梁,这个桥梁就是特征列(Feature column)

  • 使用特征列可以将类别特征转换为one-hot编码特征,将连续特征构建分桶特征,以及对多个特征生成交叉特征等等。

  • 要创建特征列,请调用 tf.feature_column模块的函数。该模块中常用的九个函数如下图所示,所有九个函数都会返回一个 Categorical-Column或一个 Dense-Column对象,但却不会返回 bucketized_column,后者继承自这两个类。

  • 注意:所有的Catogorical Column类型最终都要通过indicator_column转换成Dense Column类型才能传入DNN模型!

创建特征列,需要调用 tf.feature_column 模块的函数。TensorFlow V1.8的特征列有八种,对应9个函数分别是:

1,数值列(tf.feature_column.numeric_column)

2,分桶列(tf.feature_column.bucketized_column)

3,分类标识列(tf.feature_column.categorical_column_with_identity)

4,分类词汇列(tf.feature_column.categorical_column_with_vocabulary_list 或者 tf.feature_column.categorical_column_with_vocabulary_file)

5,经过哈希处理的列(tf.feature_column.categorical_column_with_hash_bucket)

6,组合列(tf.feature_column.crossed_column)

7,指标列(tf.feature_column.indicator_column)

8,嵌入列(tf.feature_column.embedding_column)

将特征列传递给 Estimator的注意事项

下面的列表所示,并非所有 Estimator 都支持所有类型的 feature_columns 参数:

1,LinearClassifier 和 LinearRegressor:接受所有类型的特征列。

2,DNNClassifier 和 DNNRegressor:只接受密集列。其他类型的列必须封装在 indicator_column 或 embedding_column 中。

3,DNNLinearCombinedClassifier 和 DNNLinearCombinedRegressor:

       a). linear_feature_columns 参数接受任何特征列类型。

       b). dnn_feature_columns 参数只接受密集列。

https://www.tensorflow.org/api_docs/python/tf/feature_column/sequence_categorical_column_with_vocabulary_file?hl=enicon-default.png?t=LA46https://www.tensorflow.org/api_docs/python/tf/feature_column/sequence_categorical_column_with_vocabulary_file?hl=en

categorical_column_with_vocabulary_list
import tensorflow as tfpets = {'pets': ['rabbit','pig','dog','mouse','cat']}  column = tf.feature_column.categorical_column_with_vocabulary_list(key='pets',vocabulary_list=['cat','dog','rabbit','pig'], dtype=tf.string, default_value=-1,num_oov_buckets=3)indicator = tf.feature_column.indicator_column(column)
tensor = tf.feature_column.input_layer(pets, [indicator])with tf.Session() as session:session.run(tf.global_variables_initializer())session.run(tf.tables_initializer())print(session.run([tensor]))

参考文献

这个文献写的特别好

tensorflow踩坑合集1. feature_column - 风雨中的小七 - 博客园踩坑内容包含以下 feature_column的输入输出类型,用一个数据集给出demo feature_column接estimator feature_column接Keras feature_cohttps://www.cnblogs.com/gogoSandy/p/12435372.html学习TensorFlow中有关特征工程的API - 云+社区 - 腾讯云用TensorFlow框架搭建神经网络已经是大众所知的事情。今天我们来聊一聊如何用TensorFlow 对数据进行特征工程处理。https://cloud.tencent.com/developer/article/1467606

tf.feature_column的特征处理探究 - 知乎1. 背景 tf.estimator是tensorflow的一个高级API接口,它最大的特点在于兼容分布式和单机两种场景,工程师可以在同一套代码结构下即实现单机训练也可以实现分布式训练,正是因为这样的特点,目前包括阿里在内的很…https://zhuanlan.zhihu.com/p/73701872

tensorflow2.x学习笔记二十:特征列feature_column - 灰信网(软件开发博客聚合)https://www.freesion.com/article/2669486257/【1024 程序员节快乐】TensorFlow 特征工程: feature_column今天是1024程序员节,祝所有程序员美梦成真,永无Bug!\x0a\x0a在使用很多模型的时候,都需要对输入的数据进行必要的特征工程处理。最典型的就是:one-hot处理、hash分桶等处理。而tensorflow提供了一些列的特征工程方法来方便使用https://mp.weixin.qq.com/s/lYFRuw0V67QTbY5ytTCBaA

这篇关于feature_column相关接口的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1141169

相关文章

sqlite3 相关知识

WAL 模式 VS 回滚模式 特性WAL 模式回滚模式(Rollback Journal)定义使用写前日志来记录变更。使用回滚日志来记录事务的所有修改。特点更高的并发性和性能;支持多读者和单写者。支持安全的事务回滚,但并发性较低。性能写入性能更好,尤其是读多写少的场景。写操作会造成较大的性能开销,尤其是在事务开始时。写入流程数据首先写入 WAL 文件,然后才从 WAL 刷新到主数据库。数据在开始

两个月冲刺软考——访问位与修改位的题型(淘汰哪一页);内聚的类型;关于码制的知识点;地址映射的相关内容

1.访问位与修改位的题型(淘汰哪一页) 访问位:为1时表示在内存期间被访问过,为0时表示未被访问;修改位:为1时表示该页面自从被装入内存后被修改过,为0时表示未修改过。 置换页面时,最先置换访问位和修改位为00的,其次是01(没被访问但被修改过)的,之后是10(被访问了但没被修改过),最后是11。 2.内聚的类型 功能内聚:完成一个单一功能,各个部分协同工作,缺一不可。 顺序内聚:

log4j2相关配置说明以及${sys:catalina.home}应用

${sys:catalina.home} 等价于 System.getProperty("catalina.home") 就是Tomcat的根目录:  C:\apache-tomcat-7.0.77 <PatternLayout pattern="%d{yyyy-MM-dd HH:mm:ss} [%t] %-5p %c{1}:%L - %msg%n" /> 2017-08-10

Java 后端接口入参 - 联合前端VUE 使用AES完成入参出参加密解密

加密效果: 解密后的数据就是正常数据: 后端:使用的是spring-cloud框架,在gateway模块进行操作 <dependency><groupId>com.google.guava</groupId><artifactId>guava</artifactId><version>30.0-jre</version></dependency> 编写一个AES加密

Node Linux相关安装

下载经编译好的文件cd /optwget https://nodejs.org/dist/v10.15.3/node-v10.15.3-linux-x64.tar.gztar -xvf node-v10.15.3-linux-x64.tar.gzln -s /opt/node-v10.15.3-linux-x64/bin/npm /usr/local/bin/ln -s /opt/nod

git ssh key相关

step1、进入.ssh文件夹   (windows下 下载git客户端)   cd ~/.ssh(windows mkdir ~/.ssh) step2、配置name和email git config --global user.name "你的名称"git config --global user.email "你的邮箱" step3、生成key ssh-keygen

zookeeper相关面试题

zk的数据同步原理?zk的集群会出现脑裂的问题吗?zk的watch机制实现原理?zk是如何保证一致性的?zk的快速选举leader原理?zk的典型应用场景zk中一个客户端修改了数据之后,其他客户端能够马上获取到最新的数据吗?zk对事物的支持? 1. zk的数据同步原理? zk的数据同步过程中,通过以下三个参数来选择对应的数据同步方式 peerLastZxid:Learner服务器(Follo

rtmp流媒体编程相关整理2013(crtmpserver,rtmpdump,x264,faac)

转自:http://blog.163.com/zhujiatc@126/blog/static/1834638201392335213119/ 相关资料在线版(不定时更新,其实也不会很多,也许一两个月也不会改) http://www.zhujiatc.esy.es/crtmpserver/index.htm 去年在这进行rtmp相关整理,其实内容早有了,只是整理一下看着方

java线程深度解析(一)——java new 接口?匿名内部类给你答案

http://blog.csdn.net/daybreak1209/article/details/51305477 一、内部类 1、内部类初识 一般,一个类里主要包含类的方法和属性,但在Java中还提出在类中继续定义类(内部类)的概念。 内部类的定义:类的内部定义类 先来看一个实例 [html]  view plain copy pu

枚举相关知识点

1.是用户定义的数据类型,为一组相关的常量赋予有意义的名字。 2.enum常量本身带有类型信息,即Weekday.SUN类型是Weekday,编译器会自动检查出类型错误,在编译期间可检查错误。 3.enum定义的枚举类有什么特点。         a.定义的enum类型总是继承自java.lang.Enum,且不能被继承,因为enum被编译器编译为final修饰的类。         b.只能定义