tensorflow Pipeline 之TextLineReader 和decode_csv多分割替代方案

最新推荐文章于 2020-11-11 10:47:06 发布

weixin_30553777

最新推荐文章于 2020-11-11 10:47:06 发布

阅读量210

点赞数

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/xiaoniu-666/p/10764013.html

本文详细介绍使用TensorFlow中的TextLineReader进行数据读取，并利用decode_csv进行数据解析的方法。包括如何设置默认值、处理字段分隔符以及如何进行多级decode_csv操作。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1、TextLineReader

reader = tf.TextLineReader()    
key, value = reader.read(filename_queue)    
record_defaults = [1,1,1,1,1]    
a,b,c,d,e =  tf.decode_csv(records=value,record_defaults=record_defaults, field_delim=" ")


2、decode_csv用法

1>、decode_csv的 field_delim只能1个
2>、可以多个decode_csv套用

    reader = tf.TextLineReader()
    key, value = reader.read(filename_queue)
    record_defaults = [[''], ['']]
    cols = tf.decode_csv(value, record_defaults, field_delim='\t')

    default = [[1.0]] * (lenth) 
    img = tf.decode_csv(cols[0], default, ',')
    label = tf.decode_csv(cols[1], [[0]] * 10, ',')