小编bfr*_*fra的帖子

具有float numpy数组的tensorflow记录

我想创建张量流记录来提供我的模型; 到目前为止,我使用以下代码将uint8 numpy数组存储为TFRecord格式;

def _int64_feature(value):
  return tf.train.Feature(int64_list=tf.train.Int64List(value=[value]))


def _bytes_feature(value):
  return tf.train.Feature(bytes_list=tf.train.BytesList(value=[value]))


def _floats_feature(value):
  return tf.train.Feature(float_list=tf.train.FloatList(value=[value]))


def convert_to_record(name, image, label, map):
    filename = os.path.join(params.TRAINING_RECORDS_DATA_DIR, name + '.' + params.DATA_EXT)

    writer = tf.python_io.TFRecordWriter(filename)

    image_raw = image.tostring()
    map_raw   = map.tostring()
    label_raw = label.tostring()

    example = tf.train.Example(features=tf.train.Features(feature={
        'image_raw': _bytes_feature(image_raw),
        'map_raw': _bytes_feature(map_raw),
        'label_raw': _bytes_feature(label_raw)
    }))        
    writer.write(example.SerializeToString())
    writer.close()
Run Code Online (Sandbox Code Playgroud)

我用这个示例代码阅读

features = tf.parse_single_example(example, features={
  'image_raw': tf.FixedLenFeature([], tf.string),
  'map_raw': tf.FixedLenFeature([], tf.string),
  'label_raw': tf.FixedLenFeature([], tf.string),
})

image = tf.decode_raw(features['image_raw'], tf.uint8)
image.set_shape(params.IMAGE_HEIGHT*params.IMAGE_WIDTH*3)
image = tf.reshape(image_, (params.IMAGE_HEIGHT,params.IMAGE_WIDTH,3))

map = tf.decode_raw(features['map_raw'], tf.uint8) …
Run Code Online (Sandbox Code Playgroud)

numpy tensorflow

13
推荐指数
2
解决办法
1万
查看次数

使用tf.data实现张量流输入管道时发生错误

我在使用新的tf.data tensorflow类实现输入管道时遇到问题。

具体来说,当我在预处理中包含卷积运算时(使用该map方法将其添加到管道中时),出现以下错误

tensorflow.python.framework.errors_impl.UnimplementedError: Generic conv implementation only supports NHWC tensor format for now.
 [[{{node conv_debug}} = Conv2D[T=DT_FLOAT, data_format="NCHW", dilations=[1, 1, 1, 1], padding="SAME", strides=[1, 1, 1, 1], use_cudnn_on_gpu=true](conv_debug-0-TransposeNHWCToNCHW-LayoutOptimizer, ArithmeticOptimizer/FoldMultiplyIntoConv_scaled_conv_debug_Const)]]
Run Code Online (Sandbox Code Playgroud)

当我从管道中排除卷积时,一切都会按预期进行。

我在下面附上了重现该问题所需的最少代码。

经过3种配置测试:

  • Tensorflow 1.12.0,CUDA 10.0,CUDnn 7.4.1出现错误。
  • Tensorflow 1.11.0,CUDA 9.0,CUDnn 7.3.1收到了错误。
  • Tensorflow 1.8.0,CUDA 8.0,CUDnn 6.0,它可以工作

我做错了还是是CUDA / CUDnn相关问题?

谢谢!

import numpy as np
import tensorflow as tf

image_height, image_width = 100, 200

def _bytes_feature(value):
    return tf.train.Feature(bytes_list=tf.train.BytesList(value=[value]))


def serialize_to_record(record_name, label, image):
        """Create a data record and store …
Run Code Online (Sandbox Code Playgroud)

python tensorflow cudnn

5
推荐指数
1
解决办法
430
查看次数

标签 统计

tensorflow ×2

cudnn ×1

numpy ×1

python ×1