我有一个现有的TensorFlow模型,它使用tf.placeholder作为模型输入,使用tf.Session()的feed_dict参数运行以输入数据.以前,整个数据集都被读入内存并以这种方式传递.
我想使用更大的数据集,并利用tf.data API的性能改进.我已经从中定义了一个tf.data.TextLineDataset和一次性迭代器,但是我很难弄清楚如何将数据导入模型来训练它.
起初我尝试将feed_dict定义为从占位符到iterator.get_next()的字典,但这给了我一个错误,说明feed的值不能是tf.Tensor对象.更多的挖掘让我明白这是因为iterator.get_next()返回的对象已经是图形的一部分了,不像你将它提供给feed_dict - 并且我不应该尝试使用feed_dict表现原因.
所以现在我已经摆脱了输入tf.placeholder并将其替换为定义我的模型的类的构造函数的参数; 在我的训练代码中构建模型时,我将iterator.get_next()的输出传递给该参数.这似乎有点笨拙,因为它打破了模型定义与数据集/培训程序之间的分离.我现在收到一个错误,说Tensor代表(我相信)我的模型的输入必须来自与iterator.get_next()的Tensor相同的图形.
我是否采用这种方法走上了正确的轨道,并且如何设置图形和会话,或类似的东西?(数据集和模型都在会话之外初始化,并且在我尝试创建之前发生错误.)
或者我完全偏离这个并且需要做一些不同的事情,比如使用Estimator API并在输入函数中定义所有东西?
以下是一些演示最小示例的代码:
import tensorflow as tf
import numpy as np
class Network:
def __init__(self, x_in, input_size):
self.input_size = input_size
# self.x_in = tf.placeholder(dtype=tf.float32, shape=(None, self.input_size)) # Original
self.x_in = x_in
self.output_size = 3
tf.reset_default_graph() # This turned out to be the problem
self.layer = tf.layers.dense(self.x_in, self.output_size, activation=tf.nn.relu)
self.loss = tf.reduce_sum(tf.square(self.layer - tf.constant(0, dtype=tf.float32, shape=[self.output_size])))
data_array = np.random.standard_normal([4, 10]).astype(np.float32)
dataset = tf.data.Dataset.from_tensor_slices(data_array).batch(2)
model = Network(x_in=dataset.make_one_shot_iterator().get_next(), input_size=dataset.output_shapes[-1])
Run Code Online (Sandbox Code Playgroud) 自从我从Eclipse Indigo升级到Juno(在Ubuntu 12.04上)以来,我一直遇到这样的问题:标准库(例如旁边#include <iostream>和#include <vector>等等)显示"未解决的包含"错误,尽管程序构建并运行正常(使用g ++).这只发生在使用Juno创建的新项目中,而不是在工作区中使用Indigo创建的旧项目中.
感谢其他几个SO问题(见下文*),我能够在项目的属性> C/C++常规>路径和符号>包含选项卡中找到问题的根源而没有"内置值":
/usr/include/c++/4.6
/usr/include/c++/4.6/x86_64-linux-gnu
/usr/include/c++/4.6/backward
/usr/lib/gcc/x86_64-linux-gnu/4.6/include
/usr/lib/gcc/x86_64-linux-gnu/4.6/include-fixed
/usr/include/x86_64-linux-gnu
/usr/include
Run Code Online (Sandbox Code Playgroud)
在我的旧Indigo项目中勾选"显示内置值"复选框时出现,这些项目没有出现此问题,但在我使用Juno创建的新项目中不存在.果然,如果我手动将这七个目录添加到项目设置中的"包含"选项卡,问题就会消失.但我不想为我创建的每个新项目手动执行此操作.有没有理由这不再是Juno的默认设置,有没有办法恢复它?
*其他SO问题我遇到过类似问题,但没有解决我的问题:
~/.eclipse/和重建索引没有帮助.我在Ubuntu 12.04 64位上使用OpenCV 2.4.5.我希望能够设置Logitech C310网络摄像头的输入分辨率.相机支持最高1280x960(30fps),我可以在guvcview中以此分辨率观看视频.但OpenCV总是以640x480的速度获取视频.
在创建VideoCapture上限后立即尝试使用cap.set(CV_CAP_PROP_FRAME_WIDTH,1280)和cap.set(CV_CAP_PROP_FRAME_HEIGHT,960)更改分辨率无效; 在获取每个帧之前尝试立即设置它们会导致程序立即崩溃.我也不能用这种方法降低分辨率.我也收到错误"HIGHGUI ERROR:V4L/V4L2:VIDIOC_S_CROP".我认为这可能是相关的,因为它在创建VideoCapture时出现一次,并且当我尝试设置宽度和高度时出现一次(但奇怪的是,如果我尝试仅设置其中一个,则不会).
我知道我不是第一个遇到这个问题的人,但我还没有找到一个解决方案,经过谷歌搜索和搜索SO以及互联网上的其他地方(在我已经尝试过的许多事情中,无法获得的答案是这个StackOverflow问题:提高OpenCV中的摄像头捕获分辨率.这是OpenCV中的错误吗?如果是这样,这是一个相当明显的.
以下是展示问题的代码示例(只是OpenCV视频显示代码的修改版本):
#include <cv.h>
#include <highgui.h>
using namespace cv;
int main(int argc, char** argv)
{
VideoCapture cap(0); // open the default camera
if(!cap.isOpened()) // check if we succeeded
return -1;
cap.set(CV_CAP_PROP_FRAME_WIDTH, 160);
cap.set(CV_CAP_PROP_FRAME_HEIGHT, 120);
Mat image;
namedWindow("Video", CV_WINDOW_AUTOSIZE);
while(1)
{
// cap.set(CV_CAP_PROP_FRAME_WIDTH, 160);
// cap.set(CV_CAP_PROP_FRAME_HEIGHT, 120);
cap >> image;
imshow("Video", image);
if(waitKey(10) == 99 ) break;
}
return
}
Run Code Online (Sandbox Code Playgroud)
实际上,如上所述,我得到两个"HIGHGUI ERROR",我得到一个640x480输出.我知道160x120是我的相机支持的分辨率v4l2-ctl --list-formats-ext.如果我取消注释while循环中两个注释掉的行,程序会立即崩溃.
这些可能是相关的或有可能的解决方案:http://answers.opencv.org/question/11427/decreasing-capture-resolution-of-webcam/,http://answers.opencv.org/question/30062/error-设置-分辨率的视频捕获装置/