小编Nit*_*tin的帖子

使用ImageDataGenerator时,Keras分割列车测试集

我有一个目录,其中包含图像的子文件夹(根据标签).我想在Keras中使用ImageDataGenerator时将这些数据拆分为train和test set.尽管keras中的model.fit()具有用于指定拆分的参数validation_split,但我找不到与model.fit_generator()相同的参数.怎么做 ?

train_datagen = ImageDataGenerator(rescale=1./255,
    shear_range=0.2,
    zoom_range=0.2,
    horizontal_flip=True)

train_generator = train_datagen.flow_from_directory(
    train_data_dir,
    target_size=(img_width, img_height),
    batch_size=32,
    class_mode='binary')

model.fit_generator(
    train_generator,
    samples_per_epoch=nb_train_samples,
    nb_epoch=nb_epoch,
    validation_data=??,
    nb_val_samples=nb_validation_samples)
Run Code Online (Sandbox Code Playgroud)

我没有单独的验证数据目录,需要将其从训练数据中分离出来

keras train-test-split

38
推荐指数
6
解决办法
2万
查看次数

Tensorflow词汇处理器

我正在使用tensorflow关注文本分类的wildml博客.我无法理解代码语句中max_document_length的用途:

vocab_processor = learn.preprocessing.VocabularyProcessor(max_document_length)
Run Code Online (Sandbox Code Playgroud)

另外我如何从vocab_processor中提取词汇表

vocabulary tensorflow

16
推荐指数
1
解决办法
1万
查看次数

如何解释损失和准确性的增加

我使用tensorflow运行深度学习模型(CNN).在这个时代,我已经多次观察到损失和准确性都有所增加,或两者都有所减少.我的理解是两者总是成反比关系的.什么可能是同时增加或减少的情况.

loss deep-learning tensorflow

15
推荐指数
3
解决办法
9279
查看次数

Python中的独立组件分析(ICA)

python中有没有可用的程序包来执行独立组件分析(ICA)?

请提供一些指针和链接,以便我可以从python开始。

decomposition python-3.x dimensionality-reduction

4
推荐指数
1
解决办法
3564
查看次数

Tensorflow检查点模型被删除

我使用以下代码在每10个纪元后使用tensorflow检查点:

checkpoint_dir = os.path.abspath(os.path.join(out_dir, "checkpoints"))
checkpoint_prefix = os.path.join(checkpoint_dir, "model")
...
if current_step % checkpoint_every == 0:
    path = saver.save(sess, checkpoint_prefix, global_step=current_step)
    print("Saved model checkpoint to {}\n".format(path))
Run Code Online (Sandbox Code Playgroud)

问题是,随着新文件的生成,以前的5个模型文件会自动被删除.

checkpoint tensorflow

4
推荐指数
1
解决办法
3474
查看次数

Dataproc 导入存储在谷歌云存储 (gcs) 存储桶中的 python 模块

我在 GCS 存储桶上有以下结构:

  1. my_bucket/笔记本/jupyter/
    • 模块
      • 我的模块.py
      • 初始化.py
    • notebook_1.ipynb

如何在 notebook_1.ipynb 中导入 mymodule?(notebook_1.ipynb 是 python 笔记本,不是 spark 笔记本)

python-import google-cloud-storage google-cloud-dataproc

3
推荐指数
1
解决办法
859
查看次数