Tensorflow无端拆分批次

文章/答案/技术大牛

发布

1回答

python、tensorflow

我遇到了一个问题，我们将一批形状128，3输入到tensorflow模型中(以及许多其他输入)，当我将模型的输出定义为tf.shape(输入)时，则输出为： [32, 3, 32, 3, 32, 3,为什么tensorflow只改变输入的形状？此行为仅存在于批处理大小大于32的情况下，否则输出正确为batch_size，3。

浏览 8提问于2021-07-19得票数 1

1回答

拆分和重组Tensorflow数据集

python、tensorflow、keras、tensorflow-datasets

我目前有一个tensorflow Dataset，有很多批次(批次数量是可变的，但可以被4整除)。我想每4次拿出一次作为测试，其余的作为训练，但我还没有遇到一个优雅的解决方案。b7,b8,b9,b10,b11,b12]test = [b4,b8,b12] 大多数关于Dataset的训练-验证-测试拆分的解决方案都使用Dataset.take()和Dataset.skip()的组合，因为它们并不介意在中间的某个地方拆分数据。没有

浏览 26提问于2020-09-11得票数 0

回答已采纳

6回答

如何使用累积的梯度更新模型参数？

python、tensorflow、gradient

我正在使用TensorFlow构建一个深度学习模型。也是TensorFlow的新手。但是由于TensorFlow是基于图形的，有人知道如何实现这个想要

浏览 1提问于2017-02-10得票数 18

1回答

tensorflow打印的损失是批量/样本损失还是运行平均损失？

tensorflow、machine-learning、keras、loss-function

当我训练tensorflow模型时，它通常会在每次迭代中输出类似于下面一行的信息 INFO:tensorflow:loss = 1.9433185, step = 11 (0.300 sec) 打印的损失是模型当前看到的批次的损失，还是所有先前训练批次的运行平均损失？如果我使用批次大小为1的批次，即每批只有一个训练样本，那么打印的损失将是每个样本单独的损失，或者它是运行平均损失吗？

浏览 57提问于2021-08-23得票数 1

2回答

希望使用tensorflow拆分从csv获得的训练数据和测试数据

python、tensorflow

我想使用tensorflow拆分csv的训练和测试数据，但我在张量中找不到像np.loadtxt这样的顺序，并尝试使用numpy进行拆分并将其转换为张量，但我得到了类似以下的错误：下面是我的代码： import numpy as np

浏览 0提问于2019-03-24得票数 0

4回答

Tensorflow将训练数据拆分成批次

python、machine-learning、tensorflow、deep-learning

(图像数量，长度，宽度，颜色范围)我想把它分成批次并馈送到tensorflow。做这件事的好方法是什么？

浏览 30提问于2017-03-06得票数 1

回答已采纳

1回答

使用fit_generator的训练模型不显示val_loss和val_acc，并且在第一个时期中断

python、tensorflow、machine-learning、keras、deep-learning

我实现了一个数据生成器，将我的训练数据分成256个小批次，以避免内存错误。它在训练数据上运行，但它不显示每个时期结束时的验证损失和验证准确性。我还对验证数据和定义的验证步骤应用了数据生成器。==========>.] - ETA: 4s - batch: 172.5000 - size: 257.0000 - loss: 0.8972 - accuracy: 0.8424WARNING:tensorflowWARNING:tensorflow:Early stopping conditioned on metric `val_loss

浏览 70提问于2020-09-12得票数 2

回答已采纳

1回答

tensorflow是否可以单独优化每个元素的损失，而不是优化整个平均损失？

tensorflow、optimization、loss

tensorflow如何单独优化批次的元素损失，而不是优化批次损失？在对每个批次的损失进行优化时，常用的方法是对所有批次的元素损失进行求和或取其平均值作为批次损失，然后对该批次损失进行优化。那么在tensorflow中实现上述目标是可能的吗？

浏览 17提问于2019-04-19得票数 0

1回答

如何从numpy数组创建混洗批处理列表以提供tensorflow字典

python-3.x、tensorflow

我正在与Tensorflow合作开发一个分类器。我的输入和输出是numpy数组，其中以示例为行，以参数为列。到目前为止，我的代码工作正常，我可以通过直接提供100%的输入和输出数组来训练我的网络。现在，我想创建一个为tensorflow提供的混洗批次列表，但这一步对我来说不是很清楚。然后，

浏览 0提问于2017-02-06得票数 2

1回答

如何在多个gpus之间共享包含可变长度序列批的队列？

tensorflow、tf-slim

链接表明，我们可以增加批次的大小，然后自己分批。然而，当输入数据是可变长度序列时，增大批处理大小可能会导致许多零填充值。例如，如果我们创建一个4序列批处理并将该批处理拆分，则它可能是 /gpu:0 x, x,

浏览 2提问于2017-01-24得票数 1

回答已采纳

1回答

python、tensorflow、keras、deep-learning、multilabel-classification

我正在从事多标签图像分类工作，我正在使用inception net作为我的基础架构。完成训练后，训练准确率> 90%，验证准确率> 85%，但我在测试数据上获得了17%的准确率。model = Model(pre_trained_model.input, x) optimizer=RMSprop(lr=0.0001),#'adam' metrics=['acc']

浏览 0提问于2019-02-15得票数 0

1回答

在TensorFlow中用批处理实现zigzag展平NxN张量

tensorflow、tensorflow2.0、tensorflow2.x

然而，我想知道是否有TensorFlow建议的通过使用类似tf.tensor_scatter_nd_update的东西来实现的TensorFlow版本。 BxNxN张量，其中B表示批次。

浏览 18提问于2021-04-15得票数 0

1回答

Keras中GPU上VGG-16的细化:内存消耗

python、tensorflow、machine-learning、keras、vgg-net

softmax')) model.load_weights(weights_path) 在我的例子中，Keras使用TensorflowTensorflow是用来使用GPU的(使用CUDA)。我现在有一张相当旧的卡: GTX 760和2Gb内存。在我的卡上，由于内存不足，我甚至无法加载整个模型(上面的代码)。

浏览 0提问于2018-06-17得票数 0

1回答