我使用以下代码从特定文件夹中读取数据集，并将其划分为训练和测试子集。我可以使用列表理解来获得每个子集的所有数据和目标，但对于大数据来说，它非常慢。有没有其他快速的方法来做到这一点？in train_set]
train_labels = [label for _, label in train_set] 我已经使用DataLoader尝试过这种方法，它更好，但也需要一些时间：PyTorch<
浏览 19提问于2021-08-23得票数 1
在回顾了LeNet5体系结构描述之后，当Max池层(包含6个过滤器)与Conv2D层(16个过滤器)连接时，需要以以下方式进行特殊的过滤器映射：
浏览 2提问于2021-08-05得票数 2
回答已采纳
在PyTorch中，如果只想获取数据集中的某些数据集，则使用子集。例如:我只想要前1000张唱片。既然PyTorch已经从Dataset迁移到Datapipe，那么只使用部分数据的正确方法是什么呢？
浏览 2提问于2022-07-08得票数 1
1回答
前馈网络的接受域
、、
我对人工智能和神经网络非常陌生。我已经在PyTorch中实现了一个前馈神经网络，用于对MNIST数据集进行分类。现在，我想要可视化隐藏神经元(子集)的感受野。但我在理解接受域的概念时遇到了一些问题，当我在谷歌上搜索时，所有的结果都是关于CNNs的。那么，有没有人可以帮助我在PyTorch中如何做到这一点，以及如何解释结果？
浏览 3提问于2019-12-02得票数 0
2回答
获取pytorch数据集的子集
、、、、
我有一个网络，我想在一些数据集上进行训练(例如，CIFAR10)。可以通过以下方式创建数据加载器对象
trainset = torchvision.datasets.CIFAR10(root='.:假设我想进行几次不同的训练迭代。假设我想首先在奇数位置的所有图像上训练网络，然后在偶数位置的所有图像上训练网络，依此类推。为了做到这一点，我需要能够访问这些图像。不幸的是，trainset似乎不允许这样的访问。也就是说，尝试执行t
浏览 0提问于2017-11-22得票数 22
回答已采纳
1回答
如果我输入整个数据而没有指定批量大小，pytorch SGD会做什么？我在案例中看不到任何“随机性”或“随机性”。例如，在下面的简单代码中，我将整个数据(x,y)输入到一个模型中。criterion(y_pred, y_data) loss.backward()假设有100个数据对(x,y)，即x_data和y_data各有100个元素。问:在我看来，所有100个梯度都是在一次参数更新
浏览 23提问于2020-02-05得票数 6
2回答
我可以使用PyTorch张量代替NumPy数组，同时使用scikit学习吗？我尝试了一些像train_test_split和StandardScalar这样的学习方法，但是当我使用PyTorch张量而不是NumPy数组时，有什么我应该知道的吗？根据上的这个问题：
这是否意味着使用PyTorch张量是完全安全的？
浏览 2提问于2021-11-18得票数 3
回答已采纳
3回答
如何在PyTorch中对不同的Subset使用不同的数据增强(转换)？例如：train和test将具有与dataset相同的转换。如何对这些子集使用自定义转换？
浏览 3提问于2018-08-10得票数 5
我有一个不同数据类型的列表(因子、行和向量，所有相同的长度或行数)，我想做的是用一个表示行名的向量(让我们称之为data.frames )来子集列表中的每个元素。rows]x <- lapply(my_list, function(x) ifelse(is.data.frame(x), x[rows,], x[rows]))
那么，如何实现获取子集
浏览 0提问于2011-08-12得票数 1
回答已采纳
2回答
实现集覆盖数据结构
、、、
我希望实现一个表示抽象数据类型的数据结构。集合的元素由整数索引表示，子集也是如此。每个元素uint64_t e被分配给至少一个(但可能是多个)子集uint64_t s。这可以通过在std::vector中存储子集索引来实现。分配给任何元素的子集的数量通常比元素的总数小得多。
将元素分配给<e
浏览 4提问于2013-10-03得票数 2
2回答
我已经使用了很多除草器，并习惯了他们的数据存储和转换，特别是在数据增强方面，因为它们非常用户友好，易于理解。
但是，我需要从sklearn运行一些ML模型。有没有一种方法可以使用比目鱼的数据器来学习滑雪？
浏览 0提问于2019-12-09得票数 1
我正在尝试将Torchvision MNIST训练和测试数据集转换为NumPy数组，但找不到实际执行转换的文档。 我的目标是获取整个数据集并将其转换为单个NumPy数组，最好不要遍历整个数据集。我看过How do I turn a Pytorch Dataloader into a numpy array to display image data with matplotlib?，但它没有解决我的问题。 因此，我<
浏览 64提问于2019-02-27得票数 4
回答已采纳
我有大约200,000张高分辨率图像，每次加载如此高质量的图像都很耗时。预加载所有图像可能会占用太多内存。将每个图像保存为.npz文件格式并加载.npz而不是.jpg如何？它会提高速度吗？
浏览 0提问于2017-12-05得票数 6
1回答
在开始一个新的机器学习方面的项目之前，估计运行1，10,100，1k周期所需的时间是非常有用的。模型类型(例如PyTorch Unet)计算(例如AWS p2.xlarge)经验方法(例如对数据和尺度的较小子集进行训练)是否是解决这一问题<
浏览 0提问于2020-04-20得票数 1
我在选择正确的数据结构作为/library时遇到了麻烦。我在图像处理/模式识别方面缺乏经验。其目的是构建一个简单的原型，以学习从施工计划中识别特定的形状。关于数据结构的任何指示我都会非常满意，因为我知道在项目后期很难切换它，因此我不能完全确定该选择哪一个。 问题是，我计划稍后使用一种神经网络/算法，因此数据结构的处理性能可能恰好是我的瓶颈。我在想NumPy / SciPy / PIL
浏览 23提问于2019-02-19得票数 1
回答已采纳
我正在使用EntityFramework和IRepository模式，我需要向所有EntityCollections添加一些事件。
有没有办法在ObjectContext上获取集合列表？我还需要一种方法来获取ObjectSet/EntityCollection上的所有集合。这有可能吗？这里我的最终目标是迭代所有集合和子集合，并向所有子集合添加一个Asso
浏览 0提问于2011-12-20得票数 1
回答已采纳
1回答
我试图循环遍历用户集合中的所有用户(文档)，然后访问每个用户的集合，在其中我将检查字段是否设置为true。我能够通过我的用户循环如下： .firestore() .get()
但我无法深入访问每个用户文档中的集合。我在网上看到的所有访
浏览 1提问于2020-12-20得票数 2
回答已采纳
所以，我使用的是：torch.nn.CrossEntropyLoss(predictions, targets)，我想知道为什么目标必须是64位整数而不是32位呢？
浏览 1提问于2021-09-23得票数 2
回答已采纳
2回答
我试图在dataset的子集中找到特定数量的特性。indices = torch.arange(3000)这输出了一个3000数据点，这正是我想要的。但是，当我尝试下一行代码时，每个特性有多少种类型(在本例中，有多少个数据点是1，2，3……)，它给出了错误： A
浏览 4提问于2022-08-02得票数 0
回答已采纳
import numpy as np在某些情况下，所研究的数据集(或数组)沿轴0有不同的长度，换句话说。一个子集可以是形状(8，9，10)，另一个子集可以是形状(7,9,10)。所有这些子集沿第二和第三轴的大小是相同的。如果我仍然想用相同的数据结构来表示整个数据集，如何实现这个目标
浏览 3提问于2022-04-30得票数 -2
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
