腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
如何
使用
TextLineDataset
将
文本
写入
文件
我正在尝试
使用
tensorflow
TextLineDataset
逐行读取
文件
Shakespear.txt中的
文本
。
将
单词拆分成一行,并将单词写到另一个
文件
txt.txt中,每行一个单词。tf.enable_eager_execution()#from tensorflow.keras.model import Sequential dataset_in_lines=tf.data.
TextLineDataset
浏览 29
提问于2019-10-10
得票数 0
回答已采纳
1
回答
Tensorflow中LSTM的单热编码(OHE)大型语料库
、
、
、
、
问题--这是常识,我不应该
将
完整的数据集加载到内存中。我正在寻找一个与ImageDataGenerator等价的
文本
,我可以在完整的数据集上安装一个热编码器,但是可以逐批转换数据。当我
将
OHE转换应用到训练数
浏览 4
提问于2019-11-20
得票数 0
1
回答
来自Tensorflow
TextLineDataset
的Ngrams
、
、
、
我有一个
文本
文件
,每一行包含一个句子。sentences = tf.data.
TextLineDataset
("data/train.src")sess.
浏览 0
提问于2019-07-30
得票数 2
回答已采纳
1
回答
Tensorflow tf.data.Dataset
将
字符串张量转换为浮点型张量
、
因此,我有多个.txt
文件
,它们在每一行中存储有关x、y、width和height的信息,例如:947 1176 14 12487 506 55 694 589 114 1064 4 350 292filenames_bb = input_tools.get_required_filenames(args.dataset_dir,
浏览 4
提问于2018-08-20
得票数 2
1
回答
tf.datasets与迭代器在Tensorflow中的应用
、
、
我试图
使用
tf.data.
TextLineDataset
从csv
文件
中读取数据集,
将
数据集分解到多个工作节点上,然后创建一个迭代器对它们进行迭代,以批量地提供数据。我
使用
了tf.datasets的TensorFlow ()程序员指南。加载数据集时,我
使用
tf.data.
TextLineDataset
(file).skip(1),但根据错误,它似乎不跳过数据集的第一行(列头)。 ds = ds_file.flat_m
浏览 0
提问于2018-05-14
得票数 0
回答已采纳
1
回答
Tensorflow连接tf.data.Dataset.list_files
、
、
、
我在一个数据集上运行我当前的代码,该数据集具有以下命名信息: 培训
文件
:培训-??-??在哪里??是通配符(任何范围的占位符)。同样的意思也适用于验证和测试
文件
(例如验证-?)。在我的代码中,我创建了这样的
文件
模式: training_file_pattern = os.path.join(config['data_dir'], "training-??-of-??")但我在弄清楚
如何
获取这两个数据集时遇到了问题。我还尝试以不同的方式定义file_pattern,以包含验证,但我不知
浏览 201
提问于2019-06-15
得票数 1
1
回答
无法
使用
tf.decode_csv()正确读取一个数组csv
文件
我有数百个csv
文件
,每个
文件
都包含一个数组,这是我的网络的输入数组。我尝试
使用
tf.data.
TextLineDataset
生成csv
文件
名的数据集,并
使用
dataset.map()读取它们。然而,我对
如何
使用
tf.decode_csv()感到非常困惑 假设csv内容是 1 2 3 4 5 ... 100 然后
使用
: dataset = tf.data.
TextLineDataset
(['a.csvtf.
浏览 17
提问于2019-10-19
得票数 0
1
回答
错误:'utf-8‘编解码器无法解码0位置的字节0xb0 : google中无效的开始字节
、
、
sentences.append(s[:index])PS:按照这里的代码,区别在于我读取
文件
的方式。如果有更好的方法去做,请告诉我!
浏览 0
提问于2021-08-30
得票数 3
回答已采纳
1
回答
TFRecordDataset和FixedLengthRecordDataset有什么区别?
、
、
最好是从一个项目中获得一个用例,并解释每个用例的
使用
情况。提前谢谢。
浏览 4
提问于2021-01-30
得票数 1
回答已采纳
1
回答
Dataset API中的Tensorflow字符串处理
、
我把.txt
文件
放在<text>\t<label>格式的目录中。我正在
使用
TextLineDataset
API来
使用
这些
文本
记录: data
浏览 2
提问于2017-10-30
得票数 4
回答已采纳
1
回答
多处理,从多个
文件
中读取生成器作为keras的输入。
、
、
、
原则上,在workers=N和use_multiprocessing=True中
使用
fit_generator似乎很简单,但在我的情况下,避免从并行生成器获得类似的数据是很棘手的。我的数据在几个
文件
中,每个
文件
都有几百万条记录(直到
文件
结束时才知道总数)。对于每个
文件
,生成器逐条记录,通过一些数据增强将记录处理为网络的正确输入/输出格式。我想知道是否最容易让多个生成器并行处理一个单独的
文件
列表。我实际上并不
使用
批处理中的所有数据,所以如果一个生成器在其
浏览 0
提问于2018-07-31
得票数 0
1
回答
如何
在tf.keras.preprocessing.text.Tokenizer上应用tf.data.
TextLineDataset
?
、
、
、
我正在加载一个
TextLineDataset
,我想应用一个经过训练的
文件
标记器:@tf.function return tokenizer.texts_to_sequences(x) train_data.map(lambda那么
如何
在data上进行令牌化呢?
浏览 5
提问于2022-03-30
得票数 1
回答已采纳
1
回答
如何
在keras中
使用
os.walk读取
文本
文件
并转换为批处理数据集
、
、
我需要在keras和tensorflow中分析
文本
文件
,我
使用
os.walk读取
文件
路径并将它们添加到列表中,然后尝试读取
文本
内容并
使用
keras和tensorflow批量处理它们,如下所示 classeslabels.append(labs[file_class]) dataset = tf.data.
TextLineDataset
(read_files
浏览 11
提问于2020-11-03
得票数 0
回答已采纳
1
回答
如果tensorflow中
文本
行为空,则跳过该
文本
行
、
、
我想处理一个包含句子的
文本
文件
。每句话都存储为该
文本
文件
的每一行。我想
使用
迭代器检索每一行,如下所示: def __init__(self, file_name): dataset = tf.data.
TextLineDataset
浏览 13
提问于2019-07-29
得票数 0
回答已采纳
2
回答
这两种用java编写
文件
的方法有什么不同?
、
、
、
下面有两个实现,其中PrintStream对象包装FileOutputStream对象或File对象。我把这两样都做好了。在哪种方法不适用于写作的情况下,它们之间有什么区别吗? public static void main(String[] args) throws FileNotFoundException{ PrintStrea
浏览 4
提问于2013-09-05
得票数 0
回答已采纳
1
回答
你能增加程序输出的
文本
限制吗?
、
、
我添加了getch(),以便根据需要复制和粘贴,但只是想知道是否有增加输出
文本
限制的方法。谢谢。
浏览 0
提问于2014-03-10
得票数 0
回答已采纳
1
回答
为TensorFlow训练存储大量
文本
数据?
、
我想知道在序列到序列的问题中存储这些数据的推荐方法是什么,以使其在tf.data.Dataset中易于
使用
和高效?基本上,我可以有一个名为data.txt的
文件
和另一个名为labels.txt的
文件
,这两行中的每一行都是一个训练示例。基本上我可以
使用
tf.data.
TextLineDataset
,但我需要以某种方式
将
文本
转换为整数序列,即索引到我的词汇表中。我的问题是,是否有一种有效的方法来
使用
数据集转换来完成这种转换,或者我应该只
使用</em
浏览 0
提问于2018-03-17
得票数 1
1
回答
Tensorflow
文本
输入
、
、
、
、
我正在挣扎
如何
读取原始
文本
输入
文件
。 tf.data.
TextLineDataset
(与2有什么不同?)TF需要一个固定长度的填充格式,我该
如何
做?-我:决定一个固定长度值(例如30),
将
每一行读到一个列表中,如果长度大于30
浏览 3
提问于2018-02-26
得票数 2
回答已采纳
1
回答
如何
使用
SQL编程
将
规范化数据转换为二进制并保存到另一个表中?
、
、
、
我想知道是否有可能在不进入asp.net应用程序的情况下,
使用
SQL语言
将
高度规范化的数据转换为二进制数据,并将其存储在其他表中?这可能会帮助我们解决性能问题。这是一个
使用
MSSQL2008构建在asp.net MVC3平台上的电子商务应用程序。 提前谢谢你。
浏览 0
提问于2012-04-25
得票数 1
回答已采纳
2
回答
如何
将
MemoryStream
写入
文本
文件
的末尾
、
、
我
使用
这段代码
将
内存流数据
写入
文本
文件
。' now Write the MemoryStream to the file但是,当我
将
数据
写入
文本
文件
时
如何
将
内存流
写入
文本
文件
的末尾?(只向
文件
末尾添加内存流数据)
浏览 2
提问于2014-04-24
得票数 1
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Bash 脚本中如何使用 here 文档将数据写入文件
技能:如何使用Python将文本转为图片
如何将整个文件内容加载到富文本控件?
如何将文本文件在 Unix和DOS格式之间转换
如何将文本文件或Excel中的数据导入数据库?
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券