腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
群集配置和
hdfs
hadoop/tutorial/module2.html <property> </property> <name>dfs.data.dir</name> <value>
浏览 3
提问于2014-11-20
得票数 0
1
回答
在hadoop生态系统中将文件复制到
HDFS
时出错
、
、
在Hadoop3.0的终端上发出命令将文件从本地
文件系统
复制到
HDFS
时,会出现错误`
hdfs
://localhost:9000/user/Amit/hadoop-3.0.0/hadoop2_data/
hdfs
/datanode.但是,我已经检查了目
浏览 0
提问于2018-02-18
得票数 1
回答已采纳
2
回答
如何在Cloudera Hadoop上找到我使用mkdir创建的目录?
、
的任务是在我的本地pc上创建一个简单的文本文件,并将其移动到
HDFS
,显示文件的内容-所有这些都使用
HDFS
命令。我已经使用如下命令创建了一个目录:
文件夹
已创建,但我无法找到它的确切创建位置。我使用了两者,搜索工具,并手动搜索所有存在的
文件夹
。但是这个目录确实存在,因为当我再次使用相同的命令时,它显示“文件存在”。谁来帮我找条路。
浏览 1
提问于2015-03-08
得票数 1
7
回答
hadoop将本地
文件系统
文件夹
拷贝到
HDFS
、
我需要将一个
文件夹
从本地
文件系统
复制到
HDFS
。我找不到任何将
文件夹
(包括其所有子
文件夹
)移动到
HDFS
的示例 $ hadoop fs -copyFromLocal /home/ubuntu/Source-Folder-To-Copy
HDFS
-URI
浏览 0
提问于2015-01-29
得票数 76
1
回答
如何在Ubuntu14.04上安装的Hadoop2.6.0中运行单词计数程序?
sudo javac -classpath /usr/local/hadoop/share/hadoop/common/hadoop-common-2.6.0.jar:/usr/local/hadoop/share/hadoop/common/lib/hadoop-annotations-2.6.0.jar:/usr/local/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-client-core-2.6.0.jar WordCount.java 我不理解我需要写的代替javac -classpath的命令。
浏览 0
提问于2015-06-11
得票数 -1
1
回答
获取
HDFS
中最新更新的
文件夹
、
、
、
、
我想从我的
HDFS
目录中获得最新更新的
文件夹
,我能够在
hdfs
文件系统
中获得最新的文件,但不知道如何实现
HDFS
。我尝试了shell脚本。
浏览 1
提问于2017-08-08
得票数 1
回答已采纳
2
回答
hadoop dfs -ls报错
、
有人能告诉我这里出了什么问题吗?hadoop dfs命令似乎正常,但无法识别以下任何选项。
浏览 1
提问于2012-02-06
得票数 5
回答已采纳
2
回答
hadoop -ls给出了本地
文件系统
中不存在的
文件夹
列表。
、
在终端中运行
hdfs
dfs -ls命令时,我将看到一个
文件夹
列表。通过“文件资源管理器”窗口搜索本地
文件系统
时,我无法在
文件系统
中找到这些文件。rishirich@localhost:/$
hdfs
dfs -lsdrwxr-xr-x - rishirich supergroup 0 2017-11-09 03:32 user 在本地
文件系统
上看不到这个名为“user”的
文件夹
。是因为
文件夹</em
浏览 1
提问于2017-11-10
得票数 1
回答已采纳
1
回答
(为什么S3a和
HDFS
有区别?)
、
、
我正在使用当前版本的Hadoop,并运行一些TestDFSIO基准测试(V1.8)来比较默认
文件系统
为
HDFS
和默认
文件系统
为S3桶(通过S3a使用)的情况。当以默认
文件系统
读取10 0 x1MB文件为S3a时,我观察到slower中的
最大
容器数量少于默认情况下的
HDFS
,而S3a大约是的4倍。当以默认
文件系统
读取 10 0 0 x10 KB文件为S3a时,我观察到slower中的
最大
容器数量至少比
HDFS
默认情况下的少10倍,而S3
浏览 1
提问于2016-03-01
得票数 7
回答已采纳
1
回答
Hadoop InvalidInput异常
、
、
、
staging/job_1424175893740_0008 org.apache.hadoop.mapreduce.lib.input.InvalidInputException:输入路径不存在:
hdfs
浏览 2
提问于2015-02-17
得票数 0
5
回答
如何在Hadoop
HDFS
中访问文件?
、
、
、
我的Hadoop
HDFS
中有一个.jar文件(包含一个我想要修改的Java项目),我想在Eclipse中打开它。当我输入
hdfs
dfs -ls /user/...时,我可以看到.jar文件就在那里-但是,当我打开Eclipse并尝试导入它时,似乎到处都找不到它。我确实在我的
文件系统
中看到一个hadoop/
hdfs
文件夹
,它将我带到两个
文件夹
;namenode和namesecondary这两个
文件夹
都没有我要查找的文件。 有什么想法吗?
浏览 0
提问于2016-03-30
得票数 6
1
回答
HDFS
或HBase中是否存在
最大
存储空间配置?
、
、
、
HDFS
或HBase中是否存在
最大
存储空间配置?我发现 对于HBase,我发现了一些堆大小配置和压缩间隔,Memstore刷新大小,但这些配置似乎都不能调节单个节点的
最大
大小。对HBase或
HDFS
是否有任何配置来调节它们在单个节点中将占用多少空间? (我正在一台机器上运行测试)
浏览 1
提问于2021-08-24
得票数 1
回答已采纳
2
回答
用CDH4.3配置Hue
、
我面临
HDFS
的配置错误。它说“当前值:
文件系统
根'/‘应该属于'
hdfs
'",但在我的示例中,所有者根
文件夹
是用户,所以我如何告诉hue根
文件夹
的所有者是用户。
浏览 6
提问于2013-08-17
得票数 0
1
回答
备份hadoop中的源数据文件
、
您是否建议在
HDFS
中的
文件夹
备份下或本地
文件系统
下的非
HDFS
文件夹
下保留原始格式的源文件备份。 这些文件来自FTP。
浏览 2
提问于2014-01-22
得票数 0
1
回答
为什么使用
hdfs
://作为文件路径的前缀会允许打开文件?
、
、
我正在使用的库使用
文件系统
在爬行时存储爬行数据。我确信必须修改该库才能使用
HDFS
,因为需要使用一组完全不同的类来与
HDFS
交互,而我使用的爬行器库使用java.io。但是,当一位同事使用
hdfs
://localhost/ path / to /storage作为存储
文件夹
的路径时,crawler会工作,并且能够写入
文件系统
。我正在尝试理解这种方法的工作原理,基于hadoop的jvm是否有什么不同,导致它们将
hdfs
:&
浏览 6
提问于2012-04-05
得票数 1
回答已采纳
2
回答
将CSV文件导入Hadoop
、
我是Hadoop的新手,我有一个文件可以通过命令行导入到hadoop (我通过SSH访问机器)
浏览 3
提问于2015-12-14
得票数 11
1
回答
hadoop“无法从空字符串创建路径”
、
我是hadoop的初学者。我的错误如下所示。 at org.apache.hadoop.fs.Path.checkPathArg(Path.java:172) at org.apache.hadoop.util
浏览 6
提问于2021-12-13
得票数 0
1
回答
在HBase中截断表不会为
HDFS
释放空间。
、
、
、
我在使用HBase和
HDFS
时遇到了问题,因为我知道HBase运行在
HDFS
之上,因此我认为它使用
HDFS
来存储数据。问题是
HDFS
接近其
最大
空间利用率,并且它和HBase不断崩溃。以下是
HDFS
选项卡中的监控工具Ambari的图片: ? 在相当长的一段时间内,我甚至不能运行正常的HBase外壳命令,比如list和scan,所以我甚至不能尝试从表中删除一些数据。但是,当我设法重新启动在单个节点上运行的HBase时,我截断了使用该
最大
空间量的表,并且当我通过du (磁
浏览 59
提问于2021-08-23
得票数 0
回答已采纳
3
回答
如何查找
hdfs
目录中的
最大
文件大小
、
我想找出
HDFS
目录中文件的
最大
大小。有谁知道怎么找到它吗?我在Hadoop 2.6.0中。
浏览 3
提问于2015-12-31
得票数 0
2
回答
如何使用Sqoop从RDBMS将数据导入本地
文件系统
,而不是
HDFS
?
、
、
、
、
我见过Sqoop允许将数据从RDBMS数据库导入
HDFS
。但是,我希望将数据导入到本地
文件系统
文件夹
中,而不是导入到
文件系统
中。 有办法这样做吗?
浏览 3
提问于2014-11-19
得票数 4
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
案例:HDFS分布式文件系统
Hadoop分布式文件系统(HDFS)基础概念讲解
架构入门必看,分布式文件系统HDFS解读
数据架构入门必看,分布式文件系统HDFS解读
大数据技术原理与应用——分布式文件系统HDFS
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券