我在本地hdfs环境中有一个目录，我想将它复制到我的本地计算机。我使用ssh (带有密码)访问hdfs。
我尝试过许多建议的复制命令，但都没有工作。
浏览 2提问于2018-05-09得票数 1
回答已采纳
1回答
我们想要执行以下简单的命令 使用ssh登录到$hadoop_machine机器 并以hdfs fsck /身份从用户hdfs运行hdfs cli。因此，我们运行以下命令 ssh $hadoop_machine su hdfs -c 'hdfs fsck /' 但是我们得到了 Usage: hdfs [--config confdir] [--loglevelportmap s
浏览 86提问于2020-09-14得票数 0
回答已采纳
1回答
我想直接将文件从本地Linux机器复制到远程HDFS集群，也就是说，我不希望将文件复制到远程计算机，然后使用copyfromlocal命令将其移动到HDFS。为此，我执行了以下命令，我在一个在线博客中找到了这个命令。cat sample.txt | ssh -tt root@MY_HDFS_CLUSTER "sudo -u hdfs hdfs dfs -
浏览 2提问于2014-04-09得票数 0
从Windows复制到远程HDFS的正确语法是什么？我试图使用RStudio将文件从本地计算机复制到远程hadoop集群这个扔了rxHadoopCopyFromLocal("C:\\path\\to\\file.csv", "/
浏览 6提问于2017-05-23得票数 0
回答已采纳
我正在浏览HADOOP命令列表。在hadoop中没有找到任何"cd“命令，这让我有点困惑。
为什么会这样呢？对于HADOOP用户来说，这可能听起来很傻，但由于我是初学者，我无法理解为什么HADOOP级别上没有cd命令列表？
浏览 5提问于2014-11-21得票数 7
回答已采纳
我使用以下命令从远程计算机( windows )运行hadoop map red作业当我在
浏览 2提问于2013-10-25得票数 1
我需要使用hadoop在多节点集群上挂载HDFS。我怎样才能做到这一点？
我已经成功地在单节点集群上部署了fuse，但我怀疑它能否在多节点上工作。有人能把这件事弄清楚吗？
浏览 3提问于2014-03-18得票数 0
回答已采纳
1回答
我正在尝试将gzipped文件从远程计算机上的目录加载到本地计算机的HDFS上。我希望能够从远程机器读取pipe文件，并将它们直接输送到本地计算机上的HDFS中。这是我在本地机器上发现的：
ssh remote-host "cd /files/wanted; tar -cf - *.gz" | tar -xf - | hadoop fs -put - "/f
浏览 1提问于2014-12-19得票数 2
回答已采纳
我在hdfs://.我可以访问...:50070，我想使用java代码来删除hdfs上的CRUD文件。我该怎么办？我的java代码是 conf.set("fs.defaultFS", "hdfs://*.*.*.*:
浏览 3提问于2016-05-04得票数 0
2回答
我试图通过Beeline客户端添加本地文件，但是我总是遇到一个问题，它告诉我该文件不存在。[test@test-001 tmp]$ stat /tmp/m.py Size: 0 Blocks: 0 IO Block: 4096 regular empty fileAccess: (0664/-rw-rw-r--) Uid: ( 103
浏览 27提问于2017-02-28得票数 1
我需要将文件从远程Linux服务器直接传输到HDFS。我在远程服务器上放置了keytab，在kinit命令激活后，我无法浏览HDFS文件夹。我知道从边缘节点我可以直接将文件复制到HDFS，但是我需要跳过边缘节点，直接将文件传输到HDFS。
我们怎样才能做到这一点。
浏览 1提问于2018-09-26得票数 0
我正在使用spark-submit集群模式从本地向spark集群提交作业。我需要在本地机器和spark集群之间来回传输输入文件、输出文件和作业日志文件。
浏览 2提问于2015-07-27得票数 0
1回答
我已经将用python编写的ML作业代码包含到一个码头容器中，并能够使用Amazon作为码头服务运行。我想使用星星之火以分布式方式运行，并在亚马逊EMR.Can上部署，建立ECS和EMR之间的连接？
浏览 3提问于2017-05-25得票数 9
回答已采纳
我尝试安装2.2.0伪模式，而我试图运行copyfromlocal来复制示例数据
我现在在目标路径中使用了/input，比如-bin/hadoop fs -copyFromLocal /home/prassanna03/12 09:31:57警告util.NativeCodeLoader:无法为您的平台加载本机hadoop库.如果适用的话，使用内置java类可以找到1项(-rw-r-r-1根超级组64 )，我也在datanode请告诉我输入文件是否正确地复制到hdfs ?**，并告诉我文件物
浏览 1提问于2014-03-11得票数 1
回答已采纳
2回答
我在hbase( hdfs)表中有一些数据，并将其复制到本地文件系统中。然后，在我的第二台计算机上，我使用copyFromLocal hadoop命令将数据从本地复制到hdfs。现在，当我在hbase中运行命令"list“时(在第二台计算机上)。这表明没有桌子。我在hdfs中的一个目录(即hbase的数据目录)中复制了
浏览 1提问于2014-12-29得票数 1
回答已采纳
主节点-此节点是否将hdfs数据存储在aws emr集群中？任务节点-如果此节点不存储hdfs数据，它是否纯粹是计算节点？在这种情况下，hadoop会传输到任务节点吗？这难道不妨碍数据定位计算的优势吗？
浏览 8提问于2022-03-28得票数 0
回答已采纳
我想通过python模块" hdfs“远程上传文件到我的hdfs。我的hadoop在我的linux上运行，但我想远程上传文件在我的windows(或其他计算机)。当我使用如下代码时：client = InsecureClient('http://xx.xx.xx.xx:50070', user=
浏览 1提问于2017-03-22得票数 2
使用WEBHDFS REST API调用，我是否可以将文件从Windows计算机(即windows服务器或windows本地文件夹或桌面)传输或复制到Hadoop-HDFS文件系统？如果是，是否有任何示例命令信息？示例:如果我的文件在E:\user\accounts.txt中，并且我想使用webhdfs将该文件移动到HDFS /user/kumar/文件夹。目前我正在做的是步骤-1)从Windows到linux目录的ftp帐户文件。
步骤2)运行</
浏览 4提问于2016-08-12得票数 2
大家好，我正在尝试运行cloudera提供的WordCount.java示例。我运行了下面的命令，并得到了我放在命令下面的异常。那么你对如何继续下去有什么建议吗？root (auth:SIMPLE)not exist: hdfsException in thread "main"
org.apache.hadoop.mapred.InvalidI
浏览 1提问于2012-08-12得票数 2
回答已采纳
云服务器
ICP备案
对象存储
云点播
实时音视频
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号