在HDInsight中使用curl执行Sqoop不起作用
可能是由于以下原因导致的：
- HDInsight集群中未安装curl：curl是一个用于发送HTTP请求的命令行工具，如果在HDInsight集群中未安装curl，那么使用curl执行Sqoop命令将无法起作用。您可以通过在HDInsight集群中安装curl来解决此问题。
- Sqoop配置错误：Sqoop是一个用于在Hadoop和关系型数据库之间进行数据传输的工具。如果Sqoop的配置文件中存在错误，例如数据库连接信息配置错误或者权限配置错误，那么使用curl执行Sqoop命令可能会失败。您可以检查Sqoop的配置文件，确保其中的配置信息正确无误。
- 网络连接问题：使用curl执行Sqoop命令需要与目标数据库建立网络连接。如果网络连接存在问题，例如网络不稳定或者防火墙阻止了网络连接，那么使用curl执行Sqoop命令可能会失败。您可以检查网络连接是否正常，并确保网络连接畅通。
- Sqoop命令错误：使用curl执行Sqoop命令时，可能会出现命令错误导致执行不起作用的情况。您可以检查Sqoop命令是否正确，并确保命令参数正确设置。
针对HDInsight中使用curl执行Sqoop不起作用的问题，您可以尝试以下解决方案：
- 确保在HDInsight集群中安装了curl，并且curl命令可用。
- 检查Sqoop的配置文件，确保其中的配置信息正确无误。
- 检查网络连接是否正常，并确保网络连接畅通。
- 检查Sqoop命令是否正确，并确保命令参数正确设置。
如果您需要更详细的帮助或了解腾讯云相关产品和产品介绍，您可以访问腾讯云官方网站：https://cloud.tencent.com/，或者咨询腾讯云的客服人员。
相关·内容
日安！
是否有任何文档说明如何将Azure SQL配置为HDInsight的外部Sqoop元存储？
通常，HDInsight集群是作为计算资源动态产生的，然后在工作完成后关闭。
这就是为什么Sqoop作业定义需要在集群重启或附加新集群的情况下存活下来。
理想情况下，外部sqoop元存储应该在其创建过程中动态附加到新群集。
致以敬意，
-Yuriy
浏览 14提问于2017-08-02得票数 0
5回答
我有下面的docker命令来运行容器
docker run -d --name test -v /etc/hadoop/conf:/etc/hadoop/conf -v /usr/lib/python2.7/dist-packages/hdinsight_common:/usr/lib/python2.7/dist-packages/hdinsight_common -v /etc/hive/conf/:/etc/hive/conf/ -v /etc/tez/conf/:/etc/tez/conf/ -v /usr/hdp/2.4.2.0-258/sqoop/lib/:/usr/hdp/2.4
浏览 5提问于2016-06-28得票数 74
回答已采纳
我们正在尝试配置和安装Cloudera分发版的Azure数据湖。根据官方文件，我能够做从CHD到ADLS的distcp、put等操作，反之亦然。
最近，我试图看看我们是否可以使用sqoop-import在数据湖和sql之间移动数据，而不需要旋转hdinsight集群来降低所涉及的成本。
hadoop --config /home/userTest/adl_conf sqoop-import --connect "jdbc:sqlserver://xxxxx.yyyy.org:1433;username=xxxx;password=*****;database=xxxx" --t
浏览 1提问于2018-03-29得票数 0
回答已采纳
我试图在hdinsight(远程机器)中使用oozie来调度sqoop作业。我在cmd中执行了sqoop作业命令，并试图在oozie中调度“oozie job1”。但这不管用。我在蔚蓝的日志和oozie日志中看到了日志，没有错误。我看到了纱线应用程序的成功，oozie显示了失败/ and 1错误。
如果我在cmd中运行相同的命令，它会运行得很好。
This is my sqoop job command :
sqoop job --create job1 -- import --connect "jdbc:sqlserver://<ip:port>;database=&
浏览 4提问于2014-06-26得票数 0
回答已采纳
我是Azure数据工厂的新手，目前我正在使用azure数据工厂将数据从带有HDInsight集群的WASB(windows存储blob)转移到Azure SQL数据库。
在使用Azure数据工厂之前，我使用SQOOP将数据从带有WASB的HDInsight集群转移到Azure SQL数据库，但我的要求是使用azure数据工厂而不是SQOOP。
为此，我从Azure数据工厂打开了copy向导，并选择源代码作为“HDFS”，如下图所示。
但是我不清楚哪些凭据是在HDFS源代码连接窗口下输入的，甚至我阅读了下面关于HDFS的链接服务属性的文档。
请解释在HDFS连接下输入了哪些凭据，并
浏览 1提问于2017-05-10得票数 2
我一直试图从我的SQL中导入数据，该数据库可以公开访问HDInsight。两者都是同一订阅的一部分。
我在sqoop命令提示符下启动以下查询:sqoop导入--连接"jdbc:sqlserver://*.database.windows.net;username=*@fyvgwz1l7z;password=**;database=dbAMBER“--表虚拟--目标-dir /data -m 1
它不会在提示符上给出任何消息并返回提示。当我浏览位置时，我什么也找不到。我还试图操作sql服务器地址，并放置一些虚拟文本和抛出异常的isntead，它仍然没有给我任何消息，并返回一个空白。
有人
浏览 5提问于2013-06-14得票数 0
回答已采纳
我试图使用SQOOP从SAP数据库导入Azure DataLake商店的数据。为此，我下载了HDB客户机连接到HANA数据库，但我正在寻找将'ngdbc.jar‘复制到$SQOOP_HOME/lib的位置。在HDInsight集群上，无法看到环境变量$SQOOP_HOME/lib，它似乎是空白的。有人能帮我指出HDP - HDInsight集群的正确位置吗？
目前，我遇到了以下错误。
sshadmin@hn0-busea2:~$ sqoop import --connect 'jdbc:sap://XXXXXXX0004.ms.XXXXXXX.com:30015/?datab
浏览 5提问于2017-01-18得票数 0
回答已采纳
正在尝试将数据从postgres导入到Microsoft Azure HDInsigt上的hdfs。现在，我从一个非常简单的命令开始，如果列出数据库
sqoop list-databases --connect jdbc.postgresql://xx.xxx.xxx.xxx:yyyy --username myuser --password mypassword
我得到以下错误
ERROR tool.BaseSqoopTool: Got error creating database manager: java.io.IOException: No manager for connect s
浏览 0提问于2016-12-01得票数 0
2回答
是否可以使用Sqoop将数据从SQL数据库导入到不同的blob存储中，而不是默认的HDInsight集群blob存储？
即使我将azure存储访问权限设置为"Public Blob"，我也会收到一条错误消息"Container testcontainer in account nondefaultstorage.blob.core.windows.net not found，并且我们无法使用非同名凭证创建它。“
这是我正在运行的sqoop命令：
import
--connect jdbc:sqlserver://sqlServerName;user=sqlLogin;
浏览 2提问于2015-07-17得票数 0
1回答
我正尝试在HDInsight 3.6集群的Ambari 2.5.2.1中添加服务(在那里使用的是HDP2.6)，但在“操作”下拉菜单中没有“添加服务”按钮，并且管理/堆栈和版本菜单中的按钮根本不起作用。已安装的服务也没有“删除”按钮。
我应该提一下，我是以管理员用户的身份登录的。这个问题只在Ambari 2.5.2.1中出现，当我使用早期版本的HDInsight和Ambari时，一切都很好，但不幸的是我应该使用HDInsight 3.6
感谢您的帮助
浏览 4提问于2017-10-27得票数 0
1回答
我试图用Hadoop (HDInsight)使用Azure数据库中的数据。
为了获取数据并执行作业，我在C#控制台程序中运行以下代码：
var jobClient = JobSubmissionClientFactory.Connect(creds);
//Setup the sqoop job
string query = "import --connect \"jdbc:sqlserver://...:1433;database=...;user=...;password=...;\" --jobname testn
浏览 5提问于2014-01-09得票数 0
回答已采纳
我正在运行一个3节点的HDP 2.2集群。Oozie版本是4.1.0.2.2，Sqoop版本是1.4.5.2.2。我正在使用Sqoop作业从RDBMS到HDFS进行增量导入，如下所示：
sqoop job –create JOB1 –meta-connect “jdbc:hsqldb:hsql://ip-address:16000/sqoop” — import –connect jdbc:oracle:thin:@ip-address:db –username db_user –password-file hdfs://ip-address:8020/user/oozie/.password
浏览 2提问于2015-08-28得票数 0
1回答
我在试着用。我导入了清单文件，并且能够运行azure hdinsight -h和azure account list (这为我提供了良好的凭据)。
但是，我无法使用列出我的HDInsight集群
azure hdinsight cluster list
这将返回以下错误：
- Getting HDInsight serverserror: tunneling socket could not be established, cause=1500:error:140770FC:SSL routines:SSL23_GET_SERVER_HELLO:unknown protocol:opens
浏览 0提问于2014-07-21得票数 0
如何在Azure HDInsight Hadoop集群中查询时间线服务器以获得作业指标？
连接到蔚蓝群集：
curl -u admin -sS -G "https://$CLUSTERNAME.azurehdinsight.net/api/v1/clusters/$CLUSTERNAME"
连接到时间线服务器：GET /ws/v1/timeline/
我需要一个查询，将这两者连接起来，以获得Azure HDInsight Hadoop集群的作业指标。提前谢谢。
浏览 1提问于2018-11-01得票数 1
回答已采纳
我正在尝试在Amazon EMR(Hadoop2.8.5sqoop 1.4.7)中执行sqoop import。当未指定avro选项(--as-avrodatafile)时，导入会进行得很好。但是一旦设置好，作业就会失败，因为
19/10/29 21:31:35 INFO mapreduce.Job: Task Id : attempt_1572305702067_0017_m_000000_1, Status : FAILED
Error: org.apache.avro.reflect.ReflectData.addLogicalTypeConversion(Lorg/apache/avr
浏览 27提问于2019-10-30得票数 0
我们在Azure中运行了HDInsight集群，但是它不允许在集群创建时旋转边缘/网关节点。所以我通过安装创建了这个edge/网关节点
echo 'deb http://private-repo-1.hortonworks.com/HDP/ubuntu14/2.x/updates/2.4.2.0 HDP main' >> /etc/apt/sources.list.d/HDP.list
echo 'deb http://private-repo-1.hortonworks.com/HDP-UTILS-1.1.0.20/repos/ubuntu14 HDP-U
浏览 5提问于2016-07-07得票数 8
使用Sqoop，我试图连接到Oracle DB，然后列出可用的数据库。但是，当我尝试执行命令时，我得到的是java.lang.NullPointerException
请找到我得到的命令和例外情况，如下所述：
[hadoop@njpas01 bin]$ ./sqoop list-databases --connect jdbc:oracle:thin@DEVDB1:1521 --username dev_user -P
Warning: $HADOOP_HOME is deprecated.
15/04/01 14:56:24 INFO sqoop.Sqoop: Running Sqoop
浏览 7提问于2015-04-02得票数 3
我想验证在Sqoop导入任务之后复制的行数。我知道在指定了带有选项- table的表之后，可以使用Sqoop的--验证选项来实现这一点。在我的任务中，我使用的是免费表单查询选项(-- query )，而不是表选项(-- table )，当我提供该选项时--验证它不起作用。
示例：
sqoop导入--连接abc.com --表测试--验证-->工作
sqoop导入--连接abc.com --查询"select * from test where /$CONDITIONS“--验证-->不起作用
请帮帮忙
浏览 2提问于2014-09-08得票数 0
回答已采纳
1回答
我试图在oozie中使用sqoop操作，但是mysql-连接器-java.jar没有出现在/user/oozie/share/lib/sqoop中，因为我现在没有权限添加jar，
在workflow.xml中包含mysql-连接器-java.jar有任何方法或解决方法吗？
我已经将jar放在sqoop / lib目录中，但它不起作用
浏览 0提问于2018-12-30得票数 0
回答已采纳
3回答
我在sqoop/lib文件夹中复制了jar文件，我在sqoop中使用的命令是：
bin/sqoop导入-连接jdbc:mysql://localhost:3306/sqoop -用户名根密码管理-表城市
错误信息：
14/06/21 08:44:44 ERROR sqoop.Sqoop: Got异常运行Sqoop: java.lang.RuntimeException:未能加载db驱动程序类: com.mysql.jdbc.Driver java.lang.RuntimeException:无法加载db驱动程序类: com.mysql.jdbc.Driver at org.apache
浏览 3提问于2014-06-21得票数 0
我有一个简单的Sqoop查询，用于导入表的id的最大值并将其存储在HDFS中。在HDFS中存储是客户要求的东西，所以我要考虑多种原因。
才能得到我用的最大
sqoop import \
--connect jdbc:mysql://abc.com/sqoopemp \
--username root \
--password root \
--e 'select max(id) from emp WHERE $CONDITIONS' \
--target-dir sqooplastmax \
--m 1 \
--driver com.mysql.jdbc.Driver
上面的查
浏览 7提问于2016-06-05得票数 0
回答已采纳
有人能告诉我。我有以前使用hive -f scriptname.hql在Cloudera上运行的HQL脚本，现在我想在HDINSIGHT(Hadoop集群)中运行这些脚本，但是在HDINSIGHT中不能使用hive命令行。有人能指点我怎么做吗。
浏览 0提问于2021-04-02得票数 0
回答已采纳
1回答
我正在尝试创建一个Sqoop作业，在一个特定的队列中运行，但它不起作用。
我试过两件事：
1：在就业创建中声明队列
sqoop job \
--create myjob \
-- import \
--connect jdbc:teradata://RCT/DATABASE=MYDB \
-Dmapred.job.queue.name=shortduration \
--driver com.teradata.jdbc.TeraDriver \
--username DBUSER -P
浏览 0提问于2016-06-07得票数 3
回答已采纳
1回答
我已经创建了sqoop作业，它运行得很好，但是当我尝试使用crontab来调度它时，它不起作用。
50 12 * * * sqoop job --exec myjob_direct_append >> /home/training/my_Local/direct_append1.log
请指导正确的方法。
浏览 0提问于2017-09-29得票数 0
1回答
我们正面临以下问题的细节如下，请分享您的投入。
1)在sqoop中使用-验证选项
如果我们在没有为sqoop创建作业的情况下运行sqoop命令，则验证工作。但是，如果我们首先创建一个作业，使用validate选项验证似乎不起作用。
同工
sqoop导入--连接"DB连接“--用户名$USER --密码--文件$File_Path --仓库-dir $TGT_DIR --as-textfile --字段--终止于‘sqoop’--行--被'\n‘--表emp_table -m 1 --outdir $HOME/javafiles -验证
不起作用
sqoop作业--创建Job_i
浏览 4提问于2017-01-12得票数 0
1回答
使用Sqoop增量工具需要以类似于2016-09-05 06:04:27.0的格式在--last-value中提供上次修改日期。这种情况下的问题是，在源MySQL数据库中，update_date数据存储为纪元时间戳( 1550218178)。
使用以下sqoop命令
sqoop import --verbose --connect jdbc:mysql://192.18.2.5:3306/iprocure_ip --table depot --username usernamehere --password-file /user/admin/.password --check-column u
浏览 0提问于2019-03-07得票数 0
我使用Sqoopv1.4.2来执行带有作业的增量导入。这些工作是：
--create job_1 -- import --connect <CONNECT_STRING> --username <UNAME> --password <PASSWORD> -m <MAPPER#> --split-by <COLUMN> --target-dir <TARGET_DIR> --table <TABLE> --check-column <COLUMN> --incremental append --las
浏览 2提问于2012-10-09得票数 1
4回答
当我执行时：
sqoop import --connect jdbc:mysql://localhost/testdb --table test --hive-table test --hive-import -m 1
我得到以下错误消息：
13/04/21 16:42:50 ERROR tool.ImportTool: Encountered IOException running import job: java.io.IOException: Hive exited with status 1
at org.apache.sqoop.hive.HiveImport.execut
浏览 3提问于2013-04-22得票数 7
回答已采纳
4回答
我正在从Oozie工作流执行sqoop作业。我可以在sqoop命令中创建具有静态名称的目标目录，如下所示。
<action name="table1" cred="">
<sqoop xmlns="uri:oozie:sqoop-action:0.2">
<job-tracker>${jobTracker}</job-tracker>
<name-node>${nameNode}</name-node>
<
浏览 0提问于2015-01-26得票数 2
2回答
我正在尝试将sqoop作业作为oozie操作来运行。我在jobtracker节点上有MySQL作为转移存储。我在某处读到oozie sqoop不能从import创建hive表。因此，我尝试将数据转储到hdfs中。这仍然是真的吗？
我查过分享库了。
我正在尝试从MS SQL数据库执行Sqoop。
当我运行sqoop命令时，它不需要shell中的元存储，它可以工作。
sqoop import --connect 'jdbc:sqlserver://host;username=sqoopimport;password=password;database=db1' --table t1
浏览 0提问于2013-06-04得票数 3
回答已采纳
在使用sqoop时，导入可以传递java属性。在我的情况下，我需要通过
-Doraoop.oracle.rac.service.name=myservice
与--direct一起使用sqoop直接连接到oracle。
现在，我需要用相同的参数创建一个sqoop作业，但是当我尝试发出
sqoop job --create myjob -- import -Doraoop.oracle.rac.service.name=myservice --direct --connect...
它抱怨说
ERROR tool.BaseSqoopTool: Error parsing arguments fo
浏览 4提问于2016-09-08得票数 1
我们在参数‘- query’中给出的select查询失败。 命令curl -u：-d user.name= -d command="import --connect jdbc:sqlserver://:1433；null--用户名--密码--查询\“adl://.azuredatalakestore.net//sheriff/testnewrdbmstoadld”--追加--目标目录--临时根目录adl://.azuredatalakestore.net//sheriff/testnewrdbmstoadld/temp --作为文本文件--封闭的‘--转义为/-- database=
浏览 5提问于2019-12-13得票数 0
回答已采纳
3回答
将数据导入到单元中的sqoop
、、、、
我正在尝试使用sqoop2将数据导入到hive表。我正在使用--hive-import，但它不起作用
代码：
sqoop import --connect jdbc:sqlserver://192.168.x.xxx:11xx --username user --password user --table xxxx.NOTIFICATION --hive-import
错误：
错误执行语句: com.microsoft.sqlserver.jdbc.SQLServerException:无效对象名'XXXX.NOTIFICATION‘。
我做错了什么？
浏览 3提问于2016-08-25得票数 0
回答已采纳
1回答
我正在使用Sqoop用UpdateOnly选项更新oracle中的一个表。我尝试了各种网站上提到的许多建议，但仍然不起作用。
代码如下所示。
SqoopOptions sqoopClient = new SqoopOptions();
sqoopClient.setFieldsTerminatedBy(fieldDelim);
sqoopClient.setLinesTerminatedBy(lineTerminator);
sqoopClient.setTableName(tableName);
sqoopClient.setColumns(col
浏览 16提问于2017-08-24得票数 0
1回答
我正在尝试从oracle到HDFS的sqoop数据。我用sqoop做这个用途。我下载了ojdbc6.jar并将其放在/usr/hdp/2.2.0.0-2041/sqoop/lib路径中，并执行以下命令以检查是否能够连接到oracle数据库。
sqoop list-databases --connect jdbc:oracle:thin:@hostname:port/service --username XXXX --password XXXX --verbose;
我得到了以下错误。
Warning: /usr/hdp/2.2.0.0-2041/accumulo does not ex
浏览 0提问于2015-05-29得票数 0
回答已采纳
我计划将sqoop metastore更改为mysql db(我使用的是hadoop 2.65，mysql 5.7，sqoop 1.4.6)
使用将存储sqoop元数据的defalut，如sqoop作业定义(如配置单元元数据将存储在derby db中)..
创建了sqoop作业，并且能够通过sqoop作业查看这些作业--list n也执行这些作业，我如何确认所有元数据都将存储在mysql中。
我通过谷歌没有得到一个好的，谁能提供好的文档或谷歌链接
提前感谢
浏览 1提问于2017-05-10得票数 0
我能够成功地运行sqoop导出
sqoop export --connection-param-file /user/xgr0naru/sqoop.properties --connect jdbc:oracle:thin:@//XXx --用户名xx --密码xx --表导出目录/data/raw/oltp/cogen/oraclexport/TZ5CK/2015-08-18/ --输入字段终止于'\001‘--行终止于'\n’--输入转义为'\"‘--输入可选地包含于'\"’\“‘中’\”‘
路径/user/xgr0naru/sqoop.pr
浏览 1提问于2015-09-15得票数 1
2回答
我在Sqoop有下面的问题吗？
我很好奇我们是否可以为sqoop导入/导出作业设置投机执行。
在sqoop导入/导出过程中，我们还可以选择设置减速器的数量吗？根据我的分析，sqoop不需要任何减速器，但不确定我是否正确。请在这个问题上纠正我。
我在mysql、oracle中使用了sqoop，除此之外，我们还可以使用其他什么数据库。
谢谢
浏览 1提问于2015-04-22得票数 1
回答已采纳
当我试图从Teradata View导入表格时，我遇到了Teradata连接器for Sqoop的问题。我只有访问视图的权限。
但是不知何故，当sqoop作业启动时，它试图在Teradata DB中创建一个表，我正在访问Teradata DB，但没有在该DB/schema中创建任何表的权限
我得到了以下错误
13/05/31 03:40:12 ERROR tool.ImportTool: Encountered IOException running import job: com.teradata.hadoop.exception.TeradataHadoopSQLExceptio
浏览 1提问于2013-05-31得票数 0
回答已采纳
1回答
没有连接字符串的管理器
、、、、
当我的电子病历集群准备好运行的时候。
在列出数据库和导入sqoop时，我开始面临一些问题。
显然，当我在Linux终端中输入"sqoop“时，sqoop已经正常安装，并且正常工作。
如您所见，该命令可以正常识别。
但是，如果我尝试sqoop import命令，这个命令不能是，它将面临一个错误：
sqoop import \
--connect jdbc:postgres://sportsdb.cxri########.us-east-2.rds.amazonaws.com/SportsDB \
--username postgres \
--password mypassword \
浏览 7提问于2022-01-03得票数 0
回答已采纳
2回答
我已经创建了一个名为TeamMemsImportJob的sqoop作业，它基本上是将数据从sql server拉到hive中。我可以通过unix命令行运行以下命令来执行sqoop作业：
sqoop job –exec TeamMemsImportJob
如果我创建了一个oozie作业，并在其中包含了实际的独家输入命令，它运行得很好。但是，如果我创建oozie作业并通过它运行sqoop作业，我会得到以下错误：
oozie job -config TeamMemsImportJob.properties -run
>>> Invoking Sqoop command line
浏览 0提问于2014-06-25得票数 1
我试图理解sqoop中的合并选项，但无法理解相同的内容。我对合并选项的基本理解是，它可以根据id键更新记录。
create table customer (id int, name varchar(100), recorddt date);
insert into customer values (1,'abc','2016-01-01');
insert into customer values (2,'def','2016-01-02');
之后，使用增量追加选项提取记录。这两个记录都会被提取出来。
sqoop import
浏览 18提问于2017-01-26得票数 0
2回答
我一直在尝试使用Sqoop将一个表从Vectorwise导入到Hive。我下载了Vectorwise JDBC驱动程序和所有内容。它就是不起作用。
这是我正在使用的命令: sudo -u hdfs --driver com.ingres.jdbc.IngresDriver --connect jdbc: ingres ://172.16.63.157:VW7/amit --username ingres -password ingres--表vector_table --hive-table=向量表--hive- -m --create-hive-table -m 1
我收到错误: 12/06
浏览 3提问于2012-06-07得票数 0
回答已采纳
2回答
Sqoop是解决方案，但我找不到sqoop解决方案(安装和连接到hadoop和Server，以及使用sqoop传输数据)。
还有其他方法可以将我的所有数据从Server传输到Hadoop吗？
或
关于使用SQOOP (安装和连接到hadoop和Server以及使用sqoop传输数据)在WindowsServer2008R2上有帮助吗？
浏览 2提问于2016-01-15得票数 3
最近，我注意到，每当我使用Sqoop从SQL数据库中摄取数据时，所有的datetime字段都被转换为bigint (epoch * 1000)而不是String。
重要的是要注意:我是储存作为地板。
我一直在尝试像"--map-column-java"这样的sqoop标志，但是我不想手动定义数千个表中的数百个列。
我遗漏了什么标志来防止这种sqoop行为？
在以纯文本存储时，sqoop似乎没有这样做。
浏览 5提问于2016-07-28得票数 2
回答已采纳
1回答
嗨，我通过sqoop连接器将数据从mysql加载到hdfs。现在，如果现有数据之间的行被更新，是否有任何查询来更新sqoop中现有行的数据值。我知道增量更新吗?在增量更新中是否也会更新现有行？我是sqoop新手吗？
浏览 0提问于2016-07-22得票数 0
sqoop import-all-tables not hive with default database工作正常，但Sqoop import-all-tables not hive指定数据库不起作用。 As --hive-database已折旧如何指定数据库名称 sqoop import-all-tables \
--connect "jdbc:mysql://quickstart.cloudera:3306/retail_db" \
--username root \
--password XXX \
--hive-import \
--create-hive-tab
浏览 20提问于2019-06-24得票数 0
我想以另一个用户的身份运行sqoop命令。我可以在运行sqoop作业之前设置HADOOP_USER_NAME命令，如下所示：
export HADOOP_USER_NAME=desiredUser
sqoop import \
-D mapreduce.map.memory.mb=4096 \
-D mapreduce.map.java.opts=-Xmx3200m \
--driver ...\
--connect ..\
--username ..
我想知道是否有类似于我设置mapreduce.map.memory.mb选项的方法在sqoop命令中设置它。我试过了
...
-D HADO
浏览 77提问于2017-12-15得票数 1
1回答
我从中克隆了sqoop项目，并使用build.xml在windows 7中使用ant创建了sqoop-1.4.6-SNAPSHOT.jar，并将其部署到cdh5环境中的/usr/lib/sqoop中，但当运行sqoop导入命令时，堆栈跟踪中会出现以下错误：
Exception in thread "main" java.lang.NoClassDefFoundError: org/kitesdk/data/mapreduce/DatasetKeyOutputFormat
at org.apache.sqoop.mapreduce.DataDrivenImportJob.
浏览 1提问于2014-11-02得票数 0
1回答
sqoop将数据从Teradata传输到HDFS :获取错误如下所示：-bash-4.1$ sqoop导入--连接管理器com.cloudera.sqoop.manager.DefaultManagerFactory --驱动程序com.teradata.jdbc.TeraDriver \
-连接jdbc:teradata://dwsoat.dws.company.co.uk/DATABASE=TS_72258_BASELDB \--用户名用户dir--表地址--num-mappers 3--目标-dir/user/nathalok/地址警告: /apps/cloudera/parcels/
浏览 1提问于2014-10-29得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
云直播
对象存储活动推荐
腾讯云开发者
