腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
Sqoop
将数据从
MySQL
表
复制到分区的Hive
表
、
、
、
我已经写了一个
Sqoop
脚本: HADOOP_USER_NAME=hdfs
sqoop
import --connect jdbc:
mysql
://cmsmaster.cy9mnipcdof2.us-eastusername user -password-file /user/password/dbpass.txt --fields-terminated-by ',' --target-dir /user/db/
sqoop
浏览 6
提问于2018-03-08
得票数 1
2
回答
如何在从配置单元中使用
MySQL
导出时
覆盖
sqoop
表
、
、
我需要把数据从蜂巢传输到
MySQL
。下面是我的
sqoop
命令:但是,每次我运行此命令时,数据似乎都会追加到
表
中,但不会
覆盖
该
表
。
浏览 9
提问于2016-10-11
得票数 5
2
回答
覆盖
hdfs目录
Sqoop
导入
在
Sqoop
导入时,是否可以自动
覆盖
HDFS目录,而不是每次手动
覆盖
?(我们是否有像"--overwrite“这样的选项,就像我们为hive import提供的"--hive-overwrite")
浏览 9
提问于2016-10-19
得票数 7
回答已采纳
1
回答
hive-import和hive-overwrite with
sqoop
import all
、
、
sqoop
import-all-tables --connect jdbc:
mysql
://localhost/SomeDB --username root --hive-database test--hive-import; 上面的命令工作正常,但它复制了目标
表
中的值。我使用下面的代码来
覆盖
数据。
sqoop
import-all-tables --connect jdbc:
mysql
://localhost/SomeDB -
浏览 13
提问于2020-09-28
得票数 1
3
回答
如何使用
sqoop
覆盖
单元中的数据
、
我试图通过
mysql
数据库中的
sqoop
将数据加载到已存在的hive
表
中。我指的是以下指南,以供参考:-
sq
浏览 6
提问于2016-03-28
得票数 0
1
回答
如何将
mysql
表
中的数据加载到cloudera(使用虚拟框启动)
、
、
这些纬度和经度值存储在
mysql
数据库中的
表
中。因此,我希望将
mysql
数据库中的这些纬度和经度值导入hadoop。现在,在cloudera命令提示符中,当我尝试使用如下查询导入
mysql
表
中的值时 $ bin/
sqoop
import --connect jdbc:
mysql
://192.168.56.1/testDb--table latlog -
浏览 3
提问于2017-01-23
得票数 0
2
回答
蜂巢中的编码列
、
、
我正在使用
Sqoop
从
mysql
导入一个
表
到hive。有些列是latin1编码的。有没有办法这样做: 在使用
sqoop
导入时,将列转换为utf-8?
浏览 1
提问于2013-03-26
得票数 2
回答已采纳
1
回答
从oracle和导入数据动态创建单元分区
表
的
Sqoop
、
、
我在oracle中有一个
表
(
表
名为TRCUS),其中包含客户的详细信息,根据年份和月份进行分区。Oracle中的分区名称: PERIOD_JAN_13、PERIOD_FEB_13、PERIOD_JAN_14、PERIOD_FEB_14等如何使用
SQOOP
实现这一点?
浏览 6
提问于2017-10-16
得票数 1
回答已采纳
1
回答
我们可以使用
sqoop
导出特殊字符吗?
、
、
我正在尝试使用
sqoop
export将其中一个
表
从hive导出到
MySQL
。配置单元表格数据包含特殊字符。我的配置单元"special_char“
表
数据:2 どうぞ
sqoop
export --verbose --connect jdbc:
mysql
://xx.xx.xx.xxx/Sampledb --username abc --password xyz --table sp
浏览 2
提问于2018-09-25
得票数 1
7
回答
sqoop
导入多个
表
、
、
、
我们使用的是Cloudera CDH 4,并且我们能够按照预期将
表
从Oracle数据库导入到HDFS仓库中。问题是我们的数据库中有上千个
表
,而
sqoop
一次只支持导入一个
表
。将多个
表
导入HDFS或Hive有哪些选项?例如,一次将200个
表
从oracle导入HDFS或Hive的最佳方式是什么?到目前为止,我看到的唯一解决方案是为每个
表
导入创建一个
sqoop
作业,然后分别运行它们。由于Hadoop是为处理大型数据集而设计的,因此似乎应该有更好的方法。
浏览 1
提问于2013-06-19
得票数 8
回答已采纳
2
回答
如何将Hbase
表
导出到
MySql
表
、
、
我正在尝试使用
sqoop
将Hbase
表
导出到
mysql
表
。以下是我的查询:> --connect jdbc:
mysql
://mysqlserver_ip:3306/mysqldb > -
浏览 3
提问于2013-07-09
得票数 1
1
回答
sqoop
作业将数据导出到
mysql
,100%停留在map,状态为正在运行
、
、
、
、
所以我试着
用
sqoop
将数据从impala导出到
mysql
中,这是由oozie job.But安排的,当第一个
sqoop
动作开始时,它停留在map100%,而reduce 0%.and则填充了所有其他动作奇怪的是,在我终止这个oozie作业之前,
mysql
中没有数据,但在我终止它之后,数据出现在
mysql
表
中(只有与第一个阻塞的
sqoop
操作相关的
表
)。
浏览 1
提问于2017-03-21
得票数 1
4
回答
使用
sqoop
将文件导入到蜂巢时存在错误
、
、
我正在尝试将retail_db数据库
表
复制到我已经创建的hive数据库中。当我执行以下代码时--num-mappers 1 \ --connect "jdbc:
mysql
://quickstart.cloudera:3306tool.ImportAllTablesTool:遇到运行导入作业的IOException : hdfs://quickstart.cloudera:8020/user/cloudera/
浏览 16
提问于2016-07-29
得票数 3
回答已采纳
2
回答
如果我们使用
Sqoop
将数据从
MySql
导入到HDFS,那么存储在HDFS中的文件格式是什么?
如果我们使用
Sqoop
从
MySql
导入数据到HDFS,那么在HDFS中存储的文件格式是什么?
浏览 11
提问于2015-05-05
得票数 1
回答已采纳
1
回答
sqoop
-merge可以在hbase导入上使用此命令吗?
、
我使用
sqoop
将数据从sql服务器导入到hbase。我还可以使用
sqoop
-merge命令更新hbase中的数据吗? 谢谢
浏览 1
提问于2015-01-30
得票数 0
回答已采纳
3
回答
使用更新密钥的
Sqoop
导出
、
、
我必须将HDFS文件导出到
MySql
。NAME || | | |当我使用以下
Sqoop
命令插入时:--connect jdbc:
mysql
://localhost/DBNAME \--password root \ -现在,当我尝试使用以下命令更新
表</e
浏览 2
提问于2014-09-17
得票数 1
1
回答
hadoop如何处理从RDBMS摄取的行的更改
、
、
、
、
我有一个场景,数据每天从
MYSQL
数据库被摄取到hadoop中的一个过时的文件夹中。每天都会编辑一些行,而且可能还会有一些架构更改。
浏览 2
提问于2013-04-11
得票数 1
回答已采纳
2
回答
错误无法识别的参数--hive-partition key
、
、
、
当我运行以下语句时,我得到了错误Unrecognized argument --hive-partition-key:--connect 'jdbc:sqlserver:/purchase_category_p --hive-partition-value "2015-02-02" 已分区的
表
存在
浏览 2
提问于2015-07-27
得票数 2
1
回答
使用
sqoop
更新配置单元
表
、
、
、
我正在尝试从一个
MySQL
数据库中取出数据,在这个数据库中,我有一个同时具有主键和last_updated字段的
表
。实际上,我正在尝试获取最近更新的所有记录,并
覆盖
配置单元仓库中的当前记录
sqoop
job --create trainingDataUpdate -- import \--username user \ --password-file &
浏览 0
提问于2015-02-14
得票数 0
4
回答
使用任何
Sqoop
命令时出现
sqoop
错误
、
、
我正在使用hadoop 2.6.0,现在我正在尝试
sqoop
-1.4.5.bin__hadoop-2.0.4-alpha.tar.gz。我正在使用以下命令获取
sqoop
版本2016-10-19 16:11:21,722 [myid:] - INFO [main:
Sqoop
@92] - Running
Sqoop
version: 1.4.5但是如果我尝试任何
sqoop
命令,它会给出以下异常,
sqoop<
浏览 6
提问于2016-10-19
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
利用sqoop将hive和mysql数据互导入
大数据集群服务安装-mysql,hive,azkaban,sqoop,spark,python
MySQL 大表优化方案
查看MYSQL表数据大小
Mysql分库分表详解
热门
标签
更多标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
活动推荐
运营活动
广告
关闭
领券