腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何在hivesite.xml中映射蜂窝仓库路径?
、
hdfs
dfs -mkdir -p /user/hive/warehouse此命令用于
存储
元数据。但我在
文件
系统中找不到。, software--> <property><value>jdbc:
mysql
/de
浏览 0
提问于2018-07-24
得票数 0
回答已采纳
1
回答
hadoop架构查询示例
、
、
目前我有两台机器,其中一台是Horton沙箱,我已经将它配置为名称节点,并将数据节点从它
和
其他机器上退役,我已经将其作为数据节点,并在其上安装了hive服务器。我的问题是,因为这是我第一次使用hadoop,我的计划是将数据从sql数据库传输到hadoop,所以这是否意味着我必须在datanode上安装
mysql
,而我将使用sqoop
和
其他东西?
浏览 0
提问于2015-12-02
得票数 0
2
回答
蜂巢数据
存储
在哪里?
、
、
、
它是否将数据
存储
在
HDFS
或RDBMS中??Hive Meta商店是否使用RDBMS来
存储
蜂窝表元数据?? 提前谢谢!!
浏览 6
提问于2017-04-27
得票数 6
回答已采纳
1
回答
加载到配置单元表时转换为拼接
文件
格式
、
我们希望进行从
mysql
到
hdfs
的实时复制,并将
文件
存储
为
hdfs
集群中的parquet格式。据我们所知,我们可以使用以下两种方法之一来完成此操作但我们的问题是,在将数据加载到
hdfs
时,它们都不支持转换为parquet。因此,我只想知道是否有任何方法可以对
hdfs
集群中
存储
为parquet的
文件
进行实时复制。第二个问题是,当您使用&q
浏览 0
提问于2016-01-08
得票数 0
2
回答
如果我们使用Sqoop将数据从
MySql
导入到
HDFS
,那么
存储
在
HDFS
中的
文件
格式是什么?
如果我们使用Sqoop从
MySql
导入数据到
HDFS
,那么在
HDFS
中
存储
的
文件
格式是什么?
浏览 11
提问于2015-05-05
得票数 1
回答已采纳
2
回答
如何将密码
存储
在密码
文件
sqoop中
我希望将密码
存储
到
文件
中&稍后在sqoop命令中使用相同的密码。 根据sqoop文档,--password-file选项允许我们
存储
密码。因此,我将它
存储
在pwd
文件
中,密码仅为abc文本。sqoop import --connect jdbc:
mysql
://localhost:3306/db --username bhavesh --password-file /pwd --tablet1 --target-dir '
浏览 4
提问于2016-05-11
得票数 4
1
回答
cygnus.conf的配置
、
我需要用
mysql
格式在cosmos中
存储
数据,但我做不到。我已经检查了数据
存储
在cosmos的文本
文件
中,但当我进入hive时,没有任何以我的名字命名的表。cygnusagent.sinks =
hdfs
-sink
mysql
-sink cygnusagent.channels =
hdfs</em
浏览 1
提问于2015-05-07
得票数 1
1
回答
如何更改默认行为以将每个实体的信息
存储
在不同的表中
、
、
我想将Orion
和
Cygnus配置为将所有数据
存储
在一个表中.我知道我应该在HTTP头中配置数据库
和
表的名称,如下所示:tableName=<fiware-servicePath-header>_<entityId
浏览 2
提问于2015-04-23
得票数 3
1
回答
在Cosmos中
存储
SQL
、
我需要将Cosmos中的数据保存在SQL表中,而不是
HDFS
文件
中。我猜如果
HDFS
持久化工作,那应该是cygnus.config
文件
浏览 2
提问于2014-10-23
得票数 1
2
回答
在
HDFS
中处理总大小为100 in的多个小
文件
、
文件
从本地dir移动到
HDFS
路径(
hdfs
://messageDir/..)使用批处理
和
每批处理,我可以看到几千个.txt
文件
,它们的总大小约为100 is。几乎所有的
文件
都小于1MB。我可以知道
HDFS
如何
存储
这些
文件
并执行拆分吗?因为每个
文件
都小于1MB(小于64/128 MB的
HDFS
块大小),所以我认为不会发生任何分裂,但是
文件
将被
浏览 2
提问于2018-10-21
得票数 0
回答已采纳
2
回答
Apache Gora与
mysql
applier
和
sqoop
我想将
mysql
与hadoop中的一个项目集成起来。我搜索了很多不同的方法,有两种方法:实时使用
mysql
applier for hadoop
和
为非实时使用使用"apache“。gora
和
mysql
应用程序或sqoop有什么区别? 对于hadoop
和
mysql
的集成,是否需要任何nosql作为接口?
浏览 4
提问于2014-04-30
得票数 0
回答已采纳
2
回答
记录大量印象数据(5 000万条记录/月)
、
、
、
、
我们目前正在记录使用
MySQL
的几个网站的印象数据,并正在寻找一个更合适的替代记录流量的高流量,我们的网站现在看到。我们在
MySQL
数据库中最终需要的是聚合数据。我们通过按范围划分数据并执行批量插入来解决一些
MySQL
性能问题,但从总体上讲,我们不应该使用
MySQL
。我们在
MySQL
数据库中最终需要的是聚合数据,我相信还有更适合这个用例的大容量日志记录部分的其他技术。我读过关于、 (与一起)、
和
的文章,我觉得自己走在正确的轨道上,但需要一些关于我应该研究的技术(或组合)的指导。我特别想知
浏览 3
提问于2015-09-09
得票数 1
回答已采纳
3
回答
SQOOP导入将数据
存储
在本地
文件
系统而不是
HDFS
中
、
我正在尝试通过sqoop将数据从
mysql
导入到
hdfs
,但在导入其
存储
数据后,将其
存储
在我的/home/<user>/<tablename>
文件
夹中,而不是
hdfs
。/compile/00992af844025da3f2ee7d83cb03a6b3/user_account.jar \ --create-hive-table --connect jdbc:
mysql
浏览 31
提问于2017-07-12
得票数 0
3
回答
为什么hive使用RDBMS来
存储
亚稳态而不是
文件
系统?
、
我想了解使用RDBMS进行Hive元数据而不是
文件
系统的设计原则。并发控制亚秒延迟等。
文件
系统可以提供-可以通过使用动物园管理员来实现并发 在蜂巢的设计过程中,还有什么其他事情影响到这个决定吗?
浏览 1
提问于2016-02-19
得票数 0
5
回答
如何通过sqoop将表从sql server导入到
hdfs
、
、
我将表从我的数据库导入到
hdfs
,但无法将其导入到配置单元。我需要在配置单元中配置任何
文件
吗?同样,当我浏览网页时,显示的是
MySQL
的配置,但我使用的是驱动程序jdbc:sqlserver。
浏览 2
提问于2012-08-01
得票数 2
1
回答
如何在集群之间迁移数据?
、
、
、
、
我必须将Hive表复制到另一个集群,以保留我的表的模式
和
层次结构,所以我的问题是:为了将Cluster1的确切表(和数据库)复制到Cluseter2中,最安全
和
最恰当的方法是什么。我发现了一种全球性的说法: - distcp
hdfs
:source_Path
hdfs
:dest_Path - hive> MSCK REPAIR TABLE TABLE1; 但是,由于我必须复制
浏览 5
提问于2017-02-01
得票数 2
1
回答
如何从现有web应用程序访问
HDFS
(Hadoop
文件
系统
、
、
、
、
我已经在我的集群上安装了hadoop 1.0.4,包括1个主服务器
和
3个从服务器,现在我想通过我的web应用程序访问我的
HDFS
文件
系统,以
存储
和
访问现有web应用程序的数据。因为我的web应用程序当前使用
MySQL
作为数据库,所以我希望将其替换为
HDFS
。 那么,我可以使用什么来通过现有的web应用程序访问
HDFS
呢?出于后端数据迁移的目的,我使用sqoop
和
flume,但我希望与
HDFS
进行实时应用程序同步。因为
浏览 0
提问于2013-03-23
得票数 1
回答已采纳
2
回答
除了分析之外,我们还可以将MapReduce用于其他逻辑吗?
、
、
、
、
我的项目是消息转发系统(我们通过MSC,HLR
和
VLR向客户手机发送sms )。实际的工作流程是从
mysql
数据库中获取手机号码,并将短信转发到特定的mobile.Now,我们正在向20L号码(客户)/day发送短信。使用c
和
c++技术开发的。
浏览 0
提问于2015-10-05
得票数 0
1
回答
mydatabase.db在蜂巢中的用途是什么?
当我在Hive中创建一个名为“xyz”的数据库时,它会创建一个
文件
夹“xyz.db”。无论如何,Hive使用metastore_db来
存储
表模式。那么这个'xyz.db‘
文件
夹有什么用呢?
浏览 1
提问于2015-07-14
得票数 0
回答已采纳
2
回答
我可以使用
mysql
数据库作为apache的目标
存储
吗?
、
我是Apache的新手,请告诉我apache中是否提供了用于在
mysql
数据库上编写数据的配置。
浏览 9
提问于2022-08-02
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Mysql中级(一):Mysql 体系结构和存储引擎
【大数据】Hive 小文件治理和 HDFS 数据平衡讲解
MySQL数据库及InnoDB存储引擎的日志文件
MySQL两种存储引擎InnoDB和Myisam全面剖析
深入浅出MySQL-开发篇-存储过程和函数
热门
标签
更多标签
云服务器
ICP备案
实时音视频
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券