腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
基于jdbc数据源加载的AWS EMR火花异常
、
、
、
我正在旋转带有Spark2.4.6的AWS
集群
的emr-5.31.0图像,然后我尝试登录主节点上的星火外壳,并按照本教程从我的RDS
MySQL
实例上传数据。我已经将连接器jar (
mysql
-连接器-java-5.1.49-bin.jar)
和
脚本上传到~/home/
hadoop
文件夹。scala> :require /home/
hadoop
/
mysql
-connector-java-5.1.49-bin.jar
浏览 13
提问于2020-10-09
得票数 0
回答已采纳
3
回答
用于处理大数据的
MySQL
集群
与
Hadoop
、
、
、
、
我想知道使用
MySQL
集群
和
使用
Hadoop
框架的优缺点。什么是更好的解决方案。我想听听你的意见。我认为使用
MySQL
集群
的优点是: 您也可以使用商品硬件。因此,在我看来,对于处理大数据,
MySQL
集群
是
浏览 7
提问于2014-01-29
得票数 2
1
回答
是否有一个可以推送大量数据的框架?
我们的
MySQL
和
Hadoop
平台部署在不同的网络中,
Hadoop
不能访问
MySQL
,但是
MySQL
可以连接到
Hadoop
。顺便说一句,
Hadoop
集群
在我们的网络中使用了一个Kafka主题,通过在两边部署水槽并连接在一起。但是对于海量的RDS数据,如何实现这一点呢?
浏览 1
提问于2019-02-20
得票数 0
2
回答
虚拟机上的
Hadoop
、
、
、
为了实现可伸缩性,我们希望从
MySQL
迁移到
Hadoop
。运行在虚拟机上的
hadoop
集群
会改善我们网站的性能吗? 在虚拟机(ESXi)上实现
hadoop
集群
有哪些优点
和
缺点?
浏览 0
提问于2011-01-26
得票数 -2
1
回答
hdfs快照可用于恢复单元格吗?
、
、
知道hive
和
hdfs一起使用一个亚稳态,是否可以将运行中的
hadoop
-hive
集群
中的hdfs快照恢复到一个新的
hadoop
-hive
集群
中?
浏览 5
提问于2014-06-18
得票数 1
1
回答
MySQL
群集顶部的配置单元层
、
、
、
免责声明:我是
Hadoop
和
Hive的新手。在这种情况下,我可以结合使用Hive
和
Hadoop
来查询数据库
和
检索数据吗?我的意图是使用配置单元作为
MySQL
集群<
浏览 0
提问于2012-05-29
得票数 1
回答已采纳
1
回答
我应该考虑将
Hadoop
用于新的PHP应用程序吗?
、
、
、
、
作为一个启动项目,我已经构建了一个PHP应用程序原型,其背后有一个
MySQL
数据库,但现在整个过程都需要重写。我希望保持PHP作为服务器端语言,但我不知道应该使用哪种数据库,以便能够主要使用AJAX不断地搜索
和
获取数据。我认为
MySQL
关系数据库可以在一段时间内完成这项工作,但我希望为有来自世界各地的许多用户需要快速访问他们的数据的时候做好准备。现在我得到的只是一个数字海洋的VPS,它运行PHP
和
MySQL
,它很好地服务于我的70个测试用户。 但如果我的人数开始增加呢?我应该从一开始就考虑使用
Ha
浏览 2
提问于2015-02-03
得票数 1
4
回答
在EMR上向Spark添加JDBC驱动程序
、
、
我正在尝试将JDBC驱动程序添加到在Amazon之上执行的Spark
集群
中,但我一直得到以下内容: java.sql.SQLException:没有为异常找到合适的驱动程序。
浏览 3
提问于2015-09-24
得票数 3
1
回答
将数据从
MySql
同步到DynamoDb
、
、
目前,我正试图找到一个(很好的)解决方案,说明如何将外部
MySql
数据库中的数据同步,该数据库与任何AWS完全分离为AWS DynamoDb。ERM () AWS似乎是要走的路,但似乎Hive脚本无法与外部
MySql
数据库通信?还是我搞错了?我发现很难找到任何可用的Hive脚本示例。
浏览 3
提问于2016-08-24
得票数 1
3
回答
hadoop
集群
中的边缘节点
、
有人能给我解释一下
hadoop
中Edge节点的架构吗?我只能在互联网上找到定义,我有以下问题- 1)边缘节点必须是
集群
的一部分吗(如果它在
集群
内,我们有什么优势?)它是否在hdfs中存储任何数据块。2)边缘节点可以在
集群
外吗?
浏览 5
提问于2013-05-22
得票数 12
1
回答
为什么在mapred-site.xml
Hadoop
2上有一个mapreduce.jobtracker.address属性
、
、
、
、
YARN是
Hadoop
的第二代,它不再使用jobtracker守护进程,而是使用资源管理器。但是为什么在mapred-site.xml
Hadoop
2上会有一个mapreduce.jobtracker.address属性呢?为了从Eclipse中运行
Hadoop
应用程序,有没有一个yarn的插件eclipse,因为我发现所有的插件都是专门为jobtracker设计的。提前谢谢。
浏览 6
提问于2015-05-12
得票数 0
1
回答
纱线日志. stdout
和
stderr变成了巨大的文件--如何避免
、
、
亲爱的朋友
和
学院因此,我将解释这个问题:[root@datanode04 contai
浏览 0
提问于2019-02-13
得票数 1
2
回答
Apache Falcon数据备份
、
、
我无法使用Apache Falcon将数据从一个
Hadoop
集群
备份到另一个
集群
。 数据从一个
集群
备份到另一个
集群
的方法有哪些?是否存在使用Apache Falcon将数据从一个
集群
备份到另一个
集群
所需的流程实体或oozie工作流?
浏览 8
提问于2015-06-02
得票数 0
1
回答
如何部署星火,使其资源利用率最高
、
、
、
、
我有10个服务器(16G内存,8个核心),想要部署
Hadoop
和
Spark,您能告诉我哪一个计划可以最大限度地利用资源吗?
浏览 3
提问于2014-10-07
得票数 0
1
回答
如何为Kerberized
集群
配置Apache NiFi
、
、
、
、
但是,当我尝试设置Apache NiFi来访问Hive或HDFS时, Kerberized
集群
。我有问题了。 有人能指导我设置HDFS/Hive/HBase (与Kerberos一起)的文档吗?
浏览 4
提问于2016-12-23
得票数 3
1
回答
mysql
问题的Sqoop访问控制
、
、
在我们的网络中,我们对
mysql
数据库有非常清晰的访问控制。在编写sqoop命令后,我们发现sqoop正在尝试从
hadoop
集群
中的一台服务器连接
mysql
。
hadoop
集群
中的服务器将无法连接到
mysql
数据库。 有没有办法告诉sqoop从我们执行sqoop命令的本地机器上连接到我们的
mysql
?
浏览 24
提问于2021-03-10
得票数 0
1
回答
多节点
hadoop
集群
和在mesos上运行
hadoop
有什么区别?
、
我已经构建了一个多节点
hadoop
集群
,然后我开始研究mesos和在mesos
集群
上运行
hadoop
的能力,所以我的问题是: 1) Should I run
hadoop
on mesos cluster
浏览 0
提问于2015-09-12
得票数 0
1
回答
将蜂窝数据从一个
Hadoop
集群
移动到另一个
Hadoop
集群
,而不使用distcp命令?
如何不用distcp命令将数据从一个
Hadoop
集群
移动到另一个
Hadoop
集群
。因为我们不能用这个。我们还有其他选择像Sqoop或Flume吗?
浏览 2
提问于2015-10-13
得票数 0
1
回答
1个
Hadoop
和
Hbase大簇与1个
Hadoop
簇+1个Hbase簇
、
Hadoop
将通过从Hbase读取数据并将数据写入Hbase来运行许多作业。假设我有100个节点,那么有两种方法可以构建
Hadoop
/Hbase
集群
: 分离数据库(),然后我们有两个
集群
:60节点
Hadoop
集群
和
40节点Hbase
集群
(1
Hadoop
+1 Hbas
浏览 4
提问于2014-04-19
得票数 1
回答已采纳
2
回答
在亚马逊ec2上运行
hadoop
作业:多节点
集群
、
、
我必须在亚马逊EC2
集群
上运行
hadoop
mapreduce作业。谁能告诉我一些好的文档。我已经为此努力了12个多小时了。
浏览 2
提问于2011-12-13
得票数 4
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
Hadoop集群配置
Hadoop教程:功能,组件,集群和拓扑
Hadoop集群PoC方案
如何给Hadoop集群划分角色
新手如何快速搭建Hadoop集群
热门
标签
更多标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM
活动推荐
运营活动
广告
关闭
领券