1回答
我正在旋转带有Spark2.4.6的AWS集群的emr-5.31.0图像，然后我尝试登录主节点上的星火外壳，并按照本教程从我的RDS MySQL实例上传数据。我已经将连接器jar (mysql-连接器-java-5.1.49-bin.jar)和脚本上传到~/home/hadoop文件夹。scala> :require /home/hadoop/mysql-connector-java-5.1.49-bin.jar
Added &#x
浏览 13提问于2020-10-09得票数 0
回答已采纳
3回答
我想知道使用MySQL集群和使用Hadoop框架的优缺点。什么是更好的解决方案。我想听听你的意见。我认为使用MySQL集群的优点是：
您也可以使用商品硬件。因此，在我看来，对于处理大数据，MySQL集群是更好的解决方案。为
浏览 7提问于2014-01-29得票数 2
我们的MySQL和Hadoop平台部署在不同的网络中，Hadoop不能访问MySQL，但是MySQL可以连接到Hadoop。顺便说一句，Hadoop集群在我们的网络中使用了一个Kafka主题，通过在两边部署水槽并连接在一起。但是对于海量的RDS数据，如何实现这一点呢？
浏览 1提问于2019-02-20得票数 0
1回答
知道hive和hdfs一起使用一个亚稳态，是否可以将运行中的hadoop-hive集群中的hdfs快照恢复到一个新的hadoop-hive集群中？
浏览 5提问于2014-06-18得票数 1
2回答
虚拟机上的Hadoop
、、、
为了实现可伸缩性，我们希望从MySQL迁移到Hadoop。运行在虚拟机上的hadoop集群会改善我们网站的性能吗？
在虚拟机(ESXi)上实现hadoop集群有哪些优点和缺点？
浏览 0提问于2011-01-26得票数 -2
1回答
在我们的网络中，我们对mysql数据库有非常清晰的访问控制。在编写sqoop命令后，我们发现sqoop正在尝试从hadoop集群中的一台服务器连接mysql。hadoop集群中的服务器将无法连接到mysql数据库。
有没有办法告诉sqoop从我们执行sqoop命令的本地机器上连接到我们的mysql？
浏览 24提问于2021-03-10得票数 0
我正在尝试将JDBC驱动程序添加到在Amazon之上执行的Spark集群中，但我一直得到以下内容：
java.sql.SQLException:没有为异常找到合适的驱动程序。
浏览 3提问于2015-09-24得票数 3
1回答
作为一个启动项目，我已经构建了一个PHP应用程序原型，其背后有一个MySQL数据库，但现在整个过程都需要重写。我认为MySQL关系数据库可以在一段时间内完成这项工作，但我希望为有来自世界各地的许多用户需要快速访问他们的数据的时候做好准备。现在我得到的只是一个数字海洋的VPS，它运行PHP和MySQL，它很好地服务于我的70个测试用户。
但如果我的人数开始增加呢？我应该从一开始就考虑使用Hadoop，这样我以后就不会有那么多问题了吗？我应该如何为将来必须扩展的东西做好准备？
浏览 2提问于2015-02-03得票数 1
我正在学习Hadoop和Hive服务器，我对一些事情感到困惑。假设我用三台机器构建了hadoop集群，然后开始用PHP/MySQL脚本存储图像。现在，对于一个MySQL数据库，我可以在同一个Hadoop服务器上安装Hive，还是必须构建另一个Hadoop服务器来使用Hive存储MySQL数据库。是否需要分离Hadoop文件服务器和Hadoop数据库服务器？或者您可以将所有内容存储在同一个Hadoop
浏览 0提问于2015-06-03得票数 0
1回答
免责声明:我是Hadoop和Hive的新手。在这种情况下，我可以结合使用Hive和Hadoop来查询数据库和检索数据吗？我的意图是使用配置单元作为MySQL集群的顶层，并使用它对MySQL
浏览 0提问于2012-05-29得票数 1
回答已采纳
1回答
我正在尝试将一个表"employee“从MySQL(安装在我的笔记本上)导入到HDFS(也安装在我的笔记本上的VM上)授予所有特权。at com.mysql.jdbc.MysqlIO.org.apache.sqoop.tool.ImportTool.run(ImportTool.java:502) at org.apache.hadoop.util.Tool
浏览 0提问于2015-09-15得票数 0
回答已采纳
1回答
目前，我正试图找到一个(很好的)解决方案，说明如何将外部MySql数据库中的数据同步，该数据库与任何AWS完全分离为AWS DynamoDb。ERM ()
AWS似乎是要走的路，但似乎Hive脚本无法与外部MySql数据库通信？还是我搞错了？我发现很难找到任何可用的Hive脚本示例。
浏览 3提问于2016-08-24得票数 1
我设置了一个星星之纱集群环境，并尝试了使用shell的星火SQL：值得一提的是，Spark在Windows 7中。= sqlContext.read.format("jdbc").option("url", "j
浏览 5提问于2017-10-18得票数 0
回答已采纳
是否可以从没有安装hadoop(HDFS)或Sqoop的节点导出数据到Hive服务器？我会从一个源(可能是Mysql或某个目录中的文件)读取数据，然后使用Hadoop核心类或类似于Sqoop的东西将数据导出到Hadoop集群中。我正在用Java编程。
浏览 2提问于2014-10-01得票数 0
回答已采纳
我有一个ruby on rails应用程序。我有在应用程序中实现建议的想法。我是通过stackoverflow了解到的。现在，如果我必须使用Mahout，我必须做的事情是什么。由于它是一个Java库，我不清楚如何在Ruby on Rails应用程序中使用它。我有几个Java认证，所以用Java编码不是问题。我也有在Heroku中托管应用程序的想法，这会是一个问题吗？
浏览 0提问于2010-07-11得票数 5
我正在使用共享节点集群。请在HDFS和MySQL之间共享要加载的所有兼容版本的MySql jar文件的名称，以及用于成功导入和导出的所有路径文件夹。我目前正在收到下面的错误消息
错误sqoop.Sqoop:获得异常运行Sqoop: java.lang.RuntimeException:未能加载db驱动程序类: com.mysql.jdbc.Driver到目前为止，我已经在/usr/lib/sqoop/lib中加载了<em
浏览 1提问于2015-04-29得票数 0
回答已采纳
2回答
我想知道将整个套件转换为Hadoop会花费多少工作成本？下面是一些问题，可以帮助我掌握它。这里也有一些Ajax，这与SQL和Hadoop有什么不同？
在解释与Hadoop有关的任何事情时，请考虑我是初学者。
浏览 3提问于2014-03-27得票数 2
回答已采纳
我已经构建了一个多节点hadoop集群，然后我开始研究mesos和在mesos集群上运行hadoop的能力，所以我的问题是：
1) Should I run hadoop on mesos cluster
浏览 0提问于2015-09-12得票数 0
我们有1TB大小的mysql数据库。如果我们执行任何带有多个连接的复杂查询，那么系统将花费大量时间来执行。有人建议，bigdata Hadoop可以解决这个性能问题。您能解释一下如何使用Hadoop集群来实现这一点吗?我需要使用哪些概念，即Apache Hadoop、Sqoop、Spark、Hive？
浏览 2提问于2016-03-02得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
对象存储
即时通信 IM活动推荐
腾讯云开发者
