1回答
我需要在spring云数据流中运行mapreduce spring引导应用程序。通常，在scdf中注册的应用程序是使用"java -jar jar-name“命令执行的。但是我的程序是一个mapreduce，它必须使用"hadoop jar jar-name“来执行。我该如何实现这一点？在scdf中运
浏览 16提问于2019-01-18得票数 1
回答已采纳
我在SCDF中注册了一个spring云任务应用程序。任务名称和定义在TASK_DEFINITIONS表中显示正确。虽然任务正在执行，但由于名称不匹配，我在UI中查看任务执行状态时会遇到问题。这可能是什么原因呢？使用的版本: Spring cloud local server - 1.7.3 Spring boot - 2.0.4 Spring cloud starter task - 2.0.0
该应用程序是一个<e
浏览 0提问于2019-01-25得票数 0
我确实有来自mvn dependency:tree -Ddetail=true的输出
据我所知，Spring应用程序本身运行良好，但在作为Oozie Java操作执行时不会运行。我们怀疑Oozie添加到类路径中的一些依赖项与Spring中的依赖项存在冲突。这有点推测，但我想运行一个简单的Oozie Java操作，它捕获添加到类路径中的所有依赖项的组、工件和版本，并将其与Spring应用程序中的依赖树进行比较。我认为，
浏览 2提问于2017-01-20得票数 3
回答已采纳
我想使用hadoop流方法在中运行python映射减少作业。我的地图减少python脚本、输入文件和作业结果输出都位于中。我试着运行这个命令
hadoop jar /usr/lib/hadoop-mapreduce/hadoop-streaming.jar -file gs://bucket-name/intro_to_mapreduce/intro_to
浏览 1提问于2017-12-28得票数 2
回答已采纳
2回答
是否必须始终编写客户端和ApplicationMaster类才能运行自己的代码？例如，如果我想运行一个只生成随机数的应用程序，我是否必须将这些类包含到我的代码中，或者它可以不使用这些类来运行它？
浏览 0提问于2014-07-15得票数 3
回答已采纳
我在Yarn上运行Spring Cloud任务，简单的任务运行得很好，但是运行更大的任务需要更多的资源，我得到了"Container is running but memory“错误：
onContainerCompletedcities-job-0.0.1.jar --spring.datasource.driverClassName=org.h2.Driver --spring.datasource.username=cities-job
浏览 20提问于2017-01-31得票数 0
回答已采纳
因此，我创建了一个jar来执行单词计数--其中一个是。我的问题是:我不可能在我的Hortonworks沙箱中执行.jar。每次我得到错误：
将
浏览 3提问于2016-05-04得票数 0
1回答
通常，我们会在其中一台机器上运行spring云数据流的Jar，但是如果在这段时间内我们在机器上创建了许多流，服务器就会超载，变成一个单一的故障点，那么我们是否可以在另一台机器上运行spring云数据流服务器jar，并将流转移到它上，这样我们就可以避免任何这样的故障，并使整个系统更加灵活和健壮。或者，当我们在PCF/或云铸造厂上部署完整的
浏览 5提问于2017-10-17得票数 4
回答已采纳
我安装了hadoop 2.2.0，并尝试运行示例字数统计程序。为此，首先我使用以下命令将数据导入到hdfs：之后，我尝试使用以下命令运行word count jar文件：
root@prassanna-Studio-1558:/usr/local/hadoop# bin/hadoop
浏览 2提问于2014-03-12得票数 2
1回答
MapReduce工作流基准测试
、、、、
任何机构都可以通过任何基准来测试MapReduce工作流吗？或者一般情况下，BigData工作流基准测试一些工作流系统的性能和准确性，如Oozie？
谢谢
浏览 3提问于2014-04-09得票数 0
我正在尝试在Spring cloud数据流中注册spring bath项目jar文件。我对spring云数据流还是个新手。请帮助我一步一步地在Spring云数据流中注册spring batch Job。
浏览 14提问于2018-01-03得票数 0
我正在尝试将我的本地spring云任务jar文件注册到spring云任务数据流图形界面中。当注册应用程序时，本地路径没有被识别，并且没有启用Registry按钮。我的jar文件位置是C:\STS-WORK_SPACE\SPRING-BATCH\SCDFBatch\target\SCDFBatch-0.0.1-SNAPSHOT.jar，我在仪表板中提供的路径是file://
浏览 1提问于2018-01-04得票数 5
我需要运行的任务是处理我的google云sql中的所有数据，并将文件从blobstore复制到google云存储。我正在考虑使用任务队列，但它有10分钟的时间限制，但我的任务必须比这更长。我不确定是否可以使用mapreduce，因为我不需要并行运行，而且我还没有找到任何mapreduce对云sql的支持。那么，在应用程序引擎上进行这种数据处理的建议方法是什么，尤其是对于云sql？
浏览 0提问于2014-02-23得票数 0
4回答
我正在做一个项目，我们正在使用Spring-Boot，STS。我只需右击main启动项目，然后作为spring boot app运行，它就会简单地运行。现在我被要求在其他机器上运行它，比如亚马逊EC2实例。在普通的spring项目中，我通常做的是，创建一个war文件，放在tomcat->webapps文件夹中，然后从bin启动它。在使用嵌入式tomcat的情况下，我如何在没有tomcat的情况下运行我的应用。我
浏览 0提问于2017-05-22得票数 4
我尝试运行示例字数统计程序，我的hdfs文件保存在/input中，输出目录为/output，下面是我执行的命令：
[hadoop-2.2.0]$ bin/hadoop jar $HADOOP_HOME/share/hadoop/mapreduce/sources/hadoop-mapreduce-examples-2.2.0-sources.jar org.apache.hadoop.examples.Wor
浏览 0提问于2013-11-17得票数 1
我提交了一个oozie工作流，这是一个外壳操作，它调用spark-submit来运行一个jar文件的Spring boot应用程序。它在客户端模式下运行在纱线上。然而，我发现所有Spring日志都在yarn中的oozie mapreduce作业中，而不是Spark作业本身中。我不明白为什么？
浏览 41提问于2021-08-25得票数 0
回答已采纳
我希望jar文件能够运行与示例和测试jar相关的hadoop作业。在过去，他们在/usr/lib/hadoop之下，但显然不再是。指针很感激。
Note：这个问题最初是针对CDH4.2的。
浏览 12提问于2013-05-01得票数 7
回答已采纳
当运行Hadoop字数示例时，它第一次失败。：hadoop jar $HADOOP_HOME/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.2.jar wordcount input output(假设输入文件夹已经在HDFS中了，我不会把所有的命令放在这里)16/07/17 01:04:34 INFO client.RMProxy: Connecting t
浏览 6提问于2016-07-16得票数 0
1回答
我正在运行一个示例mapreduce程序(Wordcount)来查询cassandra数据。on each task tracker“中。但是当我构建jar文件时，我得到如下所示的错误。
。。。如何构建jar文件，使其可以在cassandra数据上运行？如何给mapreduce程序提供cassandra数据的路径？通常，对于HDFS数据处理，我们给出类
浏览 0提问于2013-12-07得票数 0
我正在开发春云数据流应用程序。我能够在本地运行Spring云数据流服务器，并通过以下配置在cloud中运行server。现在，我试图在kubernetes集群中运行的船长也是如此。/target/scdf-server-1.0.0-SNAPSHOT.jar - java_
浏览 4提问于2019-10-29得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
腾讯会议
云直播
对象存储活动推荐
腾讯云开发者
