是否存在用于Hadoop应用程序的包装器?我指的是将Hadoop设置转换为独立应用程序的包装器。我知道这会违背Hadoop的目的。然而,这将极大地帮助开发Hadoop应用程序。
我知道Hadoop Netbeans插件允许创建一个本地的应用内Hadoop环境。然而,我正在寻找一个应用程序,您可以让它代理您的Hadoop应用程序在单个应用程序环境中。
发布于 2011-03-14 12:08:25
您所需要的只是CLASSPATH中的Hadoop,默认情况下它将以本地模式运行。
发布于 2011-03-14 09:11:55
apache hadoop wiki上有一个用于调试map reduce程序的条目。这可能是你问题的答案
http://wiki.apache.org/hadoop/HowToDebugMapReducePrograms
cloudera也有一篇关于如何将hadoop作为单元测试http://www.cloudera.com/blog/2008/12/testing-hadoop/运行的博客
因此,您可以将环境配置为以单元测试的形式执行map reduce程序,以查看发生了什么情况
发布于 2011-03-14 14:45:40
在单个节点上从tar.gz文件安装Hadoop默认为在本地主机上运行所有内容。格式化hdfs (hadoop namenode -format),然后使用start-all.sh就可以了。
https://stackoverflow.com/questions/5292989
复制相似问题