文斌的专栏-腾讯云开发者社区

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

文斌的专栏

专栏成员

6

文章

24491

阅读量

9

订阅数

大数据学习之路05——Hadoop原理与架构解析

hadoop mapreduce yarn node.js 大数据

Hadoop 是 Apache 开源组织的一个分布式计算开源框架，是一个可以更容易开发和运行处理大规模数据的解决方案，它提供了一套分布式系统基础架构，允许使用简单的编程模型跨大型计算机的大型数据集进行分布式处理。

2019-05-24

8.3K0

大数据学习之路04——使用IDEA开发MapReduce程序

hadoop jar 打包 maven mapreduce

这里以Hadoop的官方示例程序WordCount为例，演示如何一步步编写程序直到运行。

2019-05-24

2.3K0

大数据学习之路03——Hadoop常用命令详解

大数据 hadoop http

从键盘读取输入到hdfs file中，按Ctrl+D（Control+D）结束输入。hdfs file不能存在，否则命令不会执行

2019-05-22

1.7K0

大数据学习之路02——第一个MapReduce程序

yarn node.js mapreduce hadoop 面向对象编程

单词计数是最简单也是最能体现 MapReduce 思想的程序之一，可以称为 MapReduce 版“Hello World”。

2019-05-17

8830

大数据学习之路01——让Hadoop在MacOS上跑起来

hadoop 大数据 mac os jdk xml

解决方案：重新编译hadoop，将编译后的hadoop-dist/target/hadoop-2.8.4/lib/native替换$HADOOP_HOME/lib/native。

2019-05-16

3K0

iTerm2快速SSH连接并保存密码

ssh 命令行工具

Mac自带terminal，以及比较好用的iTerm2命令行工具，都缺乏一个功能，就是远程SSH连接，无法保存密码。

2019-05-13

8.4K0

没有更多了

社区活动

Python精品学习库

代码在线跑，知识轻松学

博客搬家 | 分享价值百万资源包

自行/邀约他人一键搬运博客，速成社区影响力并领取好礼

技术创作特训营·精选知识专栏

往期视频·干货材料·成员作品最新动态