如何高效运用Hadoop进行数据处理？

本文共计563个文字，预计阅读时间需要3分钟。

首语：编程笔记

篇首语：本文由编程笔记#自由互联小编为大家整理，主要介绍了Hadoop的简单使用相关的知识，希望对你有一定的参考价值。H

篇首语：本文由编程笔记#自由互联小编为大家整理，主要介绍了Hadoop的简单使用相关的知识，希望对你有一定的参考价值。

Hadoop的简单使用

使用Hadoop提供的命令行，向文件系统中创建一个文件。

./hadoop fs -put temp.txt hdfs://localhost:8888/

说明：

./hadoop 是bin目录下

fs 表明对文件系统进行操作

-put 就是传输

temp.txt 是我要传输的文件

hdfs://localhost:8888 是hdfs的入口

检测是否成功上传:

localhost:50070

然后点击browse the filesystem

可以看到：

一个简单的MapReduce任务

任务说明: 使用Hadoop自动的一个案例，来统计多个文件的的各个单词出现的次数。

步骤如下:

通过ssh上传一些文件。为了方便，我们最好上传文本文件。