网上搜了一些中文的,总是只有一小部分,对于我们这些菜鸟来说,根本没发用,更可恶的是,搜到的内容都是一样的,哎,抄来抄去,估计都没试过到底能不能用就贴上去了。
后来找了一个英文的:http://ebiquity.umbc.edu/Tutorials/Hadoop/00%20-%20Intro.html 非常的全面,一步一步的教,我这翻译一下大致的步骤。
一,准备
Java 1.6
Eclipse Europa 3.3.2
hadoop-0.19.2
Java一定要1.6,Eclipse好像不能用3.4以上,hadoop用0.19.2,原文用0.19.1,现在没的下了。0.20.0不能用,我试过了,没法启动Job Tracker,不知道原因,可能是bug也不定。
二,安装Cygwin
先去下载一个安装文件
,完后运行,这只是一个引导的程序,真正的程序要通过它下载才能安装,当要选择下载站点时,输入:http://www.cygwin.cn 然后就可以选择要安装的程序,默认的时候没有安装OpenSSH,所以要手动选择,在Net类别下,选上OpenSSH和OpenSSL两项。
之后,设置环境变量,把
c:/cygwin/bin;c:/cygwin/usr/bin
加入到系统环境变量的Path中。
三,配置SSH
1.打开一个cygwin,输入
ssh-host-config
当询问if privilege separation should be used 时输入 no
.
当询问if sshd should be installed as a service 时输入yes
.
当询问about the value of CYGWIN environment variable enter
时输入 ntsec
.
2.打开 控制面板-》管理-》服务 启动名为 CYGWIN sshd 的那项。
3.打开cygwin,输入
ssh-keygen
当询问要filenames 和 pass phrases 的时候都自己点回车,接受默认的值.命令结束后输入 cd ~/.ssh转到.ssh目录,输入 ls -l应该包含两个文件:id_rsa.pub
和 id_rsa
4.在第三步的窗口(当前目录在.ssh)中输入
cat id_rsa.pub >> authorized_keys
完成后输入
ssh localhost
检查ssh是否配置成功,当提示whether you really want to connect时,输入yes。 这样以后再输入ssh localhost的时候都不会再有提示了。
准备工作完了,下篇继续。
分享到:
相关推荐
基于Eclipse的Hadoop应用开发环境配置
windows下搭建hadoop开发环境(Eclipse)
基于Eclipse的Hadoop应用开发环境的配置,叫你一步步的配置一个属于自己的Hadoop环境。
成功在windows的eclipse连接hadoop 具体步骤如下: 1.使用对应版本的Hadoop jar包 2.错误:winutils.exe not found 解压hadoop-common-2.2.0-bin-master.zip和hadoop_dll2.6.0.7z 。因为是Hadoop2.6环境,所以后者...
附件包含eclipse在window7配置hadoop2.7.x 开发环境需要的jar、dll。具体安装步骤可以参考:https://blog.csdn.net/wudichengyaojin/article/details/64440655 可能遇到的问题参考: ...
Eclipse Hadoop 开发环境配置
目的很简单,为进行研究与学习,部署一个hadoop运行环境,并搭建一个hadoop开发与测试环境。 具体目标是: 1.在ubuntu系统上部署hadoop 2.在windows 上能够使用eclipse连接ubuntu系统上部署的hadoop进行开发与测试 3...
Hadoop Eclipse是Hadoop开发环境的插件,用户在创建Hadoop程序时,Eclipse插件会自动导入Hadoop编程接口的jar文件,这样用户就可以在Eclipse插件的图形界面中进行编码、调试和运行Hadop程序,也能通过Eclipse插件...
基于Eclipse的Hadoop应用开发环境的配置,详细地实践了再eclipse平台上进行hadoop开源的云开发...
windows环境下的hadoop3.1.0依赖,winutils
hadoop环境搭建和eclipse开发
用于windows下eclipse连接hadoop2.2.0的插件以及eclipse版本,亲测可用
在 Windows 平台下部署 Hadoop 开发环境 hadoop eclipse windows sshd
windows下通过eclipse直接访问hdfs或者调试mapreduce程序需要用到的完整环境
Hadoop-Eclipse开发环境配置是搭建完hadoop环境后,进行代码编写必要的环境,
windows上建立hadoop+eclipse开发环境
Hadoop在eclipse上面安装插件,以及对Hadoop jar包和hadoop-common jar包的安装,环境变量的配置
eclipse hadoop例子源代码 eclipse hadoop例子源代码
适用用hadoop2 ,eclipse 集成插件。!可用在eclipse 开发hadoop程序