终于配好Hadoop

el/2024/4/13 13:49:00

经过5天的奋战,终于在两个节点的虚拟机上配好了Hadoop分布式环境,mark一下。

主要是由于自己技术底子不好,以前没用过Linux,也不搞开发,家里电脑出问题了一般都是老公出面搞定的,哎……

接下来是更为艰巨的,算法并行化设计,以及分布式环境下的程序调试。

对于技术盲大妈来说,真的是伤不起啊。


http://www.ngui.cc/el/4999770.html

相关文章

Hadoop虚拟集群的搭建

主要参考: 1. http://blog.csdn.net/bluetropic/article/details/9335675 2. http://blog.csdn.net/hguisu/article/details/7237395一、环境介绍:2个节点的虚拟机VMware,Ubuntu12.04二、修改机器名 sudo vi /etc/hostname 节点1设置为&#…

Hadoop操作HDFS命令

转载自:http://www.juziku.com/sunlightcs/wiki/6017.htm hadoop fs 查看Hadoop HDFS支持的所有命令 hadoop fs –ls 列出目录及文件信息 hadoop fs –lsr 循环列出目录、子目录及文件信息 hadoop fs –put test.txt /user/sunlightcs 将本地文件系统的…

hadoop 创建用户及hdfs权限,hdfs操作等常用shell命令

添加一个hadoop组sudo addgroup hadoop 将当前用户larry加入到hadoop组 sudo usermod -a -G hadoop larry 将hadoop组加入到sudoer sudo gedit etc/sudoers 在root ALL(ALL) ALL后 hadoop ALL(ALL) ALL 修改hadoop目录的权限 sudo chown -R larry:hadoop /home/larry/hadoop…

linux的chmod命令使用详解

在Unix和Linux的各种操作系统下,每个文件(文件夹也被看作是文件)都按读、写、运行设定权限。 例如我用ls -l命令列文件表时,得到如下输出: -rw-r--r-- 1 bu users 2254 2006-05-20 13:47 tt.htm 从第二个字符起rw-是说用户bu有读、…

Shell脚本编写教程

 建立一个脚本 Linux中有好多中不同的shell,但是通常我们使用bash (bourne again shell) 进行shell编程,因为bash是免费的并且很容易使用。所以在本文中笔者所提供的脚本都是使用bash(但是在大多数情况下&#xff0c…

win 7 home版R package打包、发布、安装

 首先,当然需要安装好R(假设安装目录为C:\Program Files\R\R-3.0.2)和Rtools(假设安装目录为C:\Rtools)。如果需要生成pdf文档,还需安装一个TeX工具(MikTex或CTeX&…

美国公开课网址

 耶鲁大学公开课程:http://oyc.yale.edu/ 麻省理工大学公开课程:http://ocw.mit.edu/ 斯坦福大学公开课程:http://itunes.stanford.edu/ 加州大学伯克利分校公开课程:http://webcast.berkeley.edu/cou…

Linux Mint下中文输入法的配置

1. 直接执行:sudo apt-get install ibus (可选) sudo apt-get install ibus-pinyin ibus-pinyin-db-android 2. 到 “控制中心>language support语言支持” 里面,把“键盘输入方式系统“设置为”ibus”。 3. 在“添加或删除语言”里面&#xff0c…

linux上安装QQ(QQ版本太低已不支持)

1.通过软件管理中心,或在终端安装(假设版本为1.5)安装wine。 sudo add-apt-repository ppa:ubuntu-wine/ppasudo apt-get updatesudo apt-get install wine1.5sudo apt-get install winetricks 或者 在64位的Ubuntu上,安装ia32-l…

Linux上安装R

1.修改源列表文件:sudo vi /etc/apt/sources.list 在该文件中添加:deb http://cran.stat.upd.edu.ph/bin/linux/ubuntu precise/