Zookeeper是Hadoop架构的大管家，管着大数据动物园里的大象、蜜蜂、猪等等一圈儿动物们，辛苦了w 第一门课也快结束了，等所有实验都做完的时候画个关系图试试，看跟教程里一样不一样~ 下载安装zookeeper-3.4.6 123sudo wget http://mirrors.hust.edu.cn/apache/zookeeper/stable/zookeeper-3.4.6.tar.g […]

sqoop是SQL to Hadoop的简称，按照字面理解就是一个传统数据库与hadoop之间迁移数据的工具，配置起来跟掐面的大同小异，希望以后处理数据的时候树莓派的小身板能撑住w如果不行就再买一台协同作业好了（啥   0、运行环境 操作系统：Linux raspberrypi 4.1.7+ 安装位置:/mnt/study Hadoop版本：1.0.4 mySQL版本：5.5.46 JD […]

抽空装了一下w   1、下载安装apache flume 12345sudo wget http://mirror.bit.edu.cn/apache/flume/1.6.0/apache-flume-1.6.0-bin.tar.gz sudo tar -zxvf apache-flume-1.6.0-bin.tar.gz sudo mv apache-flume-1.6.0-bin f […]

按照目前的理解，pig打包了一系列的mapreduce算法，用来处理非结构化的数据。 1、下载安装pig-0.15.0 12345sudo wget http://apache.opencas.org/pig/pig-0.15.0/pig-0.15.0.tar.gz sudo tar -zxvf pig-0.15.0.tar.gz sudo mv pig-0.15.0 pig 修改环境变量文件 1 […]

还要指定NameNode，在hadoop根目录下创建一个NameNode文件夹tmp，并设定权限 123sudo mkdir tmp sudo chmod -R a+w tmp 修改配置文件 1sudo nano conf/core-site.xml 将value改为系统中存在的文件夹 12hadoop.tmp.dir /mnt/study/hadoop/tmp 接下来格式化 1hadoop na […]

虽然安装成功了，但已经出现很多问题了，大概不久就会遇到。网易云课堂应该把大数据基础的“基础”两个字去掉，换成“自学”，课程跟实验没啥关系，老师对实验上各种工具配置安装的作用几乎为0，又没有给出专门的安装配置调试教程，全靠自己摸索。既然这样倒是把版本设定的新一些啊，旧版连官网都没资料了。这钱赚的也太容易了好吗。 0、运行环境 操作系统：Linux raspberrypi 4.1.7+ 安装位置:/m […]

推了两次都没推出去，树莓派是不想以作业作为新年第一篇吗w 0、运行环境 操作系统：Linux raspberrypi 4.1.7+ 数据库:mysql 在mysql创建的Hive数据库名：hive Hive用户名：hive Hadoop、Hive安装位置:/mnt/study 1、安装JDK7 sudo apt-get install oracle-java7-jdk 配置系统变量 sudo na […]