Hadoop运行在Kubernetes平台实践

对应的Pod界说如下：

apiVersion: v1 
kind: Pod 
metadata: 
name: yarn-master 
labels: 
app: yarn-master 
spec: 
containers: 
- name: yarn-master 
  image: kubeguide/hadoop 
  imagePullPolicy: IfNotPresent 
  ports: 
    - containerPort: 9000 
    - containerPort: 50070     
  env: 
    - name: HADOOP_NODE_TYPE 
      value: resourceman 
    - name: HDFS_MASTER_SERVICE 
      valueFrom: 
        configMapKeyRef: 
          name: ku8-hadoop-conf 
          key: HDFS_MASTER_SERVICE 
    - name: HDOOP_YARN_MASTER 
      valueFrom: 
        configMapKeyRef: 
          name: ku8-hadoop-conf 
          key: HDOOP_YARN_MASTER           
restartPolicy: Always 

今朝这个方案，还遗留了一个题目有待办理：HDFS NameNode节点重启后的文件体系名目化题目，这个题目可以通过启动脚原来办理，即判定HDFS文件体系是否已经名目化过，假如没有，就启动时辰执行名目化呼吁，不然跳过名目化呼吁。

安装完毕后，我们可以通过赏识器会见Hadoop的HDFS打点界面，点击主页上的Overview页签会表现我们认识的HDFS界面：

切换到Datanodes页签，可以看到每个Datanodes的的信息以及当前状态：

接下来，我们可以登录到NameNode地址的Pod里并执行HDSF呼吁举办成果性验证，下面的呼吁执行功效是成立一个HDFS目次，而且上传一个文件到此目次中：

root@hadoop-master:/usr/local/hadoop/bin# hadoop fs -ls  / 
root@hadoop-master:/usr/local/hadoop/bin# hadoop fs -mkdir /leader-us 
root@hadoop-master:/usr/local/hadoop/bin# hadoop fs -ls / 
Found 1 items 
drwxr-xr-x   - root supergroup          0 2017-02-17 07:32 /leader-us 
root@hadoop-master:/usr/local/hadoop/bin# hadoop fs -put hdfs.cmd /leader-us 

然后，我们可以在HDFS打点界面中赏识HDFS文件体系，验证适才的操纵功效：

（编辑：湖南网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!