# HadoopLab **Repository Path**: sifangcloud/HadoopLab ## Basic Information - **Project Name**: HadoopLab - **Description**: Hadoop实验室 - **Primary Language**: Unknown - **License**: Apache-2.0 - **Default Branch**: master - **Homepage**: None - **GVP Project**: No ## Statistics - **Stars**: 2 - **Forks**: 1 - **Created**: 2020-03-14 - **Last Updated**: 2021-08-10 ## Categories & Tags **Categories**: Uncategorized **Tags**: None ## README # 搭建大数据系统 环境 | 版本 ----- | ----- jdk | open-jdk-1.8.0_181-b13 Hadoop | 2.7.7 HBase | 2.0.2 Spark | 1.5.2 服务器 | 服务角色 | 服务组件 ----- | ----- | ----- 节点1 | Hadoop master , Hadoop slave
HBase master
Spark master, Spark worker| NameNode , DataNode , SecondaryNameNode , NodeManager , ResourceManager 节点2 | Hadoop slave
HBase RegionServer
Spark worker | DataNode , NodeManager ![hadoop_arch.png](./pics/hadoop_arch.png) # 1. Hadoop 1. [Hadoop 自动部署搭建](./hadoop_auto/) # 2. HBase 1. [HBase 系统 自动部署搭建](./hbase/) # 3. Spark 1. [Spark 系统 部署搭建](./spark/) ---------------------------------------- **项目规范** 本文使用 [`Markdown`](https://www.markdownguide.org/basic-syntax) 编写, 排版符合[`中文技术文档写作规范`](https://github.com/hbulpf/document-style-guide)。Find Me On [**Github**](https://github.com/hbulpf/HadoopLab) , [**Gitee**](https://gitee.com/sifangcloud/HadoopLab) **友情贡献** @[**RunAtWorld**](http://www.github.com/RunAtWorld)   @[**Clock966**](http://www.github.com/Clock966) ##### 如果觉得还不错,关注公众号获取更多优质文章 ~ ![微信搜一搜 四方云和](https://images.gitee.com/uploads/images/2020/0417/221550_0f813ab6_927522.jpeg) ##### 微信搜一搜:四方云和