Browse Source

添加 sqoop

wudla 4 years ago
parent
commit
9c59acba24
3 changed files with 43 additions and 16 deletions
  1. 4 1
      docs/.vuepress/config.js
  2. 38 15
      docs/dw/dw_deploy.md
  3. 1 0
      docs/dw/index.md

+ 4 - 1
docs/.vuepress/config.js

@@ -29,7 +29,10 @@ module.exports = {
                 {
                     title: '数据仓库',
                     collapsable: false,
-                    children: [{ title: '配置计划', path: '/dw/dw_config' }, { title: '搭建部署', path: '/dw/dw_deploy' }]
+                    children: [
+                        { title: '配置计划', path: '/dw/dw_config' },
+                        { title: '搭建部署', path: '/dw/dw_deploy' },
+                        { title: 'sqoop部署及简介', path: '/dw/sqoop'}]
                 }
             ],
             '/report': [

+ 38 - 15
docs/dw/dw_deploy.md

@@ -98,25 +98,35 @@
 
 1. 解压
 
-2. 修改zookeeper中conf下的配置文件zoo.cfg
+2. 创建 /opt/module/zookeeper-3.4.10/zkData 和 /opt/module/zookeeper-3.4.10/logs 目录
 
-   ```shell
-   cp zoo_sample.cfg zoo.cfg
-   ```
+3. 修改配置文件
 
-   ```xml
-   dataDir=/opt/module/zookeeper-3.4.10/zkData
-   ZOO_LOG_DIR=/opt/module/zookeeper-3.4.10/logs
-   
-   ## 在zkData目下创建myid,内容是本机的 serverId;以下配置1、2、3就是 serverId
-   server.1=hadoop01:2888:3888
-   server.2=hadoop02:2888:3888
-   server.3=hadoop03:2888:3888
-   ```
+   1. 在zkData文件下创建myid文件(<font color="red">集群的myid必须不同</font>)
 
-   
+      ```xml
+      1(此数字与zoo.cfg的server.id对应,具体数值可以自定义)
+      ```
+
+      
+
+   2. 修改zookeeper中conf下的配置文件zoo.cfg
+
+      ```shell
+      cp zoo_sample.cfg zoo.cfg
+      ```
 
-3. 创建 /opt/module/zookeeper-3.4.10/zkData 和 /opt/module/zookeeper-3.4.10/logs 目录
+      ```xml
+      在zoo.cfg文件中添加如下配置:
+      
+      dataDir=/opt/module/zookeeper-3.4.10/zkData
+      ZOO_LOG_DIR=/opt/module/zookeeper-3.4.10/logs
+      
+      ## 内容是本机的 serverId(与zkData目下创建的myid对应);以下配置1、2、3就是 serverId
+      server.1=hadoop01:2888:3888
+      server.2=hadoop02:2888:3888
+      server.3=hadoop03:2888:3888
+      ```
 
 # Hadoop集群安装
 
@@ -564,3 +574,16 @@
 
    
 
+## flume安装
+
+1. 解压
+
+2. 修改配置文件
+   将flume / conf下的 flume-env.sh.template 复制为 flume-env.sh
+
+   ```xml
+   export JAVA_HOME=/opt/module/jdk1.8.0_121
+   ```
+
+
+

+ 1 - 0
docs/dw/index.md

@@ -4,5 +4,6 @@
 
 #### [集群配置](/dw/dw_deploy.md)
 
+#### [sqoop部署及简介](/dw/sqoop.md)