当前位置:   article > 正文

FlinkV1.10安装和Standalong部署_下载安装hadoop 和 flink1.10

下载安装hadoop 和 flink1.10

一.安装Flink

Flink的运行需要Java环境的支持,因此,在安装Flink之前,请先参照相关资料安装Java环境(比如Java8)。然后,到Flink官网(https://flink.apache.org/downloads.html)下载安装包,比如下载得到的安装文件为flink-1.10.0-bin-scala_2.11

cd /mnt/e/download
sudo tar -zxvf flink-1.9.1-bin-scala_2.11.tgz -C /usr/local
  • 1
  • 2

修改目录名称,并设置权限,命令如下:

cd /usr/local
sudo mv ./flink-1.9.1 ./flink
sudo chown -R hadoop:hadoop ./flink
  • 1
  • 2

为方便执行,配置环境变量:

vim ~/.bashrc

    加上环境配置

    export FLNK_HOME=/usr/local/flink
    export PATH=$FLINK_HOME/bin:$PATH
    • 1

    是环境配置生效:

    source ~/.bashrc

      在这里插入图片描述

      启动Flink:

      cd /usr/local/flink
      ./bin/start-cluster.sh
      • 1

      JPS查看线程

      在这里插入图片描述

      打开 :http://localhost:8081/#/overview 判断是否成功

      在这里插入图片描述

      运行wordCount案例:

      cd /usr/local/flink/bin
      ./flink run /usr/local/flink/examples/batch/WordCount.jar
      • 1

      在这里插入图片描述
      异常处理:
      如果taskManager日志报部分参数为空:
      可以配置一下几个:

       -     /usr/local/flink/conf
       -     -D
       -     taskmanager.memory.framework.off-heap.size=134217728b
       -     -D
       -     taskmanager.memory.network.max=134217730b
       -     -D
       -     taskmanager.memory.network.min=134217730b
       -     -D
       -     taskmanager.memory.framework.heap.size=134217728b
       -     -D
       -     taskmanager.memory.managed.size=536870920b
       -     -D
       -     taskmanager.cpu.cores=1.0
       -     -D
       -     taskmanager.memory.task.heap.size=402653174b
       -     -D
       -     taskmanager.memory.task.off-heap.size=0b
      • 1
      • 2
      • 3
      • 4
      • 5
      • 6
      • 7
      • 8
      • 9
      • 10
      • 11
      • 12
      • 13
      • 14
      • 15
      • 16

      注意:flink-conf.yaml里面值设置是“:“

      声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/AllinToyou/article/detail/696380
      推荐阅读
      相关标签
        

      闽ICP备14008679号