当前位置:   article > 正文

Flink 1.14.2 离线安装_flink离线安装包

flink离线安装包

1.安装前准备

1.1安装hadoop

Hadoop 3.3.2 离线安装_shangjg3的博客-CSDN博客

1.2配置环境变量

  1. # flink
  2. export FLINK_HOME=/data/cmpt/flink-1.14.2
  3. export PATH=$PATH:$FLINK_HOME/bin

1.3在HDFS上创建 flink目录

  1. hdfs dfs -mkdir -p /flink/flink-checkpoints/
  2. hdfs dfs -mkdir -p /flink/flink-savepoints/
  3. hdfs dfs -mkdir -p /flink/completed-jobs/
  4. hdfs dfs -mkdir -p /flink/completed-jobs/

2. 安装

2.1下载并解压编译好的tar包

tar -zxvf flink-1.14.2-bin-scala_2.12.tgz 

修改flink-conf.yaml配置

  1. jobmanager.rpc.address: master
  2. jobmanager.rpc.port: 6123
  3. jobmanager.memory.process.size1600m
  4. taskmanager.memory.process.size1728m
  5. taskmanager.numberOfTaskSlots: 3
  6. parallelism.default1
  7. state.backend: filesystem
  8. state.checkpoints.dir: hdfs://master:8020/flink/flink-checkpoints
  9. state.savepoints.dir: hdfs://master:8020/flink/flink-savepoints
  10. jobmanager.execution.failover-strategy: region
  11. jobmanager.archive.fs.dir: hdfs://master:8020/flink/completed-jobs/
  12. historyserver.archive.fs.dir: hdfs://master:8020/flink/completed-jobs/
  13. classloader.check-leaked-classloader: false
  14. rest.port: 8082
  15. rest.address0.0.0.0
  16. rest.bind-port: 8080-8090
  17. rest.bind-address: 0.0.0.0

2.2启动和关闭

  1. ./bin/start-cluster.sh # 启动
  2. ./bin/stop-cluster.sh # 关闭

2.3查看信息

http://10.16.60.62:8082/

3.测试和使用

3.1 测试案例

flink run /data/cmpt/flink-1.14.2/examples/streaming/TopSpeedWindowing.jar

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/笔触狂放9/article/detail/548792
推荐阅读
相关标签
  

闽ICP备14008679号