当前位置:   article > 正文

CDH下服务的配置文件路径_cdh slave文件在哪

cdh slave文件在哪
1 依赖 CDH 安装的服务
1.1 基础配置文件路径
  1. [root@fan102 lib]# pwd
  2. /opt/cloudera/parcels/CDH/lib
  3. [root@fan102 lib]# ls
  4. avro           hadoop                 hadoop-yarn    impala        oozie    spark
  5. bigtop-tomcat  hadoop-0.20-mapreduce  hbase          impala-shell  parquet  sqoop
  6. bigtop-utils   hadoop-hdfs            hbase-solr     kite          pig      sqoop2
  7. crunch         hadoop-httpfs          hive           kudu          search   whirr
  8. debug          hadoop-kms             hive-hcatalog  llama         sentry   zookeeper
  9. flume-ng       hadoop-mapreduce       hue            mahout        solr     zookeeper-native

1.2 配置文件路径依赖关系(以hadoop的配置文件为例,其他通过CDH安装的组件也类似在基础路径(/opt/cloudera/parcels/CDH/lib)下找对应服务的配置文件即可)

 
1.3 命令依据
  1. [root@fan102 ~]# ll /opt/cloudera/parcels/
  2. total 0
  3. lrwxrwxrwx  1 root root  27 Jul 24 17:50 CDH -> CDH-5.16.2-1.cdh5.16.2.p0.8
  4. [root@fan102 ~]# ll /opt/cloudera/parcels/CDH/lib/hadoop/etc/
  5. total 0
  6. lrwxrwxrwx 1 root root 16 Jun  3  2019 hadoop -> /etc/hadoop/conf
  7. [root@fan102 ~]# ll /etc/hadoop/conf
  8. lrwxrwxrwx 1 root root 29 Jul 24 17:50 /etc/hadoop/conf -> /etc/alternatives/hadoop-conf
  9. [root@fan102 ~]# ll /etc/alternatives/hadoop-conf
  10. lrwxrwxrwx 1 root root 30 Jul 24 17:50 /etc/alternatives/hadoop-conf -> /etc/hadoop/conf.cloudera.yarn
  11. [root@fan102 ~]# ll /etc/hadoop/conf.cloudera.yarn
  12. total 48
  13. -rw-r--r-- 1 root root     21 Jun 19 15:43 __cloudera_generation__
  14. -rw-r--r-- 1 root root     66 Jun 19 15:43 __cloudera_metadata__
  15. -rw-r--r-- 1 root root   3851 Jun 19 15:43 core-site.xml
  16. -rw-r--r-- 1 root root    617 Jun 19 15:43 hadoop-env.sh
  17. -rw-r--r-- 1 root root   3659 Jun 19 15:43 hdfs-site.xml
  18. -rw-r--r-- 1 root root    314 Jun 19 15:43 log4j.properties
  19. -rw-r--r-- 1 root root   5193 Jun 19 15:43 mapred-site.xml
  20. -rw-r--r-- 1 root root    315 Jun 19 15:43 ssl-client.xml
  21. -rw-r--r-- 1 root hadoop  356 Jul 24 18:56 topology.map
  22. -rwxr-xr-x 1 root hadoop 1594 Jul 24 18:56 topology.py
  23. -rw-r--r-- 1 root root   3650 Jul 17 13:39 yarn-site.xml

1.4 注意 使用 ll 命令时,如果非软连接文件,显示文件内容如果是软连接文件,会显示软连接关系但末尾有 / 时,显示文件内容

[root@fan102 ~]# ll /opt/cloudera/parcels/CDH/lib/hadoop/etc/hadoop
l
rwxrwxrwx 1 root root 16 Jun  3  2019 /opt/cloudera/parcels/CDH/lib/hadoop/etc/hadoop -> /etc/hadoop/conf
[root@fan102 ~]# ll /opt/cloudera/parcels/CDH/lib/hadoop/etc/hadoop/
  1. total 48
  2. -rw-r--r-- 1 root root     21 Jun 19 15:43 __cloudera_generation__
  3. -rw-r--r-- 1 root root     66 Jun 19 15:43 __cloudera_metadata__
  4. -rw-r--r-- 1 root root   3851 Jun 19 15:43 core-site.xml
  5. -rw-r--r-- 1 root root    617 Jun 19 15:43 hadoop-env.sh
  6. -rw-r--r-- 1 root root   3659 Jun 19 15:43 hdfs-site.xml
  7. -rw-r--r-- 1 root root    314 Jun 19 15:43 log4j.properties
  8. -rw-r--r-- 1 root root   5193 Jun 19 15:43 mapred-site.xml
  9. -rw-r--r-- 1 root root    315 Jun 19 15:43 ssl-client.xml
  10. -rw-r--r-- 1 root hadoop  356 Jul 24 18:56 topology.map
  11. -rwxr-xr-x 1 root hadoop 1594 Jul 24 18:56 topology.py
  12. -rw-r--r-- 1 root root   3650 Jul 17 13:39 yarn-site.xml

[root@fan102 ~]# ll /etc/hadoop/conf.cloudera.yarn

  1. total 48
  2. -rw-r--r-- 1 root root     21 Jun 19 15:43 __cloudera_generation__
  3. -rw-r--r-- 1 root root     66 Jun 19 15:43 __cloudera_metadata__
  4. -rw-r--r-- 1 root root   3851 Jun 19 15:43 core-site.xml
  5. -rw-r--r-- 1 root root    617 Jun 19 15:43 hadoop-env.sh
  6. -rw-r--r-- 1 root root   3659 Jun 19 15:43 hdfs-site.xml
  7. -rw-r--r-- 1 root root    314 Jun 19 15:43 log4j.properties
  8. -rw-r--r-- 1 root root   5193 Jun 19 15:43 mapred-site.xml
  9. -rw-r--r-- 1 root root    315 Jun 19 15:43 ssl-client.xml
  10. -rw-r--r-- 1 root hadoop  356 Jul 24 18:56 topology.map
  11. -rwxr-xr-x 1 root hadoop 1594 Jul 24 18:56 topology.py
  12. -rw-r--r-- 1 root root   3650 Jul 17 13:39 yarn-site.xml

 

 
2 不依赖 CDH 安装的服务
2.1 基础配置文件路基
  1. [root@fan102 parcels]# pwd
  2. /opt/cloudera/parcels

2.2 配置文件路径依赖关系

 
2.3 KAFKA配置文件路径
  1. [root@fan102 ~]# ll /opt/cloudera/parcels/KAFKA/etc/kafka/conf.dist
  2. total 56
  3. -rw-r--r-- 1 root root  906 Jul  3  2019 connect-console-sink.properties
  4. -rw-r--r-- 1 root root  909 Jul  3  2019 connect-console-source.properties
  5. -rw-r--r-- 1 root root 5321 Jul  3  2019 connect-distributed.properties
  6. -rw-r--r-- 1 root root  883 Jul  3  2019 connect-file-sink.properties
  7. -rw-r--r-- 1 root root  881 Jul  3  2019 connect-file-source.properties
  8. -rw-r--r-- 1 root root 1111 Jul  3  2019 connect-log4j.properties
  9. -rw-r--r-- 1 root root 2262 Jul  3  2019 connect-standalone.properties
  10. -rw-r--r-- 1 root root 4727 Jul  3  2019 log4j.properties
  11. -rw-r--r-- 1 root root 6851 Jul  3  2019 server.properties
  12. -rw-r--r-- 1 root root 1032 Jul  3  2019 tools-log4j.properties
  13. -rw-r--r-- 1 root root 1169 Jul  3  2019 trogdor.conf
  14. [root@fan102 ~]# ll /opt/cloudera/parcels/KAFKA/lib/kafka/config
  15. lrwxrwxrwx 1 root root 15 Jul  3  2019 /opt/cloudera/parcels/KAFKA/lib/kafka/config -> /etc/kafka/conf
  16. [root@fan102 ~]# ll /etc/kafka/conf
  17. lrwxrwxrwx 1 root root 28 Jul 24 17:50 /etc/kafka/conf -> /etc/alternatives/kafka-conf
  18. [root@fan102 ~]# ll /etc/alternatives/kafka-conf
  19. lrwxrwxrwx 1 root root 30 Jul 24 17:50 /etc/alternatives/kafka-conf -> /etc/kafka/conf.cloudera.kafka
  20. [root@fan102 ~]# ll /etc/kafka/conf.cloudera.kafka
  21. total 20
  22. -rw-r--r-- 1 root root  21 Jun 18 21:48 __cloudera_generation__
  23. -rw-r--r-- 1 root root 102 Jun 18 21:48 __cloudera_metadata__
  24. -rw-r--r-- 1 root root  66 Jul 13 09:53 consumer.properties
  25. -rw-r--r-- 1 root root  54 Jun 18 21:48 kafka-client.conf
  26. -rw-r--r-- 1 root root 300 Jun 18 21:48 tools-log4j.properties

2.4 注意 如果修改了(/opt/cloudera/parcels/KAFKA/etc/kafka/conf.dist/server.properties)的  zookeeper.connect ,需要参照(/var/local/kafka/data/meta.properties)中的broker.id

 

文章有用的话,请点赞+关注,您的鼓励是我最大的动力,更多好帖敬请期待,加油

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/盐析白兔/article/detail/416521
推荐阅读
相关标签