大数据中需要知道的监控页面端口号都有哪些
以下是一些大数据中常见组件监控页面的端口号:
1. Hadoop:HDFS Web UI在Hadoop2.x版本中默认端口为50070,在Hadoop3.x版本中为9870,用于查看集群文件及目录;YARN Web UI端口为8088,可查看MR执行情况;访问历史服务器的端口为19888。
2. Zookeeper:客户端连接Zookeeper的端口为2181,Zookeeper集群内通讯使用的端口为2888(Leader监听此端口),用于选举leader的端口为3888。
3. Spark:Driver的WEB UI端口为4040,用于展示任务运行状态等监控信息;Master的WEB UI端口默认为8080,可查看集群总体状态和应用程序信息;Worker的WEB UI端口通常为8081或在808x范围内;Spark History Server的WEB UI端口为18080,可查看过去运行的Spark应用的统计信息。
4. Hive:metastore服务默认监听端口为9083,Hive的JDBC端口通常为10000,工作中也可能是10001。
5. HBase:HBase master webUI页面端口为60010,CDH的regionServer的WEB UI管理端口为60030。
6. Kafka:Kafka-eagle监控管理Kafka的web页面端口为8048。
7. Flink:Flink的WEB UI端口为8081,用于监控Flink的job运行状态。
8. Impala:访问impalad的管理界面端口为25000,访问statestored的管理界面端口为25010。
9. Azkaban:集群模式下端口为8443,采用加密协议;solo模式下端口为8081,非加密协议。