大数据湖仓生产环境部署规划

生产环境

前置准备

1. 集群机器规划
   vim /etc/hosts

   192.168.136.14 sr.fe.node1 st.master.node1 ds.worker.node1 flink.worker.node1 hdfs.dn.node1 yarn.nm.node1
   192.168.136.15 sr.fe.node2 st.master.node2 ds.worker.node2 flink.worker.node2 hdfs.dn.node2 yarn.nm.node2
   192.168.136.16 sr.fe.node3 st.worker.node1 ds.worker.node3 flink.worker.node3 hdfs.dn.node3 yarn.nm.node3
   192.168.136.11 sr.be.node1 zk.service.node1 ds.master.node1 flink.master.node3 hdfs.nn.node2
   192.168.136.12 sr.be.node2 zk.service.node2 ds.master.node2 flink.master.node2 yarn.rm.node2
   192.168.136.13 sr.be.node3 zk.service.node3 flink.master.node1 hdfs.nn.node1 yarn.rm.node1
   192.168.136.17 st.worker.node2 ds.alert.server pgsql.db.node flink.worker.node4 yarn.nm.node4
   192.168.136.18 st.worker.node3 ds.api.server ss.query.server flink.worker.node5 nginx.service.node yarn.nm.node5 

2.外部端口访问

3. 大数据环境账号信息

• 生产环境
  
  • 数据集成: http://integration.bigdata.btyy.com admin/Bt@024
  • 数据分析：http://olap.bigdata.btyy.com root/Bt@024
  • 数据查询：http://query.bigdata.btyy.com admin/Bt@024
  • 监控平台：http://portal.bigdata.btyy.com
  • 任务调度：http://taskscheduler.bigdata.btyy.com
• 管理账号
  
  • Host: 堡垒机访问
  • SR Admin: root/Bt@prd-sr202501