• [微笑]这篇写得不错,没有逻辑上的问题!不过咱估计不会讨小萌们喜欢。 2019-07-16
  • 陈华德的专栏作者中国国家地理网 2019-07-16
  • 西藏迎来首家民营文化企业援藏团队 2019-07-14
  • “精日亲美的真正原因”是中国的伪公知精英身上长了“洋奴依附之心”,“崇洋媚外之骨”,“汉奸文化之瘤”,这些人利用“和谐、包容”疯狂推行汉奸文化洗脑国人! 2019-07-10
  • 合肥市公立医疗机构1271种医疗服务价格公示 部分服务涨价 2019-07-10
  • 文昌至临高高速公路有望年内开工 建成后车程缩至1小时内 2019-07-02
  • 加入我们中国国家地理网 2019-06-27
  • 强势发力体育营销 世界杯中国企业改变“旁观”窘状 2019-06-25
  • “道德瘾君子”侮辱了杨女士的善良 2019-06-25
  • 郑永年:争名逐利抢流量,中国的知识分子怎么了? 2019-06-21
  • 十九大代表拉措:团结一心跟党走   2019-06-18
  • 美钢铝关税政策引发各界忧虑 2019-06-18
  • 党的十九大最重大的理论成就 2019-06-15
  • 经济日报多媒体数字报刊 2019-06-15
  • 西安外事学院在省茶艺大赛中创多项佳绩西安外事学院-陕西教育新闻 2019-06-14
  • 欢迎来到魔据教育大数据学院,专注大数据工程师培养!
    当前位置:两肖两码中特资料网 > 学习资料 > 讲师博文 > hadoop2.x常用端口及定义方法(方便以后查询)

    两码中特2018: hadoop2.x常用端口及定义方法(方便以后查询)

    时间:2017-08-17 17:43:34作者:[!--zuozhe--]

    两肖两码中特资料网 www.mqptd.tw  

    Hadoop集群的各部分一般都会使用到多个端口,有些是daemon之间进行交互之用,有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多,完全记不住哪个端口对应哪个应用,特收集记录如此,以便查询。
    这里包含我们使用到的组件:HDFS, YARN, HBase, Hive, ZooKeeper:

    组件
    节点
    默认端口
    配置
    用途说明
    HDFS
    DataNode
    50010
    dfs.datanode.address
    datanode服务端口,用于数据传输
    HDFS
    DataNode
    50075
    dfs.datanode.http.address
    http服务的端口
    HDFS
    DataNode
    50475
    dfs.datanode.https.address
    https服务的端口
    HDFS
    DataNode
    50020
    dfs.datanode.ipc.address
    ipc服务的端口
    HDFS
    NameNode
    50070
    dfs.namenode.http-address
    http服务的端口
    HDFS
    NameNode
    50470
    dfs.namenode.https-address
    https服务的端口
    HDFS
    NameNode
    8020
    fs.defaultFS
    接收Client连接的RPC端口,用于获取文件系统metadata信息。
    HDFS
    journalnode
    8485
    dfs.journalnode.rpc-address
    RPC服务
    HDFS
    journalnode
    8480
    dfs.journalnode.http-address
    HTTP服务
    HDFS
    ZKFC
    8019
    dfs.ha.zkfc.port
    ZooKeeper FailoverController,用于NN HA
    YARN
    ResourceManager
    8032
    yarn.resourcemanager.address
    RM的applications manager(ASM)端口
    YARN
    ResourceManager
    8030
    yarn.resourcemanager.scheduler.address
    scheduler组件的IPC端口
    YARN
    ResourceManager
    8031
    yarn.resourcemanager.resource-tracker.address
    IPC
    YARN
    ResourceManager
    8033
    yarn.resourcemanager.admin.address
    IPC
    YARN
    ResourceManager
    8088
    yarn.resourcemanager.webapp.address
    http服务端口
    YARN
    NodeManager
    8040
    yarn.nodemanager.localizer.address
    localizer IPC
    YARN
    NodeManager
    8042
    yarn.nodemanager.webapp.address
    http服务端口
    YARN
    NodeManager
    8041
    yarn.nodemanager.address
    NM中container manager的端口
    YARN
    JobHistory Server
    10020
    mapreduce.jobhistory.address
    IPC
    YARN
    JobHistory Server
    19888
    mapreduce.jobhistory.webapp.address
    http服务端口
    HBase
    Master
    60000
    hbase.master.port
    IPC
    HBase
    Master
    60010
    hbase.master.info.port
    http服务端口
    HBase
    RegionServer
    60020
    hbase.regionserver.port
    IPC
    HBase
    RegionServer
    60030
    hbase.regionserver.info.port
    http服务端口
    HBase
    HQuorumPeer
    2181
    hbase.zookeeper.property.clientPort
    HBase-managed ZK mode,使用独立的ZooKeeper集群则不会启用该端口。
    HBase
    HQuorumPeer
    2888
    hbase.zookeeper.peerport
    HBase-managed ZK mode,使用独立的ZooKeeper集群则不会启用该端口。
    HBase
    HQuorumPeer
    3888
    hbase.zookeeper.leaderport
    HBase-managed ZK mode,使用独立的ZooKeeper集群则不会启用该端口。
    Hive
    Metastore
    9083
    /etc/default/hive-metastore中export PORT=<port>来更新默认端口
     
    Hive
    HiveServer
    10000
    /etc/hive/conf/hive-env.sh中export HIVE_SERVER2_THRIFT_PORT=<port>来更新默认端口
     
    ZooKeeper
    Server
    2181
    /etc/zookeeper/conf/zoo.cfg中clientPort=<port>
    对客户端提供服务的端口
    ZooKeeper
    Server
    2888
    /etc/zookeeper/conf/zoo.cfg中server.x=[hostname]:nnnnn[:nnnnn],标蓝部分
    follower用来连接到leader,只在leader上监听该端口。
    ZooKeeper
    Server
    3888
    /etc/zookeeper/conf/zoo.cfg中server.x=[hostname]:nnnnn[:nnnnn],标蓝部分
    用于leader选举的。只在electionAlg是1,2或3(默认)时需要。

     

    更多大数据相关资讯敬请关注魔据教育,为您分享最及时的大数据资讯。
    学习大数据敬请关注魔据教育微信二维码。
    魔据教育微信二维码

    【版权与免责声明】如发现内容存在版权问题,烦请提供相关信息发邮件至[email protected],我们将及时沟通与处理。本站内容除非来源注明魔据教育,否则均为网友转载,涉及言论、版权与本站无关。

    全国咨询热线:18501996998,值班手机:18501996998(7*24小时)

    在线咨询:张老师QQ 320169340

    企业合作服务专线:010-82340234-821, 院校合作洽谈专线:010-82340234

    Copyright 2001-2019 魔据教育 - 北京华育兴业科技有限公司 版权所有,京ICP备17018991号-2

    免费在线咨询两肖两码中特资料网

    免费索取技术资料立即索取

    大数据技术交流QQ:226594285

    电话咨询010-82340234

  • [微笑]这篇写得不错,没有逻辑上的问题!不过咱估计不会讨小萌们喜欢。 2019-07-16
  • 陈华德的专栏作者中国国家地理网 2019-07-16
  • 西藏迎来首家民营文化企业援藏团队 2019-07-14
  • “精日亲美的真正原因”是中国的伪公知精英身上长了“洋奴依附之心”,“崇洋媚外之骨”,“汉奸文化之瘤”,这些人利用“和谐、包容”疯狂推行汉奸文化洗脑国人! 2019-07-10
  • 合肥市公立医疗机构1271种医疗服务价格公示 部分服务涨价 2019-07-10
  • 文昌至临高高速公路有望年内开工 建成后车程缩至1小时内 2019-07-02
  • 加入我们中国国家地理网 2019-06-27
  • 强势发力体育营销 世界杯中国企业改变“旁观”窘状 2019-06-25
  • “道德瘾君子”侮辱了杨女士的善良 2019-06-25
  • 郑永年:争名逐利抢流量,中国的知识分子怎么了? 2019-06-21
  • 十九大代表拉措:团结一心跟党走   2019-06-18
  • 美钢铝关税政策引发各界忧虑 2019-06-18
  • 党的十九大最重大的理论成就 2019-06-15
  • 经济日报多媒体数字报刊 2019-06-15
  • 西安外事学院在省茶艺大赛中创多项佳绩西安外事学院-陕西教育新闻 2019-06-14
  • 浙江11选5开奖视频 上海天天彩选4开奖情况 鲁能对庆南fc 时时彩3把赢了200万 广西快乐双彩开奖结果查询 快乐时时彩是全国开奖 湖北30选5中奖详情 手机捕鱼兑换 宾州东斯特拉斯堡大学 莱斯特城夺冠阵容