使用flink 1.8.1 部署yarn集群 , 始终有报错

classic Classic list List threaded Threaded
4 messages Options
Reply | Threaded
Open this post in threaded view
|

使用flink 1.8.1 部署yarn集群 , 始终有报错

周虓岗
Retrying connect to server: 0.0.0.0/0.0.0.0:8030. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep




同样的一台电脑使用1.7.2部署就没有问题,有没有大神帮忙看看哪里有问题
Reply | Threaded
Open this post in threaded view
|

Re:使用flink 1.8.1 部署yarn集群 , 始终有报错

周虓岗

比较肯定yarn的配置基本是正确的,不知道为何flink始终在通过0.0.0.0 连接yarn scheduler







在 2019-09-01 13:55:50,"周虓岗" <[hidden email]> 写道:
>Retrying connect to server: 0.0.0.0/0.0.0.0:8030. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep
>
>
>
>
>同样的一台电脑使用1.7.2部署就没有问题,有没有大神帮忙看看哪里有问题
Reply | Threaded
Open this post in threaded view
|

Re: Re:使用flink 1.8.1 部署yarn集群 , 始终有报错

Yun Tang
Hi

向0.0.0.0:8030 尝试提交作业是因为提交作业时找不到正确的YARN配置,就会向默认的本地8030端口提交,检查一下HADOOP_CONF_DIR 或者 HADOOP_HOME 这些环境变量有没有设置正确。可以设置一下这些配置文件的目录地址就可以提交作业了。

BTW,这个不是一个Flink的问题,是所有使用YARN管理作业的大数据计算引擎都有可能遇到的问题。

祝好
唐云
________________________________
From: 周�岗 <[hidden email]>
Sent: Sunday, September 1, 2019 15:31
To: [hidden email] <[hidden email]>
Subject: Re:使用flink 1.8.1 部署yarn集群 , 始终有报错


比较肯定yarn的配置基本是正确的,不知道为何flink始终在通过0.0.0.0 连接yarn scheduler







在 2019-09-01 13:55:50,"周�岗" <[hidden email]> 写道:
>Retrying connect to server: 0.0.0.0/0.0.0.0:8030. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep
>
>
>
>
>同样的一台电脑使用1.7.2部署就没有问题,有没有大神帮忙看看哪里有问题
Reply | Threaded
Open this post in threaded view
|

Re:Re: Re:使用flink 1.8.1 部署yarn集群 , 始终有报错

Michael Ran
yarn 客户端 没装,或者配置不对吧
在 2019-09-02 02:37:59,"Yun Tang" <[hidden email]> 写道:

>Hi
>
>向0.0.0.0:8030 尝试提交作业是因为提交作业时找不到正确的YARN配置,就会向默认的本地8030端口提交,检查一下HADOOP_CONF_DIR 或者 HADOOP_HOME 这些环境变量有没有设置正确。可以设置一下这些配置文件的目录地址就可以提交作业了。
>
>BTW,这个不是一个Flink的问题,是所有使用YARN管理作业的大数据计算引擎都有可能遇到的问题。
>
>祝好
>唐云
>________________________________
>From: 周虓岗 <[hidden email]>
>Sent: Sunday, September 1, 2019 15:31
>To: [hidden email] <[hidden email]>
>Subject: Re:使用flink 1.8.1 部署yarn集群 , 始终有报错
>
>
>比较肯定yarn的配置基本是正确的,不知道为何flink始终在通过0.0.0.0 连接yarn scheduler
>
>
>
>
>
>
>
>在 2019-09-01 13:55:50,"周虓岗" <[hidden email]> 写道:
>>Retrying connect to server: 0.0.0.0/0.0.0.0:8030. Already tried 0 time(s); retry policy is RetryUpToMaximumCountWithFixedSleep
>>
>>
>>
>>
>>同样的一台电脑使用1.7.2部署就没有问题,有没有大神帮忙看看哪里有问题