高可用集群

classic Classic list List threaded Threaded
4 messages Options
Reply | Threaded
Open this post in threaded view
|

高可用集群

李军
           请教下,各位大佬们生产环境使用的是哪种集群配置
            1. Standalone 集群
            2. Yarn 集群
               
    理由是什么,不知道怎么选择    


2020-6-28
| |
李军
|
|
[hidden email]
|
签名由网易邮箱大师定制
Reply | Threaded
Open this post in threaded view
|

回复:高可用集群

刘佳炜
如果你公司用hadoop的话就是YARN  StandAlone一般都是单机测试练习的



发自我的iPhone


------------------ 原始邮件 ------------------
发件人: 李军 <[hidden email]&gt;
发送时间: 2020年6月28日 17:11
收件人: user-zh <[hidden email]&gt;
主题: 回复:高可用集群



&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 请教下,各位大佬们生产环境使用的是哪种集群配置
&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 1. Standalone 集群
&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 2. Yarn 集群
&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;
&nbsp;&nbsp;&nbsp; 理由是什么,不知道怎么选择&nbsp;&nbsp;&nbsp;


2020-6-28
| |
李军
|
|
[hidden email]
|
签名由网易邮箱大师定制
Reply | Threaded
Open this post in threaded view
|

Re: 高可用集群

LakeShen
Hi 李军,

目前我们在 Yarn 上面的话,用的是 Flink On Yarn Per Job 模式,在 K8s 上面的话,就是 Standalone per
Job 模式。

Best,
LakeShen

刘佳炜 <[hidden email]> 于2020年6月28日周日 下午5:14写道:

> 如果你公司用hadoop的话就是YARN &nbsp;StandAlone一般都是单机测试练习的
>
>
>
> 发自我的iPhone
>
>
> ------------------ 原始邮件 ------------------
> 发件人: 李军 <[hidden email]&gt;
> 发送时间: 2020年6月28日 17:11
> 收件人: user-zh <[hidden email]&gt;
> 主题: 回复:高可用集群
>
>
>
> &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;
> 请教下,各位大佬们生产环境使用的是哪种集群配置
> &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 1.
> Standalone 集群
> &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 2. Yarn
> 集群
> &nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;
>
> &nbsp;&nbsp;&nbsp; 理由是什么,不知道怎么选择&nbsp;&nbsp;&nbsp;
>
>
> 2020-6-28
> | |
> 李军
> |
> |
> [hidden email]
> |
> 签名由网易邮箱大师定制
cs
Reply | Threaded
Open this post in threaded view
|

回复: 高可用集群

cs
我觉得具体采用哪种部署模式应该结合实际情况来选择
如果你们公司已经有yarn集群,并且资源足够就选择yarn模式。
yarn和standalone其实都属于资源调度,只不过standalone只支持flink任务的运行,
yarn还可以调度其他任务如spark,MR等等。





------------------&nbsp;原始邮件&nbsp;------------------
发件人:&nbsp;"LakeShen"<[hidden email]&gt;;
发送时间:&nbsp;2020年6月28日(星期天) 晚上6:58
收件人:&nbsp;"user-zh"<[hidden email]&gt;;

主题:&nbsp;Re: 高可用集群



Hi 李军,

目前我们在 Yarn 上面的话,用的是 Flink On Yarn Per Job 模式,在 K8s 上面的话,就是 Standalone per
Job 模式。

Best,
LakeShen

刘佳炜 <[hidden email]&gt; 于2020年6月28日周日 下午5:14写道:

&gt; 如果你公司用hadoop的话就是YARN &amp;nbsp;StandAlone一般都是单机测试练习的
&gt;
&gt;
&gt;
&gt; 发自我的iPhone
&gt;
&gt;
&gt; ------------------ 原始邮件 ------------------
&gt; 发件人: 李军 <[hidden email]&amp;gt;
&gt; 发送时间: 2020年6月28日 17:11
&gt; 收件人: user-zh <[hidden email]&amp;gt;
&gt; 主题: 回复:高可用集群
&gt;
&gt;
&gt;
&gt; &amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;
&gt; 请教下,各位大佬们生产环境使用的是哪种集群配置
&gt; &amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp; 1.
&gt; Standalone 集群
&gt; &amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp; 2. Yarn
&gt; 集群
&gt; &amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;&amp;nbsp;
&gt;
&gt; &amp;nbsp;&amp;nbsp;&amp;nbsp; 理由是什么,不知道怎么选择&amp;nbsp;&amp;nbsp;&amp;nbsp;
&gt;
&gt;
&gt; 2020-6-28
&gt; | |
&gt; 李军
&gt; |
&gt; |
&gt; [hidden email]
&gt; |
&gt; 签名由网易邮箱大师定制