flink是否可以通过代码设置hadoop的配置文件目录

classic Classic list List threaded Threaded
3 messages Options
LJY
Reply | Threaded
Open this post in threaded view
|

flink是否可以通过代码设置hadoop的配置文件目录

LJY
各位好:

目前hadoop的配置文件是在 fs.hdfs.hadoopconf 设置。

用户是否能够不启用配置文件中的fs.hdfs.hadoopconf,通过代码手动设置hadoop的目录。
Reply | Threaded
Open this post in threaded view
|

Re: flink是否可以通过代码设置hadoop的配置文件目录

tison
建议通过 HADOOP_HOME 或 HADOOP_CONF_DIR 环境配置,Flink 有一个 fallback 的加载优先级

1. HADOOP_HOME
2. Configuration 也就是 fs.hdfs.hadoopconf
3. HADOOP_CONF_DIR

其中 Configuration 的方式是已废弃的

Best,
tison.


LJY <[hidden email]> 于2020年1月9日周四 下午3:52写道:

> 各位好:
>
> 目前hadoop的配置文件是在 fs.hdfs.hadoopconf 设置。
>
> 用户是否能够不启用配置文件中的fs.hdfs.hadoopconf,通过代码手动设置hadoop的目录。
Reply | Threaded
Open this post in threaded view
|

Re: flink是否可以通过代码设置hadoop的配置文件目录

LakeShen
提交任务的时候,系统变量指定 HADOOP_CONF_DIR 即可

祝好,
沈磊

tison <[hidden email]> 于2020年1月9日周四 下午3:57写道:

> 建议通过 HADOOP_HOME 或 HADOOP_CONF_DIR 环境配置,Flink 有一个 fallback 的加载优先级
>
> 1. HADOOP_HOME
> 2. Configuration 也就是 fs.hdfs.hadoopconf
> 3. HADOOP_CONF_DIR
>
> 其中 Configuration 的方式是已废弃的
>
> Best,
> tison.
>
>
> LJY <[hidden email]> 于2020年1月9日周四 下午3:52写道:
>
> > 各位好:
> >
> > 目前hadoop的配置文件是在 fs.hdfs.hadoopconf 设置。
> >
> > 用户是否能够不启用配置文件中的fs.hdfs.hadoopconf,通过代码手动设置hadoop的目录。
>