解析kafka 非标准JSON问题

classic Classic list List threaded Threaded
5 messages Options
Reply | Threaded
Open this post in threaded view
|

解析kafka 非标准JSON问题

guoyb
您好!请问遇到如下格式的该如何用SQL解析。
string {name=string} {id : 1, name : abram}
eg:
2021-04-03xxxxx {name=aaaaaa} {id : 1, name : abram}
最重要为第三个字段 JSON,里面包含了data
第一和第二个字段可要可不要


请问,有思路可以参考吗?或者demo
Reply | Threaded
Open this post in threaded view
|

Re: 解析kafka 非标准JSON问题

19971028544@163.com
可以尝试在kafka 写个拦截器处理json



[hidden email]
 
发件人: guoyb
发送时间: 2021-04-27 17:55
收件人: user-zh
主题: 解析kafka 非标准JSON问题
您好!请问遇到如下格式的该如何用SQL解析。
string {name=string} {id : 1, name : abram}
eg:
2021-04-03xxxxx {name=aaaaaa} {id : 1, name : abram}
最重要为第三个字段 JSON,里面包含了data
第一和第二个字段可要可不要
 
 
请问,有思路可以参考吗?或者demo
Reply | Threaded
Open this post in threaded view
|

回复:解析kafka 非标准JSON问题

guoyb
SQL能实现吗?



---原始邮件---
发件人: "[hidden email]"<[hidden email]&gt;
发送时间: 2021年4月27日(周二) 晚上6:51
收件人: "user-zh"<[hidden email]&gt;;
主题: Re: 解析kafka 非标准JSON问题


可以尝试在kafka 写个拦截器处理json



[hidden email]
&nbsp;
发件人: guoyb
发送时间: 2021-04-27 17:55
收件人: user-zh
主题: 解析kafka 非标准JSON问题
您好!请问遇到如下格式的该如何用SQL解析。
string {name=string} {id : 1, name : abram}
eg:
2021-04-03xxxxx&amp;nbsp;{name=aaaaaa} {id : 1, name : abram}
最重要为第三个字段 JSON,里面包含了data
第一和第二个字段可要可不要
&nbsp;
&nbsp;
请问,有思路可以参考吗?或者demo
Reply | Threaded
Open this post in threaded view
|

Re: 回复:解析kafka 非标准JSON问题

JasonLee
hi

SQL 可以定义一个字段然后分隔再去获取 JSON 数据 或者可以自定义 UDF 去处理



-----
Best Wishes
JasonLee
--
Sent from: http://apache-flink.147419.n8.nabble.com/
Best Wishes
JasonLee
Reply | Threaded
Open this post in threaded view
|

回复:解析kafka 非标准JSON问题

guoyb
好的,谢谢!我都试试看



---原始邮件---
发件人: "JasonLee"<[hidden email]&gt;
发送时间: 2021年4月27日(周二) 晚上7:14
收件人: "user-zh"<[hidden email]&gt;;
主题: Re: 回复:解析kafka 非标准JSON问题


hi

SQL 可以定义一个字段然后分隔再去获取 JSON 数据 或者可以自定义 UDF 去处理



-----
Best Wishes
JasonLee
--
Sent from: http://apache-flink.147419.n8.nabble.com/