spark dateformat源码排错

发布时间:2024年01月18日

背景

有一个任务 yyyy写成了YYYY,导致年份不对触发告警

select from_unixtime(unix_timestamp(),'YYYY-MM-dd HH:mm:ss')

第一时间用spark dateformat搜索下看看官网,发现spark 官网也没有描述YYYY的信息

Datetime patterns - Spark 3.5.0 Documentation

从源码找原因

先搜下from_unixtime函数

a6c5de88cc74463a9829b5fbbd8fb0b3.png

878ed058e2d0464ea57574e5fb33281f.png

然后找到这个函数,一直点进去

2e7c2f96c14e4f8382011f06cb59654a.png

2108e98b48e9456a8876280809edef4e.png

接着点进去,找到这段

e34d4128736d477295e092468b38fa91.png

随便找一个 SimpleDateFormat 点进去

18c6151441374e57907e894a6cd2d762.png

这个其实还是用的jdk的format,这个Y是代表了Week year ,确实里面很多都没用过

文章来源:https://blog.csdn.net/weixin_43283487/article/details/135365685
本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。