配置单元unix\u时间戳在源列中毫秒内不工作

des4xlb0 于 2021-05-29 发布在 Hadoop

关注(0)|答案(1)|浏览(454)

我用的是Hive1.1
摄取dtm中的最后六位数字表示毫秒。
但是如果我也指定了模式，unix\u timestamp hive函数会给出相同的结果
那么，如何得到包含毫秒的unix\u时间戳的结果呢

select a_ingestion_dtm,unix_timestamp(a_ingestion_dtm) from omega limit 10;
 +-----------------------------+-------------+--+
 |       a_ingestion_dtm       |     _c1     |
 +-----------------------------+-------------+--+
 | 2019-07-08 16:11:02.076002  | 1562616662  |
 | 2019-07-08 21:07:26.253007  | 1562634446  |
 | 2019-07-08 21:07:14.284     | 1562634434  |
 +-----------------------------+-------------+--+
 select a_ingestion_dtm,unix_timestamp(a_ingestion_dtm,'yyyy-MM-dd HH:mm:ss.SSSSSS') from omega limit 10;
 +-----------------------------+-------------+--+
 |       a_ingestion_dtm       |     _c1     |
 +-----------------------------+-------------+--+
 | 2019-07-08 16:11:02.076002  | 1562616662  |
 | 2019-07-08 21:07:26.253007  | 1562634446  |
 | 2019-07-08 21:07:14.284     | 1562634434  |
 +-----------------------------+-------------+--+

hadoop Hive apache-spark timestamp unix-timestamp

来源：https://stackoverflow.com/questions/57586195/hive-unix-timestamp-not-working-for-milliseconds-in-source-column

1条答案

按热度按时间

a0x5cqrl1#

unix\u timestamp（string date）返回从1970年起经过的秒数。
您可以将毫秒部分连接到unix\u timestamp返回的bigint。
就像在这个演示中：

with your_data as (
select stack(3,
'2019-07-08 16:11:02.076002',
'2019-07-08 21:07:26.253007',
'2019-07-08 21:07:14.284'
) as ts
)
select concat_ws('.',cast(unix_timestamp(ts) as string),regexp_extract(ts,'\\.(\\d+)$')) 
  from your_data;

结果：

OK
1562627462.076002
1562645246.253007
1562645234.284
Time taken: 0.057 seconds, Fetched: 3 row(s)

展开查看全部

赞(0）回复(0）举报 2021-05-29

我来回答

配置单元unix\u时间戳在源列中毫秒内不工作

1条答案

相关问题

热门标签

最新问答