Avro tojson 日期格式

Question

我使用 sqoop 将选定的列导入 table 到 avro 文件格式。使用 avro-tools tojson 日期以奇怪的格式出现（阴性）。如何解码日期？

    {"first_name":{"string":"Mary"},"last_name":  {"string":"Botman"},"birth_date":{"long":-345772800000}}

其中 MySQL 查询五个正确格式

  mysql> select first_name, last_name, birth_date from employees where first_name like 'Mary' and last_name ='Botman';
  +------------+-----------+------------+
  | first_name | last_name | birth_date |
  +------------+-----------+------------+
  | Mary       | Botman    | 1959-01-17 |
  +------------+-----------+------------+
  1 row in set (0.07 sec)

Answer 1

long值-345772800000代表...

...specified number of milliseconds since the standard base time known as "the epoch", namely January 1, 1970, 00:00:00 GMT the number of milliseconds since 1 Jan 1970

在您的示例中，它是一个负值，因此它从 "the epoch" 开始倒计时。在 Java 代码中，您可以从该值创建一个 LocalDate，如下所示，这将为您提供与 Hive 查询结果中所示相同的结果。

LocalDate date17Jan1959 = Instant.ofEpochMilli(-345772800000L)
    .atZone(ZoneOffset.UTC)
    .toLocalDate();

Avro tojson 日期格式

Avro tojson date format

mysql

avro

sqoop

spark-avro