Apache的配置单元SERDE正则表达式：数据类型 [英] Apache Hive regEx serde: data types

问题描述

有关处理日志，我想使用Apache蜂巢SERDE正则表达式，但我只发现使用String作为数据类型的表列的例子。

For processing logs I want to use Apache Hive regEx serde but I only found examples that use String as datatype for the columns of the table.

现在我的问题是：datebased支持的类型和整数和数组或只是字符串

Now my question is: are datebased types and integers and arrays supported or is it just strings?

这个例子（和其他人）只使用字符串：

This example (and others) only uses strings:

CREATE TABLE access_log (
  remote_ip STRING,
  request_date STRING,
  method STRING,
  request STRING,
  protocol STRING
)
ROW FORMAT SERDE 'org.apache.hadoop.hive.contrib.serde2.RegexSerDe'
WITH SERDEPROPERTIES  (
"input.regex" = "([^ ]) . . [([^]]+)] \"([^ ]) ([^ ]) ([^ \"])\" *",
"output.format.string" = "%1$s %2$s %3$s %4$s %5$s"
)
STORED AS TEXTFILE

推荐答案

• SERDE请参阅的code：的或<一的=nofollow的> code href=\"https://github.com/apache/hive/blob/trunk/contrib/src/java/org/apache/hadoop/hive/contrib/serde2/RegexSerDe.java\"相对=nofollow> github上 - RegexSerDe code ，
  所有列必须是String类型。 - 从程序注释


• 如果您想要做一些好办法吧，写一些自定义SERDE code（如果你擅长的java，然后进行），并添加为自定义SERDE罐子像这个例子中的 CSV SERDE定制


• 如果不是，让列类型是STRING而已，而当你想查询对任何柱的铸造采取行动（在蜂巢 CAST（）函数）。

希望这有助于:)

这篇关于Apache的配置单元SERDE正则表达式：数据类型的文章就介绍到这了，希望我们推荐的答案对大家有所帮助，也希望大家多多支持IT屋！