Hive常用函数概览

Hive是一个基于Hadoop的数据仓库工具，用于处理和分析大规模数据集。Hive提供了丰富的内置函数和操作符，用于数据查询、转换和分析。以下是Hive中的一些常用函数分类及其示例：

1. 字符串函数：

`concat(string A, string B...)`: 连接字符串。

`length(string A)`: 返回字符串的长度。

`upper(string A)`, `lower(string A)`: 将字符串转为大写或小写。

`trim(string A)`: 去除字符串前后的空格。

`substr(string A, int start, int length)`: 获取子字符串。

`split(string str, string pattern)`: 按照给定的模式分割字符串等。

2. 日期和时间函数：

`unix_timestamp()`: 返回当前时间的Unix时间戳。

`from_unixtime(bigint unixtime[, string format])`: 将Unix时间戳转换为日期格式。

`date_format(date|timestamp format)`: 按指定格式格式化日期或时间戳。

`year(), month(), day()`: 分别返回日期或时间戳的年、月、日等。

3. 数值函数：

`abs(int A)`, `abs(float A)`, `abs(double A)`: 返回数字的绝对值。

`ceil(float A)`, `floor(float A)`: 返回大于或等于（或小于或等于）给定数字的最小整数。

`round(float A)`, `round(double A)`: 返回最接近给定数字的四舍五入值。此外还有统计函数如`sum()`, `avg()`等用于聚合计算。

4. 转换函数：

`cast(expr AS type)`: 将值转换为指定的数据类型。例如将字符串转为整数或日期类型等。例如，使用`cast('2021-09-25' as date)`将字符串转为日期类型。

5. 条件函数：如`if()`, `case when ... then ... else ... end`, 以及逻辑操作符如`and`, `or`, `not`等用于条件判断。此外，Hive还支持自定义函数和UDF（用户定义的函数）。用户可以根据需要创建自己的函数来处理特定的数据处理任务。常用的如`explode()`函数用于将数组或Map列展开为多个行等。此外，Hive还支持聚合函数如`group_concat()`, `collect_set()`, `collect_list()`等用于数据聚合操作。总之，Hive提供了丰富的内置函数来满足各种数据处理和分析需求，用户可以根据具体需求选择合适的函数进行操作。