2025-03-03 13:03:26
867
917
语法：A=B操作类型：所有基本类型描述: 如果表达式A与表达式B相等，则为TRUE；否则为FALSE使用first_value和last_value求分组后的第一个和最后一个值selectuser_id,user_type,from1）Hive 自带了一些函数，比如：max/min等，但是数量有限，自己可以通过自定义UDF来方便的扩展。2）当Hive提供的内置函数无法满足你的业务处理需要时，此时就可以考虑使用用户自定义函数（UDF：user-defined function）。
2024-11-04 09:11:11
294
825
hive在运行过程中，会发现 hdfs /tmp/hive/hive or hdfs 目录占用空间巨大!如果hive中断，或者异常退出，这些中间会话就会一直保存在hdfs上。hive在运行过程中会生产大量的中间会话在/tmp目录下，如果hive正常运行结束，临时会话会被自动清理掉，
2024-04-29 11:04:35
440
387
在Hive中会有很多数据是用Json格式来存储的，如开发人员对APP上的页面进行埋点时，会将多个字段存放在一个json数组中，因此数据平台调用数据时，要对埋点数据进行解析。接下来就聊聊Hive中是如何解析json数据的。结果：namezhangsan如果既要解析name字段，也解析age字段，则可以这样写：但是如果要解析的字段有很多，再这样写就太麻烦了，所以就有了 这个函数。结果:nameagezhangsan18注意：上面的函数中没有_hive json数组
2024-04-03 12:04:02
525
364
使用定时任务收集linux系统信息，收集后存储到hadoop平台，由hive导入hadoop平台的数据，通过flask echarts前后端结合显示hive对数据的分析结果。此博客主要针对于flask编写后端接口，返回hive平台的分析结果并在前端以echarts图表的形式进行展示。......_hadoop hive spark 通过系统进行结果可视化展现.