Hive 中 null 和\N 的处理

Hive中有种假的NULL,它看起来和NULL一摸一样,但是实际却不是NULL。空值NULL在底层默认是用’\N’来存储的,而我们习惯性对NULL 值的过滤,一般是is null 和 is not null。所以此时可以通过对修改hive 表的信息,来保证控制都显示为指定值 ,方便进行过滤。解决方法如下:

(1)如下:

alter table   t_dw_ct_author    set serdeproperties (‘serialization.null.format’ = ‘NULL’);

则出现:底层数据保存的是’NULL’,通过查询显示的是’NULL’

这时如果查询为空值的字段可通过 语句:a is null 或者 a=’NULL’

或者

alter table t_dw_ct_author set serdeproperties(‘serialization.null.format’ = ‘\N’);

则出现:底层数据保存的是’\N’,通过查询显示的是’NULL’

这时如果查询为空值的字段可通过 语句:a is null 或者 a=’\\N’

(2)” 与 length(xx)=0

” 表示的是字段不为null且为空字符串,此时用 a is null 是无法查询这种值的,必须通过 a=”  或者 length(a)=0 查询

    原文作者:为祁
    原文地址: https://www.jianshu.com/p/6d30753bd5c7
    本文转自网络文章,转载此文章仅为分享知识,如有侵权,请联系博主进行删除。
点赞