HIVE使用regexp_replace替换string特殊字符

AA赵师傅

于 2022-08-05 09:59:40 发布

阅读量3.8k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： hive shell 文章标签： hive hadoop 数据仓库

本文链接：https://blog.csdn.net/zcb_data/article/details/126172008

hive 同时被 2 个专栏收录

13 篇文章

订阅专栏

shell

7 篇文章

订阅专栏

该SQL查询展示了如何使用regexp_replace函数去除STRING列中可能导致JSON转换错误的特殊字符。在shell脚本中，需要对SQL语句中的反斜杠进行转义，以正确处理这些字符。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

文本中存在特殊字符，导致string转JSON时报错，可以使用regexp_replace对文本内容进行替换

select  regexp_replace(STRING,obp.PRODUCT_NAME),' |\u0000|\u0001|\u0002|\u0003|\u0004|\u0005|\u0006|\u0007|\u0008|\u0009|\u000a|\u000b|\u000c|\u000d|\u000e|\u000f|\u0010|\u0011|\u0012|\u0013|\u0014|\u0015|\u0016|\u0017|\u0018|\u0019|\u001a|\u001b|\u001c|\u001d|\u001e|\u001f|\u007F|\n|\"|\t|\r|\f|\b|\/|\\\\','')

注意，sql放到shell脚本中，\需要转义，如下：

select  regexp_replace(STRING,obp.PRODUCT_NAME),' |\u0000|\u0001|\u0002|\u0003|\u0004|\u0005|\u0006|\u0007|\u0008|\u0009|\u000a|\u000b|\u000c|\u000d|\u000e|\u000f|\u0010|\u0011|\u0012|\u0013|\u0014|\u0015|\u0016|\u0017|\u0018|\u0019|\u001a|\u001b|\u001c|\u001d|\u001e|\u001f|\u007F|\n|\"|\t|\r|\f|\b|\/|\\\\\\\\','')