百度360必应搜狗淘宝本站头条
当前位置:网站首页 > 技术资源 > 正文

Impala建表失败之慎用关键字(保留字)

moboyou 2025-03-29 15:01 25 浏览


使用Impala创建Kudu表时遇到的小问题,需求是根据数据源Oracle中的表在Kudu数仓贴源层创建Kudu表。

偷个小懒就直接生成了建表语句,然后就有提示啦,建表失败...

1. 首先遇到的是A reserved word,也就是保留字

Encountered: A reserved word cannot be used as an identifier: inout

2. 然后又遇到了个EXPLAIN(EXPLAIN也是保留字)

只不过,Encountered:后面的输出不一样,好奇心驱使看了一下源码:

https://github.com/cloudera/Impala/blob/cdh6.3.0/fe/src/main/cup/sql-parser.cup

在拼接错误信息的方法里面public String getErrorMsg(String stmt) {}。

然而并没有找到
org.apache.impala.analysis.SqlScanner.java,而是找到了
Impala/fe/src/main/jflex/sql-scanner.flex/sql-scanner.flex文件。

都是保留字,但是错误信息有差异表面原因在上面和下面的代码里,真正原因要看errorToken_。

关于jflex和CUP:【用户通过beewax thrift api提交query到某个impalad,Impalad的Query Planner使用jflex和CUP解析SQL语句。然后Planner把这个query的parse trees变成若干PlanFragment,然后把PlanFragment发送到backend/Query Coordinator......】

3.Impala在CDH的官方文档中有一个主题专门列出了Impala的保留字

https://docs.cloudera.com/documentation/enterprise/latest/topics/impala_reserved_words.html

和其他编程语言或SQL规范一样,关键字(保留字)是不能或不建议在编程和SQL中当做标识符的。

在Impala中,不能直接将保留字用作标识符,如果非要使用的话,使用反引号 ``引起来:

CREATE TABLE select (x INT): 不可以

CREATE TABLE `select` (x INT): 可以

CREATE TABLE ods_xxx(inout STRING): 不可以

CREATE TABLE ods_xxx(`inout` STRING): 可以

但是其他字段都是好好的,不用加`,单独为个别由于历史遗留的字段加上`,SQL写起来难免别扭,所以重命名一下会更好些。

需有留意的是,Impala使用`inout`创建Kudu表后,是不影响Kudu表本身正常使用inout字段的,比如使用DataX或StreamSets Data Collector仍然使用inout名称去写入数据。

4.Hive里的关键字

https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManualDDL-Keywords,Non-reservedKeywordsandReservedKeywords

版本迭代过程中有调整。

5.远古的味道-Java里的关键字和保留字

https://docs.oracle.com/javase/tutorial/java/nutsandbolts/_keywords.html

【202001】

相关推荐

Python网络爬虫之分析网页

一、分析并提取网页内容的有三种方式o正则表达式(速度最快,但适应变化略差)oBeautifulsoup库(速度是正则表达式的约几分之一)oselenium或pyppeteer的中的浏览器对象的查找元素...

Python进阶-day9:正则表达式

目标学习Python的re模块基础用法。掌握正则表达式的匹配(match,search,findall)、替换(sub)和分割(split)操作。练习:编写代码从一段文本中提取所有邮箱地址。学习内...

Python模块datetime、calendar、logging、argparse、re用法

datetime模块:提供日期和时间相关的功能。importdatetime#获取当前日期和时间current_time=datetime.datetime.now()#格式化日期...

一文讲清怎么利用Python实现Linux系统日志检索分析管理系统

摘要:在现代IT运营与开发中,日志分析早已成为不可或缺的核心环节。无论是排查系统故障、进行安全审计,还是优化服务性能,日志文件始终是最真实、最权威的信息来源。Linux系统作为主流的服务器操作系统,其...

Python基础编程——标准库之shelve模块

在实际开发中,要将数据进行持久化,通常的做法是,将数据保存到文件或者数据库中。Python有多种方法将数据保存到文件中,本节将会介绍使用Python的标准库shelve来将数据保存到文件中。shelv...

使用 Python 开发一个 Python 解释器

原文地址:https://python.plainenglish.io/introduction-to-creating-interpreter-using-python-c2a9a6820aa0原文...

强烈推荐!Python 这个宝藏库 re 正则匹配

Python的re模块(RegularExpression正则表达式)提供各种正则表达式的匹配操作。在文本解析、复杂字符串分析和信息提取时是一个非常有用的工具,下面总结了re模块的常用方...

python入门到脱坑正则表达式—re.match()函数

re.match()是Python正则表达式模块re中的一个重要方法,用于从字符串的起始位置匹配一个模式。下面我将详细介绍它的用法和特点。基本语法re.match(pattern,stri...

Python中使用re模块实现正则表达式的替换字符串操作

#编程语言#我是"学海无涯自学不惜!",关注我,一同学习简单易懂的Python编程。0基础学python(83)Python中,导入re模块后还可以进行字符串的替换操作,就是sub()...

深入理解re模块:Python中的正则表达式神器解析

在Python中,"re"是一个强大的模块,用于处理正则表达式(regularexpressions)。正则表达式是一种强大的文本模式匹配工具,用于在字符串中查找、替换或提取特定模式...

python入门到脱坑正则表达式—re.search()函数

re.search()是Python正则表达式模块re中的核心函数之一,用于在字符串中搜索匹配指定模式的第一个位置。与re.match()不同,它不限制匹配必须从字符串开头开始。基本语法...

python入门到脱坑正则表达式—re.sub()函数

re.sub()是Python正则表达式模块re中用于字符串替换的核心函数,它可以在字符串中搜索匹配正则表达式的部分,并将其替换为指定的内容。基本语法re.sub(pattern,repl...

python之re模块

re模块一.re模块的介绍1.什么是正则表达式"定义:正则表达式是一种对字符和特殊字符操作的一种逻辑公式,从特定的字符中,用正则表达字符来过滤的逻辑。(也是一种文本模式;)2、正则表达式可以...

Python中re模块详解

在《用最简单的方式教会你使用Python正则》一文中,我们介绍了正则表达式该如何书写,还通过简单的示例介绍了Python中如何通过re模块使用正则功能。今天本文将通过以下内容详细介绍r...

微信积分商城货到付款系统|裂变营销+物流闭环

微信积分商城货到付款系统核心卖点速览零成本运营:免授权+完全开源PHP源码,9MB轻量部署,Mysql数据库高效支撑。灵活支付组合:独创“积分+货到付款+运费”混合支付,用户兑换无忧,商家资金零风险...