扫二维码与项目经理沟通
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流
本篇内容主要讲解“SQL-Hive中常用的表格操作是什么”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“SQL-Hive中常用的表格操作是什么”吧!
目前成都创新互联公司已为超过千家的企业提供了网站建设、域名、虚拟空间、网站托管维护、企业网站设计、汕城网站维护等服务,公司将坚持客户导向、应用为本的策略,正道将秉承"和谐、参与、激情"的文化,与客户和合作伙伴齐心协力一起成长,共同发展。
Hive建表的全部建表语法如下:
CREATE [EXTERNAL] TABLE [IF NOT EXISTS] 表名 (列名 data_type [COMMENT 列注释], ...) [COMMENT 表注释] [PARTITIONED BY (列名 data_type [COMMENT 列注释], ...)] [CLUSTERED BY (列名, 列名, ...) [SORTED ,BY (列名 [ASC|DESC], ...)] INTO num_buckets BUCKETS] [ROW FORMAT row_format] [STORED AS file_format] [LOCATION hdfs_path]
所有[ ]中的内容都是可选项,即可有可无,下面我们分别详细介绍。
CREATE [EXTERNAL] TABLE [IF NOT EXISTS] 表名
(列名 data_type)
是建表语句必须有的,举个例子,我们要建立一个用户启动表:
CREATE TABLE t_od_use_cnt ( date_8 INT ,platform string ,app_version string ,user_id BIGINT ,use_cnt INT ,is_active TINYINT );
首先我们建一个库app,然后使用并在其中建表,执行效果如下:
hive> create database app; OK Time taken: 0.899 seconds hive> use app; OK Time taken: 0.03 seconds hive> create table t_od_use_cnt( > date_8 int > ,platform string > ,app_version string > ,user_id bigint > ,use_cnt int > ,is_active tinyint > ); OK Time taken: 0.389 seconds
备注:Hive中的关键字大小写是不区分的,所有关键字均可使用小写。
执行语句:
DESC 表名;
查询上一步新建表的字段及字段对应的数据类型,运行效果如下:
hive> desc t_od_use_cnt; OK date_8 int platform string app_version string user_id bigint use_cnt int is_active tinyint Time taken: 0.28 seconds, Fetched: 6 row(s)
删除表的语句和删除库的类似,只是把database换成了table,都是使用drop关键字进行删除操作,慎重操作:
DROP TABLE 表名;
Hive中有分区表的概念,分区表改变了Hive对数据存储的组织方式。查询时如果我们限定了分区范围,Hive就可以直接去相应的目录下查询数据,而不需要扫描整个表,所以当数据量很大时可以显著提高查询性能。
建立分区表要使用关键字[PARTITIONED BY (col_name data_type[COMMENT col_comment], ...)] ,注意分区的字段不可在普通字段中重复出现。分区表在工作中十分常见,一般来说公司所有的表都会以日期进行分区,以便提高查询效率。
我们还是以t_od_use_cnt为例,建表语句如下:
CREATE TABLE t_od_use_cnt ( platform string comment '平台 android,ios' ,app_version string comment 'app版本' ,user_id BIGINT comment '用户id' ,use_cnt INT comment '当日使用次数' ,is_active TINYINT comment '是否活跃' ) partitioned BY (date_8 INT comment '日期');
在公司中需要查询既有表的建表格式时使用以下语句即可:
show create table tablename;
查询上文已建表格效果如下:
hive> show create table t_od_use_cnt; OK CREATE TABLE `t_od_use_cnt`( `platform` string COMMENT '平台 android,ios', `app_version` string COMMENT 'app版本,', `user_id` bigint COMMENT '用户id', `use_cnt` int COMMENT '当日使用次数', `is_active` tinyint COMMENT '是否活跃') PARTITIONED BY ( `date_8` int COMMENT '日期') ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' STORED AS INPUTFORMAT 'org.apache.hadoop.mapred.TextInputFormat' OUTPUTFORMAT 'org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat' LOCATION 'hdfs://hadoop:9000/usr/hive/warehouse/t_od_use_cnt' TBLPROPERTIES ( 'transient_lastDdlTime'='1556161316')
到此,相信大家对“SQL-Hive中常用的表格操作是什么”有了更深的了解,不妨来实际操作一番吧!这里是创新互联网站,更多相关内容可以进入相关频道进行查询,关注我们,继续学习!
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流