大数据之Hive(二)
创始人
2024-04-04 17:36:14
0

文章目录

  • 前言
  • 一、Hive数据库和表操作
    • (一)数据库操作
      • 1. 创建数据库
      • 2. 删除数据库
    • (二)数据表操作
      • 1. 内部表和外部表的操作
        • 1.1 内部表操作
        • 1.2 外部表操作
      • 2. 复杂类型操作
        • 2.1 Array类型
        • 2.2 map类型
        • 2.3 struct类型


前言

#博学谷IT学习技术支持#

一、Hive数据库和表操作

(一)数据库操作

1. 创建数据库

1.1 在HDFS的默认Hive存储目录创建数据库

在这里插入图片描述
1.2 创建数据库并使用Location关键字指定HDFS存储位置
在这里插入图片描述

2. 删除数据库

2.1 删除一个空的数据,如果该数据库下存在数据表,则会报错
在这里插入图片描述
2.2 强制删除数据库,如果数据库下存在表,则连同数据表一起删除
在这里插入图片描述

(二)数据表操作

1. 内部表和外部表的操作

1.1 内部表操作

没有被external修饰的是内部表,删除内部表会直接删除元数据及存储数据,因此内部表不适合和其他工具共享数据

  • 创建内部表
    在这里插入图片描述
  • 创建表并指定字段之间的分隔符,指定字段之间用“\t”分隔
    在这里插入图片描述
  • 根据查询结果创建表
    在这里插入图片描述
  • 根据已经存在的表结构创建表
    在这里插入图片描述
  • 删除表
    在这里插入图片描述

1.2 外部表操作

在创建表的时候通过指定external关键字创建外部表,外部表因为是指定其他的hdfs路径的数据加载到表当中来,所以hive表会认为自己不完全独占这份数据,所以删除hive外部表的时候,数据仍然存放在hdfs当中,不会删掉。

  • 数据装载命令Load
    Load命令用于将外部数据加载到Hive表中
    在这里插入图片描述1、load data:表示加载数据
    2、local:表示从本地加载数据到hive表;否则从HDFS加载数据到hive表
    3、inpath:表示加载数据的路径
    4、overwrite:表示覆盖表中已有数据,否则表示追加
    5、into table:表示加载到哪张表
    6、student3:表示具体的表
    7、partition:表示上传到指定分区

2. 复杂类型操作

2.1 Array类型

Array是数组类型,Array中存放相同类型的数据;
说明:name与locations之间制表符\t分隔,locations中元素之间逗号分隔
在这里插入图片描述

  • 导入数据
    Load方法支持从本地以及HDFS上导入数据
    在这里插入图片描述
  • 常用查询
    在这里插入图片描述

2.2 map类型

map就是描述key-value数据
说明:字段与字段分隔符: “,”;需要map字段之间的分隔符:“#”;map内部k-v分隔符:“:”
在这里插入图片描述

  • 导入数据
    在这里插入图片描述
  • 常用查询
    在这里插入图片描述

2.3 struct类型

说明:字段之间#分割,第二个字段之间冒号分割
在这里插入图片描述

  • 导入数据
    在这里插入图片描述
  • 常用查询
    在这里插入图片描述

相关内容

热门资讯

监控摄像头接入GB28181平... 流程简介将监控摄像头的视频在网站和APP中直播,要解决的几个问题是:1&...
Windows10添加群晖磁盘... 在使用群晖NAS时,我们需要通过本地映射的方式把NAS映射成本地的一块磁盘使用。 通过...
protocol buffer... 目录 目录 什么是protocol buffer 1.protobuf 1.1安装  1.2使用...
在Word、WPS中插入AxM... 引言 我最近需要写一些文章,在排版时发现AxMath插入的公式竟然会导致行间距异常&#...
Fluent中创建监测点 1 概述某些仿真问题,需要创建监测点,用于获取空间定点的数据࿰...
educoder数据结构与算法...                                                   ...
MySQL下载和安装(Wind... 前言:刚换了一台电脑,里面所有东西都需要重新配置,习惯了所...
MFC文件操作  MFC提供了一个文件操作的基类CFile,这个类提供了一个没有缓存的二进制格式的磁盘...
有效的括号 一、题目 给定一个只包括 '(',')','{','}'...
【PdgCntEditor】解... 一、问题背景 大部分的图书对应的PDF,目录中的页码并非PDF中直接索引的页码...