shell命令执行hive脚本的方式

65次阅读

共计 994 个字符，预计需要花费 3 分钟才能阅读完成。

导读	本文主要介绍了 shell 命令执行 hive 脚本(hive 交互)，文中通过示例代码介绍的非常详细，具有一定的参考价值，感兴趣的小伙伴们可以参考一下

Hive 执行方式

Hive 的 hql 命令执行方式有三种：

1、CLI 方式直接执行

2、作为独立文件，通过 shell 调用 hive –f 或 hive –i 执行执行

3、作为字符串通过 shell 调用 hive –e 执行（- S 开启静默，去掉”OK”，”Time taken”）

方式 1

键入“hive”，启动 hive 的 cli 交互模式。Set 可以查看所有环境设置参数，并可以重设。其他命令如，Use database        选择库
    quit/exit   退出 Hive 的交互模式 
    set –v  显示 Hive 中的所有变量
    set =       设置参数
    执行本地 shell：!       交互模式下可执行 shell 命令，例如（查看 linux 根目录下文件列表："!ls -l /;"）操作云命令：dfs         交互模式下直接操作 hadoop 命令如 dfs fs –ls
    Hql 语句       执行查询并输出到标准输出
    add [FILE|JAR|ARCHIVE]  []*       增加一个文件到资源列表
    list FILE       列出所有已经添加的资源

方式二

将 hql 语句保存为独立文件，后缀名不限制，可以用.q 或者.hql 作为标识：

A，这个文件在 cli 模式下，用 source 命令执行，如：source ./mytest.hql

B，在 shell 中执行命令，如：hive -f mytest.sql

Hive 指定预执行文件命令“hive –i”（或叫初始化文件）

命令：hive -i hive-script.sql
在 hive 启动 cli 之前，先执行指定文件（hive-script.sql）中的命令。也就是说，允许用户在 cli 启动时预先执行一个指定文件，比如，有一些常用的环境参数设置，频繁执行的命令，可以添加在初始化文件中，比如，某些参数设置
        set mapred.queue.names=queue3;
        SET mapred.reduce.tasks=14;
    添加 udf 文件
        add JAR ./playdata-hive-udf.jar;
    设置 Hive 的日志级别 
        hive -hiveconf hive.root.logger=INFO;

到此这篇关于 shell 命令执行 hive 脚本 (hive 交互) 的文章就介绍到这了。