hive

Apache Hive 数据仓库命令行

补充说明

Hive 把 SQL 转换为 MapReduce/Tez/Spark 作业，查询 HDFS 上的数据。它依赖 metastore 和 HDFS，适合离线批处理。

常用示例

hive
hive -e 'SHOW DATABASES;'
hive -f query.sql
hive --database app
beeline -u 'jdbc:hive2://hive-server2:10000/default' -n app
beeline -u 'jdbc:hive2://hive-server2:10000/default' -e 'SELECT 1;'

SHOW DATABASES;
USE app;
SHOW TABLES;
DESCRIBE events;
SELECT count(*) FROM events;
MSCK REPAIR TABLE events;

易错点与排错

• metastore 不可用时所有查询都会失败；先检查 metastore 和数据库。
• HDFS 权限/Kerberos 配置错误会导致表不可读。
• 分区表新增数据后要 MSCK REPAIR 或 ALTER TABLE ADD PARTITION。
• 小文件过多会拖慢查询；定期合并。
• 执行引擎（MapReduce/Tez/Spark）不同，性能和参数不同。
• SerDe 和分隔符不匹配会导致字段错位/空值。
• Hive 版本与 metastore schema 要兼容；升级前备份。

相关命令

• hive / beeline — SQL 入口
• hdfs — 存储
• spark-sql — 另一种 SQL 引擎