使用shell脚本执行hive、sqoop命令的方法

1、test.sh脚本内容如下：

#!/bin/bash

#CURR_DATE=`date +"%Y-%m-%d %H:%M:%S"`------>不能使用
v_sql="insert into origin_ennenergy_energytrade.test2 values('"$(date +"%Y-%m-%d %H:%M:%S")"','"Y"')"
echo $v_sql

#insert into origin_ennenergy_energytrade.test2 values('2016-08-09 10:39:44','Y')

hive -e "$v_sql;"
sqoop export --connect jdbc:mysql://ip:3306/test23?characterEncoding=utf8 --username root --password 123--table test2--export-dir /user/hive/warehouse/origin_ennenergy_energytrade.db/test2/* --input-fields-terminated-by "\t" --update-mode allowinsert --update-key times;

2、执行：

sh test.sh

以上这篇使用shell脚本执行hive、sqoop命令的方法就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持华域联盟。

您可能感兴趣的文章:

• 在Hadoop集群环境中为MySQL安装配置Sqoop的教程
• sqoop export导出 map100% reduce0% 卡住的多种原因及解决
• 解决sqoop从postgresql拉数据,报错TCP/IP连接的问题
• sqoop读取postgresql数据库表格导入到hdfs中的实现
• 解决sqoop import 导入到hive后数据量变多的问题
• sqoop 实现将postgresql表导入hive表
• Sqoop的安装与使用详细教程

本文由 华域联盟 原创撰写：华域联盟 » 使用shell脚本执行hive、sqoop命令的方法

转载请保留出处和原文链接：https://www.cnhackhy.com/19029.htm