hive 导入 mysql文本

栏目: 数据库 · 发布时间: 5年前

内容简介：数据量过大，mysql支持不了。mysql只是个临时方案，最终大数据搭建好了以后，还是需要把mysql的数据，导入到hadoop中。前面提到了另外一种导入方式，请参考：注意：

数据量过大，mysql支持不了。mysql只是个临时方案，最终大数据搭建好了以后，还是需要把 mysql 的数据，导入到hadoop中。

前面提到了另外一种导入方式，请参考： sqoop 从mysql直接导入到hive表 。

1，在hive中创建表

create table `mytest` (
`log_date` int,
`log_time` int,
`aid` string,
`ticket` string
)
 ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' LINES TERMINATED BY '\n' STORED AS TEXTFILE;

2，mysql导出数据

注意： 导出的文本文件，值不要带有双引号，单引号之类的 。例如：

20190114 1547444359 28 aaaaaa
20190115 1547444390 28 bbbbb

3，导入数据到hive中

hive> LOAD DATA (LOCAL) INPATH '/root/mysql.txt' (overwrite) INTO TABLE mytest;

注意：

这里的local是你本机，如果去掉local，会去hdfs里面找。

默认是追加的方式，如果是overwrite，就是覆盖了。

以上就是本文的全部内容，希望本文的内容对大家的学习或者工作能带来一定的帮助，也希望大家多多支持码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。

码农书籍

你不是个玩意儿

杰伦·拉尼尔 / 葛仲君 / 中信出版社 / 2011-8 / 35.00元

“你不是个玩意儿。” 这句话当然不是骂人，这是一个宣言。人当然不是玩意儿，不是机器，而是人。在网络化程度越来越高的今天，我们每个人似乎都有足够的理由，无限欣喜地拥抱互联网。然而，你有没有想过互联网那些不完美的设计却是某种潜在的威胁…… 为什么如此多的暴民在社交网站上争吵不休，很多骂人的脏话我们在现实的人际交往中可能从来不会使用，但在匿名网络环境中却漫天飞舞？互联网的本质......一起来看看《你不是个玩意儿》这本书的介绍吧!

码农工具