hive 导入 mysql文本

栏目: 数据库 · 发布时间: 6年前

内容简介：数据量过大，mysql支持不了。mysql只是个临时方案，最终大数据搭建好了以后，还是需要把mysql的数据，导入到hadoop中。前面提到了另外一种导入方式，请参考：注意：

数据量过大，mysql支持不了。mysql只是个临时方案，最终大数据搭建好了以后，还是需要把 mysql 的数据，导入到hadoop中。

前面提到了另外一种导入方式，请参考： sqoop 从mysql直接导入到hive表 。

1，在hive中创建表

create table `mytest` (
`log_date` int,
`log_time` int,
`aid` string,
`ticket` string
)
 ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' LINES TERMINATED BY '\n' STORED AS TEXTFILE;

2，mysql导出数据

注意： 导出的文本文件，值不要带有双引号，单引号之类的 。例如：

20190114 1547444359 28 aaaaaa
20190115 1547444390 28 bbbbb

3，导入数据到hive中

hive> LOAD DATA (LOCAL) INPATH '/root/mysql.txt' (overwrite) INTO TABLE mytest;

注意：

这里的local是你本机，如果去掉local，会去hdfs里面找。

默认是追加的方式，如果是overwrite，就是覆盖了。

以上就是本文的全部内容，希望本文的内容对大家的学习或者工作能带来一定的帮助，也希望大家多多支持码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。

码农书籍

SSA：用户搜索心理与行为分析

[美] 罗森菲尔德（Louis Rosenfeld） / 汤海、蔡复青 / 清华大学出版社 / 2014-4-1 / 59.00

何为站内搜索分析（SSA）？它如何帮助你挖掘用户搜索曰志，从中洞悉用户搜索心理和行为，从而有针对性地改善用户体验，提升网站价值？这些都可以从《SSA：用户搜索心理与行为分析》中找到答案。《SSA：用户搜索心理与行为分析》首先通过故事来说明SSA是如何使Vanguard集团起死回生的，简要介绍SSA并指导读者动手实践。其次，通过丰富的实例来介绍很多工具和方法，帮助读者着手分析用户查询数据，从中获得更......一起来看看《SSA：用户搜索心理与行为分析》这本书的介绍吧!

码农工具