把csv导入到hive表中步骤

2020-05-29 10:59:11 阅读：393 来源： 互联网

标签：导入到 COMMENT STRING cde load info hive test csv

本博文解决的问题：
现在我们有一个CSV格式的一个文件download.csv，里面是我们需要的数据，想把数据装入到数据impala数据库中

1.首先整理文本文件
打开download.csv，选择文件，另存为，保存类型：制表符分隔.txt

2.创建表

drop table if exists  test.cde_map_info_load;
CREATE TABLE test.cde_map_info_load (   sys_sign STRING COMMENT '系统标识',   sys_cn_name STRING COMMENT '系统名称',   srctab_cd STRING COMMENT '源表英文名',   srctab_name STRING COMMENT '源表中文名',   clmn_nm STRING COMMENT '字段英文名',   clmn_cn_nm STRING COMMENT '字段中文名',   srccde_cd STRING COMMENT '源代码值',   srccde_desc STRING COMMENT '源代码描述',   transfer_type STRING COMMENT '转换类型',   code_source STRING COMMENT '码值来源表',   code_source_rule STRING COMMENT '码值来源规则',   targtab_cd STRING COMMENT '目标代码编号',   targtab_name STRING COMMENT '目标代码编号描述',   targcde_cd STRING COMMENT '目标代码值',   targcde_desc STRING COMMENT '目标代码描述',   valid_sts STRING COMMENT '有效状态',   create_time STRING COMMENT '创建时间',   update_time STRING COMMENT '更新时间' ,code_load_type STRING )  
row format delimited
fields terminated by '\t'
STORED AS TEXTFILE;

3.将文件上传到本地路径下
/BIG_DATA/tmp/zw/newdir/a.txt

4.切换编码格式(文件中含有中文)
piconv -f gb2312 -t UTF-8 a.txt > b.txt

load data local inpath '/BIG_DATA/tmp/zw/newdir/b.txt' into table test.cde_map_info_load;

select * from test.cde_map_info_load limit 100;

如果存在分区，在插入分区表中
insert overwrite test.cde_map_info select * from test.cde_map_info_load

标签：导入到,COMMENT,STRING,cde,load,info,hive,test,csv
来源： https://www.cnblogs.com/hello-wei/p/12986116.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

ICode9

把csv导入到hive表中步骤