摘要:本篇教程探讨了大数据技术 如何通过hive开发平台上传csv文件,希望阅读本篇文章以后大家有所收获,帮助大家对大数据技术的理解更加深入。
本篇教程探讨了大数据技术 如何通过hive开发平台上传csv文件,希望阅读本篇文章以后大家有所收获,帮助大家对大数据技术的理解更加深入。
<
通过数据交换平台上传较大的文件时,经常会出现导入失败情况,换种方式通过新数据开发平台(stark)也可以轻松实现外部数据与hive的数据关联。
--第一步、导入csv文件到hive
--stark数据开发平台——>资源管理——>搜索栏右边+号——>上传资源(资源类型:选择普通文件)
--第二步、建表并让这张表关联上上传的csv文件
drop table temp.tmp_site_oppo_did_test$tmptable;
CREATE EXTERNAL TABLE temp.tmp_site_oppo_did_test$tmptable (
did string
,new_date string
) ROW FORMAT DELIMITED FIELDS TERMINATED BY ',' --表示以,为分隔符
stored as textfile;
load data inpath 'hdfs://mgjcluster/stark/resource_83/latest/latest.csv' --上传的csv文件存储到hive的路径(可以通过搜索上传文件名基本信息中获取)
overwrite into table temp.tmp_site_oppo_did_test$tmptable; --覆盖到创建的临时表
本文由职坐标整理发布,学习更多的大数据技术相关知识,请关注职坐标大技术云计算大技术技术频道!
您输入的评论内容中包含违禁敏感词
我知道了
请输入正确的手机号码
请输入正确的验证码
您今天的短信下发次数太多了,明天再试试吧!
我们会在第一时间安排职业规划师联系您!
您也可以联系我们的职业规划师咨询:
版权所有 职坐标-一站式IT培训就业服务领导者 沪ICP备13042190号-4
上海海同信息科技有限公司 Copyright ©2015 www.zhizuobiao.com,All Rights Reserved.
沪公网安备 31011502005948号