421
人物
Hive 作业配置__作业_用户指南_E-MapReduce-阿里云
E-MapReduce 中,用户申请集群的时候,默认为用户提供了 Hive 环境,用户可以直接使用 Hive 来创建和操作自己的表和数据。操作步骤如下。
用户需要提前准备好 Hive SQL 的脚本,例如:
USE DEFAULT;
DROP TABLE uservisits;
CREATE EXTERNAL TABLE IF NOT EXISTS uservisits (sourceIP STRING,destURL STRING,visitDate STRING,adRevenue DOUBLE,user
Agent STRING,countryCode STRING,languageCode STRING,searchWord STRING,duration INT ) ROW FORMAT DELIMITED FIELDS TERMI
NATED BY ',' STORED AS SEQUENCEFILE LOCATION '/HiBench/Aggregation/Input/uservisits';
DROP TABLE uservisits_aggre;
CREATE EXTERNAL TABLE IF NOT EXISTS uservisits_aggre ( sourceIP STRING, sumAdRevenue DOUBLE) STORED AS SEQUENCEFILE LO
CATION '/HiBench/Aggregation/Output/uservisits_aggre';
INSERT OVERWRITE TABLE uservisits_aggre SELECT sourceIP, SUM(adRevenue) FROM uservisits GROUP BY sourceIP;
将该脚本保存到一个脚本文件中,例如叫 uservisits_aggre_hdfs.hive,然后将该脚本上传到 OSS 的某个目录中(例如:oss://path/to/uservisits_aggre_hdfs.hive)。
单击该页右上角的创建作业,进入创建作业页面。
填写作业名称。
选择 Hive 作业类型,表示创建的作业是一个 Hive 作业。这种类型的作业,其后台实际上是通过以下的方式提交。
hive [user provided parameters]
在应用参数选项框中填入 Hive 命令后续的参数。例如,如果需要使用刚刚上传到 OSS 的 Hive 脚本,则填写的内容如下:
-f ossref://path/to/uservisits_aggre_hdfs.hive
您也可以单击选择 OSS 路径,从 OSS 中进行浏览和选择,系统会自动补齐 OSS 上 Hive 脚本的绝对路径。请务必将 Hive 脚本的前缀修改为 ossref(单击切换资源类型),以保证 E-MapReduce 可以正确下载该文件。
选择执行失败后策略。
单击确定,Hive 作业即定义完成。
最后更新:2016-11-23 16:03:59
上一篇:
Hadoop MapReduce 作业配置__作业_用户指南_E-MapReduce-阿里云
下一篇:
Pig 作业配置__作业_用户指南_E-MapReduce-阿里云
如何启用MFA__MFA_会员帐号及密码_会员账号&实名认证-阿里云
子订单信息__数据类型_API文档_域名-阿里云
处理-通过ConsumerLib实现不丢、保序、去重__最佳实践_日志服务-阿里云
FAQ__C-SDK_SDK 参考_对象存储 OSS-阿里云
马云八年前遭受非议却坚持布局终成正果,阿里云成功让质疑者哑口无言
解绑标签__标签相关接口_API 参考_云服务器 ECS-阿里云
产品和业务限制__产品简介_邮件推送-阿里云
DRDS读写分离__开发手册_分布式关系型数据库 DRDS-阿里云
查询作业详情__作业_API参考_E-MapReduce-阿里云
PHP-SDK__点播SDK_SDK手册_视频点播-阿里云
相关内容
常见错误说明__附录_大数据计算服务-阿里云
发送短信接口__API使用手册_短信服务-阿里云
接口文档__Android_安全组件教程_移动安全-阿里云
运营商错误码(联通)__常见问题_短信服务-阿里云
设置短信模板__使用手册_短信服务-阿里云
OSS 权限问题及排查__常见错误及排除_最佳实践_对象存储 OSS-阿里云
消息通知__操作指南_批量计算-阿里云
设备端快速接入(MQTT)__快速开始_阿里云物联网套件-阿里云
查询API调用流量数据__API管理相关接口_API_API 网关-阿里云
使用STS访问__JavaScript-SDK_SDK 参考_对象存储 OSS-阿里云