【阿里云】【E-MapReduce快速入门】

本文详细介绍了如何在阿里云E-MapReduce(EMR)上创建DataLake集群,提交并执行Spark作业,以及查看作业运行记录。用户需完成实名认证并授权相关角色权限。集群创建后,通过SSH连接执行命令提交作业,通过YARN UI监控作业状态。集群不再使用时,可释放以节省成本。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

目录

E-MapReduce快速入门

前提条件

操作流程

步骤一:创建集群

步骤二:创建并执行作业

步骤三:查看作业运行记录

(可选)步骤四:释放集群

相关文档

常见问题

E-MapReduce快速入门

        本文为您介绍如何通过阿里云账号登录E-MapReduce(简称EMR)控制台,快速创建一个DataLake集群并执行作业。

前提条件

  • 注册阿里云账号,并完成实名认证。具体操作请参见阿里云账号注册流程

    说明

    根据阿里云ECS的规则,您在购买按量付费实例时,需要保证阿里云账户中可用余额(含现金、代金券、优惠券等)不得少于100元人民币

  • 完成对E-MapReduce的服务账号授予默认的EMR和ECS角色权限,详情请参见角色授权

操作流程

  1. 步骤一:创建集群

    在EMR控制台,快速创建一个DataLake集群

  2. 步骤二:创建并执行作业

    集群创建成功后,您可以创建并执行Spark类型作业

  3. 步骤三:查看作业运行记录

    提交作业后,您可以通过YARN UI方式查看作业运行记录。

  4. (可选)步骤四:释放集群

    如果不再使用该集群,可以释放集群以节约成本。

步骤一:创建集群

  1. 进入创建集群页面。

    1. 登录EMR on ECS控制台

    2. 在顶部菜单栏处,根据实际情况选择地域资源组

      • 地域:创建的集群会在对应的地域内,一旦创建不能修改。

      • 资源组:默认显示账号全部资源。

    3. 单击上方的创建集群

  2. 在创建集群页面,完成集群相关配置。

     

    配置区域

    <
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

资源存储库

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值