spark-submit提交集群命令

最新推荐文章于 2024-12-06 20:38:59 发布

原创最新推荐文章于 2024-12-06 20:38:59 发布 · 549 阅读

·

1

·

CC 4.0 BY-SA版权

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

文章标签：

#大数据 #集群 #spark

大数据专栏收录该内容

1 篇文章

订阅专栏

本文介绍如何使用Spark的submit命令来提交任务。通过示例详细解释了各个参数的意义及配置方法，包括设置应用名称、指定Master节点地址、分配Executor内存、指定主类路径等。

简单的记录提交命令参数，先切换到spark 的bin文件夹下--master spark填写自己的spark集群，最后/home/jll/home/jll/test_word-0.0.1-SNAPSHOT.jar改成自己的jar包存放路径

./spark-submit --name "your app name" --master spark://ctrl241:7077 --executor-memory 1G --class 包名.主类名 /home/jll/test_word-0.0.1-SNAPSHOT.jar

博客等级

码龄13年

11
原创

5
点赞

12
收藏

2
粉丝

关注

私信

热门文章

分类专栏

Java 1篇
Scala 1篇
大数据 1篇
c++ 5篇
c++语言 5篇
C++ji

展开全部收起

上一篇：: Scala一元二次方程求解

最新评论

seekp()和seekg()函数简单的应用
LJ199205: #include<stdio.h> #include<stdlib.h> typedef struct list{ int data; struct list *next; }node; void menu() { printf("===========================\n"); printf("\t1.添加数据\n"); printf("\t2.修改数据\n"); printf("\t3.查找数据\n"); printf("\t4.删除数据\n"); printf("\t5.打印链表\n"); printf("===========================\n"); } void print(node *p) { while(p->next!=NULL) { printf("%d ",p->next->data); p=p->next; } printf("\n"); } void add(node *p) { printf("请输入需要在第几个位置添加数据："); int seq; scanf("%d",&seq); printf("请输入要添加的数据："); int number; scanf("%d",&number); for(int i=1;i<=seq;i++) { if(i==seq) { node* s=(node*)malloc(sizeof(node)); s->data=number; s->next=p->next; p->next=s; } p=p->next; } } void revise(node *p) { printf("请输入需要在第几个位置进行数据的修改："); int seq; scanf("%d",&seq); printf("需要将数据修改为："); int number; scanf("%d",&number); for(int i=1;i<=seq;i++) { p=p->next; if(i==seq) { p->data=number; } } } void find(node *p,int num) { printf("请输入需要查找的数："); int find,find_count=0; scanf("%d",&find); int i=0; while(p->next!=NULL) { find_count++; if(find==p->next->data) { printf("%d位于链表的第%d位置",p->next->data,find_count); } else { i++; } p=p->next; if(i==num) { printf("对不起在链表中没有找到该数字"); } } } void sub(node *p) { printf("请输入需要在第几个位置将数据进行删除："); int seq; scanf("%d",&seq); for(int i=1;i<=seq;i++) { if(i==seq) { p->next=p->next->next; } p=p->next; } } int main() { node* head=(node*)malloc(sizeof(node)); head->next=NULL; node* p; p=head; printf("创建链表，请输入链表的长度："); int num; scanf("%d",&num); for(int i=1;i<=num;i++) { node* s=(node*)malloc(sizeof(node)); scanf("%d",&s->data); p->next=s; s->next=NULL; p=s; } while(1) { menu(); int m; scanf("%d",&m); switch(m) { case 1: add(head); break; case 2: revise(head); break; case 3: find(head,num); break; case 4: sub(head); break; case 5: print(head); break; default: menu(); break; } } }

大家在看

最新文章

目录

展开全部

收起

评论

成就一亿技术人!

拼手气红包6.0元

还能输入1000个字符

添加红包

插入表情

表情包

代码片

HTML/XML
objective-c
Ruby
PHP
C
C++
JavaScript
Python
Java
CSS
SQL
其它

条评论被折叠查看

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。