Spark工程化代码 - 三层架构代码

Spark使用三层架构代码,分解复杂度,工程化管理代码

三层架构分为控制层、服务层、持久化层

具体实现如下(以wordcount为案例):

一、application包

application包是管理应用程序的包。

这些类包含了应用程序的业务逻辑和功能实现。这些类通常会调用DAO层和Service层的方法,以完成具体的业务功能,,Application包通常位于应用层中,用于实现具体的业务逻辑和功能,提供给用户使用。

WordCountApplication.scala

package com.hadoop.spark.core.framework.application

import com.hadoop.spark.core.framework.common.TApplication
import com.hadoop.spark.core.framework.controller.WordCountController

object WordCountApplication extends App with TApplication{

    // 启动应用程序
    start(){
        val controller = new WordCountController()
        controller.dispatch()
    }

}

在Scala中,App类是预定义的类,用于在应用程序的入口点执行代码。它是一个没有参数的特质(trait),可以用于在Scala程序中定义主函数。

使用App特质,可以将主

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值