离线项目
运营商信号强度诊断
离线计算
1、通过命令行或脚本将数据上传到HDFS
2、将上传的数据加载到数据仓库内
3、根据目标数据的格式在数据仓库中对数据进行计算
4、通过工作流将计算后的数据进一步加工最终写入结果表
睡覺了
Everything is Object 我现在能做的,便是以一段拙劣的文字来祭奠我那段流逝的岁月
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
信号强度诊断(第二阶段)
第二阶段(离线数据入库)设计流程,实现历史数据的入库1、数据上传2、创建数据表3、数据拆分4、数据表加载离线数据入库总体流程离线数据,大多为历史已经存在的、用于进行宏观统计分析,对于时效性不高的业务场景所使用的数据。本项目的离线分析数据均来源于此。离线数据入库,即将数据加载到数据仓库内。首先将数据传入服务器,在大数据集群环境就绪的前提下,将数据上传到海量数据存储...原创 2019-12-28 20:22:00 · 7135 阅读 · 0 评论 -
信号强度诊断(系统架构)
设计策略本项目前后端的设计结构,了解前端使用了哪些技术,后端使用了哪些技术系统的设计方法是采用面向对象的设计。本系统前端页面交互主要采用B/S的结构,采用MVC及流式数据的设计思路进行规划设计。前端数展现使用Echarts技术。与地图相关的报表使用百度地图提供的API。后端实时数据,实时接入mysql。为了不影响线上系统的正常使用,同时能够将数据发送到大数据平台,本项目使用Can...原创 2019-12-28 20:22:09 · 8329 阅读 · 4 评论 -
信号强度诊断(第一阶段)
第一阶段(项目简述)项目背景、功能组成、逻辑架构、技术架构项目背景介绍 项目功能模块介绍 数据处理流程及逻辑架构设计 数据介绍 详细功能描述 系统架构介绍 1. 项目背景看到项目背景,本项目做了哪些事情。手机已经是人们生活中不可缺少的重要通信、咨询、娱乐的工具。手机在带来方便的同时也带来了烦恼,就是信号质量差手机上网速度慢等问题。针对这一问题,如何为用户提供更好的服...原创 2019-12-28 20:22:17 · 8136 阅读 · 0 评论 -
信号强度诊断(项目概述)
第一阶段了解整个项目相关细信息。项目背景介绍、项目概述、逻辑架构介绍、功能需求介绍、数据结构介绍、总体架构介绍。第二阶段离线业务数据上传,根据架构,对离线数据进行整理、创建数据库表、数据加载。第三阶段离线业务SQL语句整理、整理SQL语句生成结果表的结构及字段,根据结果表所需的字段,在原始表中抽取该字段数据加工、补充及入库、创建索引...原创 2019-12-24 08:04:27 · 8397 阅读 · 1 评论
分享