基于Kubernetes、Docker的机器学习微服务系统设计系列——(十)数据可视化

最新推荐文章于 2021-03-24 09:16:39 发布
最新推荐文章于 2021-03-24 09:16:39 发布
阅读量1.2k 收藏
点赞数 1
CC 4.0 BY-SA版权
分类专栏： WEB前端 数据可视化 UI设计 系统设计 文本分类 文章标签： 文本分类 数据可视化 UI设计 系统设计 WEB前端
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/xsdjj/article/details/83928351
本文介绍了基于Kubernetes和Docker的机器学习微服务系统中的数据可视化设计。提供了微服务配置、分类任务设置及资源监控等功能，并通过实例展示了分类任务的运行效果，包括JE-MP和RS-MP两种分词和特征选择的对比。系统UI仅展示了20%的功能，但具备丰富的机器学习算法实验对比能力，可根据用户需求灵活扩展。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

 内容提要

基于Kubernetes、Docker的机器学习微服务系统设计
实践篇(1)概念与构想(二)架构与部署(三)微服务框架(四)中文分词(五)预处理
(六)特征选择(七)分类器微(八)部署配置(九)应用服务(十)数据可视化
研究篇RS中文分词MP特征选择NLV文本分类快速kNN文本分类

数据可视化

  应用访问界面如图所示：

应用服务UI界面

包括：

  • 微服务配置、分类任务配置；
  • 微服务资源监控，动态显示；
  • 数据集分析图、分类对比图；
  • 综合对比、参数调优等。

可视化演示

  分类任务运行效果如图所示，如未显示请点击图片显示。

分类任务运行动图(JE-MP)
 

  上图选择JE分词和MP特征选择。下图选择RS分词和CHI特征选择，效果如下，如未显示请点击图片显示。

分类任务运行动图(RS-MP)
 

  说明：整个系统的微服务可以支持的机器学习算法对比实验很丰富，我开发的可视化UI大概仅展示了20%微服务可以提供的功能。整个系统可以根据用户的需求变化出各种功能验证。

知更鸟博文推荐
上一篇 基于Kubernetes、Docker的机器学习微服务系统设计系列——(九)应用服务
下一篇 基于Kubernetes、Docker的机器学习微服务系统设计——完整版
研究篇 RS中文分词   |  MP特征选择   |  NLV文本分类   |  快速kNN
作者简介
兴趣爱好机器学习、云计算、自然语言处理、文本分类、深度学习
E-mailxsd-jj@163.com (欢迎交流)
版权声明：个人原创，请勿抄袭，欢迎引用，未经许可禁止转载. © 知更鸟
基于Kubernetes、Docker的机器学习微服务系统设计系列——(一)概念与构想
知更鸟的博客
11-08 1220
内容提要欢迎页面语料分析语料处理英文支持特征选择文本分类——工作空间配置文本分类——单一分类测试文本分类——分类器速度对比文本分类——分类算法对比文本分类——特征选择对比文本分类——NLV参数调优文本分类——kNN参数调优文本分类——SVM参数调优总结说明   本文档介绍笔者自己开发的自然语言处理——文本处理实验平台的系统功能及UI设计。笔者前期所做大量实验都是基于本工具平台。 欢迎页面 语料分...
基于Kubernetes、Docker的机器学习微服务系统设计系列——(三)RESTful微服务框架
知更鸟的博客
11-09 925
 内容提要微服务框架图微服务框架实现   基于Kubernetes的机器学习微服务系统设计——(1)概念与构想   为了微服务的接口交互统一，本系统采用统一的框架模式。采用Jersey软件框架，Jersey 是开源的RESTful框架, 实现了JAX-RS (JSR 311 & JSR 339) 规范。 微服务框架图   RESTful框架实现流程如图所示： RESTful框架实现流程...
基于Kubernetes、Docker的机器学习微服务系统设计系列——(五)预处理微服务
知更鸟的博客
11-09 365
 内容提要实现代码请求JSON响应JSON   文本分类任务的预处理阶段一般包括中文分词。这里中文分词单提出来，预处理阶段的主要任务是停用词去除、索引词典的构建、词文档矩阵化。 实现代码 预处理Action实现类 package com.robin.pretreatment.action; import com.robin.loader.MircoServiceAction; import co...
基于Kubernetes、Docker的机器学习微服务系统设计系列——(九)应用服务
知更鸟的博客
11-10 1398
 内容提要1 分类任务1.1 分类任务类图1.2 数据结构1.3 调度状态转移2 资源监控2.1 资源监控类图2.2 部分代码实现3 应用WEB部署   本文的应用服务是指机器学习任务的应用，主要涉及任务的调度、状态机、和微服务发现，微服务访问以及微服务资源的监控。 1 分类任务 1.1 分类任务类图   分类任务类图如图所示： 分类任务类图 1.2 数据结构   分类任务类图如图所示： 分类...
基于Kubernetes、Docker的机器学习微服务系统设计系列——(七)分类器微服务
知更鸟的博客
11-10 620
 内容提要分类器类图部分代码实现请求JSON响应JSONDEBUG信息   分类器微服务主要实现如下分类选择算法：k-Nearest Neighbor(kNN)、Naïve Bayes(NB)、Support Vector Machine(SVM)、Normalized Vector(NLV)。 分类器类图   分类器服务主要类图如下图所示： 分类器服务主要类图 部分代码实现 文本分类-训练器抽...
基于Kubernetes、Docker的机器学习微服务系统设计系列——(二)架构与部署
知更鸟的博客
11-08 3016
 内容提要1 概述2 系统介绍2.1 功能全览2.2 核心功能3 系统架构3.1 云架构图3.2 架构说明4 云化部署4.1 部署图4.2 部署说明4.3 部署实例5 详细设计5.1 RESTful微服务框架5.1.1 微服务框架图5.1.2 微服务框架实现5.2 中文分词微服务5.3 预处理微服务5.4 特征选择微服务6 系统运行7 分析总结 1 概述   本篇主要介绍基于Kubernetes、...
基于Kubernetes、Docker的机器学习微服务系统设计系列——(四)中文分词微服务
知更鸟的博客
11-09 471
 内容提要设计模式代码实现JSON格式   中文分词微服务包括分词方法有：RobinSeg(RS)、IKAnalyzer(IK)、JEAnalysis(JE)、MmSeg4j(MS)、PaoDing(PD)、SmallSeg4j(SS)。其中RS分词实现见我的文章：知更鸟中文分词RS设计实现 ，其他分词方法都采用发布的jar包进行封装装。 设计模式   主要涉及外观模式、适配器模式、工厂模式和单例...
基于Kubernetes、Docker的机器学习微服务系统设计——完整版
知更鸟的博客
11-10 5734
 内容提要1 概述2 系统介绍2.1 功能全览2.2 核心功能3 系统架构3.1 云化架构图3.2 架构说明4 云化部署4.1 部署图4.2 部署说明4.3 部署实例5 设计实现5.1 RESTful微服务框架5.1.1 微服务框架图5.1.2 微服务框架实现5.2 中文分词微服务5.2.1 设计模式5.2.2 代码实现5.2.3 请求JSON5.2.3 响应JSON5.3 预处理微服务5.3.1...
kubernetes可视化搭建集群，web界面一键操作
热门推荐
u010955999的博客
03-06 1万+
ku8eye web 开发环境当前版本的 ku8eye web开发环境 以docker镜像方式提供，下载地址为： http://pan.baidu.com/s/1gdYk4CV安装部署的架构图如下图所示。注：运行ku8eye-web开发环境的服务器应在待安装Kubernetes集群的服务器范围之外，并能够与待安装服务器网络连通。文件名为：ku8eye-web.tar.gz 用gunzip解压缩后，...
快速构建数据可视化微服务系统（三）—— 5分钟入门Echart
老李写博客的地方
06-16 578
通过上两篇文章就可以创建出一个简单的vue项目，为了让数据可视化，我们需要使用到可视化的工具——Echart。我们先看一下效果图： ​​ 使用Echart只要几个非常简单的步骤： 引入Echart 创建容器 设置图形 1、引入Echart 如果不是使用npm，那么需要在官网上下载Echart的包，然后放到自己的项目中，但是这里使用更加简单的npm引入的方法，只需...
docker swarm k8s比较_Docker可视化管理工具
weixin_39622891的博客
11-24 969
1、前言谈及docker，避免不了需要熟练的记住好多命令及其用法，对于熟悉shell、技术开发人员而言，还是可以接受的，熟练之后，命令行毕竟是很方便的，便于操作及脚本化。后期文章会首发于本专栏，欢迎关注JAVA高级进阶​zhuanlan.zhihu.com但对于命令行过敏、非技术人员，进行docker部署、管理是比较头疼的，学习成本是很高的。而市面上的可视化管理工具也是很多的，各有优缺点，结合最近...
Linux之k8s+docker集群的部署及图形化管理界面
qq_43830639的博客
08-12 3487
一、k8s集群的部署 1. 将之前swarm集群的所有配置清理 docker stack rm portainer docker volume prune #清理卷 docker network prune #清理网络 docker rm -f 进程id #清理进程 docker ps docker ps -a docker swarm leave #清理节点，master可以加上-f，强制...
如何在K8S平台部署微服务
weixin_33686714的博客
03-31 1963
Deploying Micro-services on Kubernetes 本文将介绍如何使用 kubernetes 部署微服务，包括 服务发现，监控，路由，日志。用实际的例子来演示自动化流程。主要分为以下几个部分: 5分钟搭建 K8S 集群 部署 CNI 网络 部署监控服务 部署网关 部署日志服务 部署一个应用 5分钟搭建 K8S...
基于 Kubernetes 的微服务项目设计与实现
架构文摘
03-24 653
点击蓝色“架构文摘”关注我哟 加个“星标”，每天上午 09:25，干货推送！ 随着互联网的发展，后端服务和容器编排技术的日益成熟，微服务成为了后端服务的首选，Kubernetes 也已经...
运维可视化真有这么重要么？已成Kubernetes使用刚需
k8scaptain的博客
12-20 1313
全球含金量容器认证CKA培训北京站文末招生！ 没有比“可视化”更好的一个词能概括运维的本质，而“可视化”又应该分成两部分：可视化的服务交付和可视化的服务度量！ 第一部分：可视化的服务交付 早期的运维是从 ITIL 开始的，那个时候大家都不知道运维是什么，幸好找到了一个IT服务最佳实践——ITIL。开始了互联网运维的摸索之路，从CMDB、服务台、事件管理、变更管理、可用性管理、容量管理等逐...
微服务之服务注册与发现（基于kubernetes / SpringCloud）
程序人生|
06-24 7682
微服务 微服务是一种架构模式，一种分布式的架构风格。 顾名思义，micro service，将一个庞大的单体应用拆分成若干个“微小”的服务，服务间通过进程通讯完成原本在单体应用中的调用。 其中必要的六个基本技术为： 1、服务注册与发现； 2、进程间通信； 3、负载均衡； 4、分布式配置中心； 5、熔断器； 6、网关路由。 基于k8s、springcloud的服务注册与发现对比 k8...
PySpark NaiveBayes算法之中文文本分类测试
moxiaomomo的专栏
06-19 2774
假设现在有N行文本，每行文本的第一列已经打好标签， Y 或 N， 用于标识该行文本是否包含敏感词汇；第二列之后的每一列是对某些句子或文本进行中文分词之后的词汇。比如 N 朴素贝叶斯算法 是 生成模型 中 最经典 分类算法 之一 Y 这是 一条 包含 色情 的 语句 我们现在用pyspark结合NaiveBayes分类算法来进行训练和测试，这个过程大概包括： 词条转换成特征向量 统计词频...
k8s（六）、微服务框架istio服务可视化与监控
ywq935的博客
06-06 7895
前言： 承接上文k8s（五）、微服务框架istio流量策略控制 ，测试环境需保留上文中的环境，在本文将重点展示istio微服务调用链关系展示，以及微服务工作状态监测，涉及组件有： prometheus \ grafana \ jaeger等 非常感谢文章作者这几天耐心地解答疑惑： http://www.maogx.win/posts/26/ 微服务调用链追踪 安装jaeger # ...
基于Kubernetes的机器学习微服务实践
总结而言，该项目展示了如何利用容器化技术、微服务架构以及Kubernetes管理机器学习模型的端到端部署。它涉及了机器学习、Web开发、容器化以及自动化部署等多个技术领域，并且强调了Python在这些领域中的重要作用。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值