
云计算
文章平均质量分 72
一个简单的IT人
雪深
展开
-
NIMA 算法测试图片清晰度
NIMA 算法测试图片清晰度结果简介该算法从两个不同的维度进行判断。首先是判断照片的质量等。美观等主观方面,该算法也可以用来判断拍照水平。摄影爱好者可以用来提高自己的摄影水平。如何检测图片NIMA基于最新的深度物体识别(object detection)神经网络,能够从直接观感(技术角度)和吸引程度(美学角度)预测人类对图像的评估意见的分布。文中提出的神经网络的打分具有与人类主观打分很相近的优点,因此可以用于图像质量评估工作。NIMA算法是用来单纯检测图片质量,采用AVA数据集合训练。可以原创 2020-05-22 15:57:15 · 2127 阅读 · 0 评论 -
Pytorch实现MTCNN详解—原理及结构设计2
1.2PNet网络的设计和实现相关连接论文地址下载本人项目地址(已修复Bug)训练数据下载地址⚠️感谢作者,以下代码选自Sierkinhane的GIT,并且进行部分修改,以适配新的wider数据。定义PNet 全称为Proposal Network,其基本的构造是一个全连接网络。对上一步构建完成的图像金字塔,通过一个FCN进行初步特征提取与标定边框,并进行Bounding-Box Regression调整窗口与NMS进行大部分窗口的过滤。PNet是一个人脸区域的区域建议网络,该网络的原创 2020-05-22 00:45:09 · 2060 阅读 · 0 评论 -
Pytorch实现MTCNN详解—模型训练阶段2
2.2模型训练阶段—准备PNet数据相关连接论文地址下载本人项目地址(已修复Bug)训练数据下载地址⚠️以下代码选自Sierkinhane的GIT,并且适配新的wider数据。并非单纯copy训练图片下载:准备训练Pnet的图片数据 训练MTCNN的时候,是分别对PNet、RNet、ONet三个网络分开训练,这里先说明PNet的数据处理Sierkinhane的代码中box shape是x1,y1,x2,y2。但是WIDER_FACE的MAT是x1,y1,w,h。所以不能直接使用。原创 2020-05-21 18:28:40 · 1815 阅读 · 1 评论 -
Pytorch实现MTCNN详解—模型训练阶段1
Pytorch实现MTCNN详解(二)相关连接论文地址下载本人项目地址(已修复Bug)训练数据下载地址预处理训练数据在训练MTCNN之前,我们需要收集数据集合,wider_face 提供了训练数据。⚠️以下代码选自Sierkinhane的GIT,并且适配新的wider数据。并非单纯copyimport osfrom scipy.io import loadmatclass DATA: def __init__(self, image_name,bboxes):原创 2020-05-21 17:11:45 · 1618 阅读 · 0 评论 -
SaaS金融分析系统
内容待续原创 2020-04-21 20:58:23 · 372 阅读 · 0 评论 -
MediaSoup-demo模块增加nginx
MediaSoup-demo模块增加nginxmediasoup-demo app 模块只能通过 gulp dist,不满足高并发、高新能要求。这里添加nginx docker容器,代理app模块。该项目使用docker容器技术,不会污染宿主机环境。docker搭建mediasoup参考以下项目:使用docker 搭建MediaSoup服务github项目路径docker hub 路径...原创 2020-04-10 10:13:15 · 1436 阅读 · 0 评论 -
使用docker 搭建MediaSoup服务
使用docker 搭建MediaSoup服务mediasoup-demo 编译并且安装在docker容器上既复杂又浪费时间,我在这里编译一个已经安装好的镜像,并且增加了nginx模块。提升了Web端的性能。github项目路径docker hub 路径环境变量说明DEBUGDOMAINPROTOO_LISTEN_PORTMEDIASOUP_LISTEN_IPMEDIASOUP_...原创 2020-04-10 10:11:39 · 4012 阅读 · 3 评论 -
Mediasoup基本框架学习
Mediasoup 的基本结构mediasoup designmediasoup 模块javaScript层开发的对外接口层,Node.js服务。提供Signal服务(房间服务、SDP、等数据)。C/C++ 模块,用于媒体数据交换层(ICE, DTLS, RTP and so on),UDP类型数据交换。两个模块相互通信,但是开发者无需关心C/C++模块,只要关心JavaScri...原创 2020-04-09 11:56:46 · 2579 阅读 · 0 评论 -
WebRtc 框架学习(一)
WebRtc WebRTC是由Google主导的,由一组标准、协议和JavaScript API组成,用于实现浏览器之间(端到端之间)的音频、视频及数据共享。WebRTC不需要安装任何插件,通过简单的JavaScript API就可以使得实时通信变成一种标准功能。WebRtc协议详解 WebRTC 传输层主要采用UDP协议,因为TCP讲究可靠、有序,如果丢包,后...原创 2020-04-07 13:12:02 · 1560 阅读 · 0 评论 -
通过MINIKUBE安装K8S测试环境(国内安装)
minikubeMinikube是一个快速搭建单节点Kubenetes集群的工具,通过使用minikube结合虚拟机(Virtual Box 、VM 、Hyper-V)快速在自己的电脑上搭建开发测试环境。由于阿里云提供的方案对于新版本minikube有部分错误,这里进行改进。Windows(Hyper-V模式):MINIKUBE安装地址:下载地址选择版本:1.8.2下载后修改文件...原创 2020-03-24 14:33:10 · 1759 阅读 · 0 评论 -
基于K8S搭建VR直播/点播云服务
VR直播VR 应用场景:VR教育直播应用在一些专用化的职业教育,这些场景需要很强的现实体验。比如医护人员现场培训、电视媒体直播、远程教育等。VR 硬件需求:与普通直播相比,VR直播硬件有所改变,直播设备不在是普通摄像机;而是VR全景相机,直播观看则需要VR眼镜。教育行业由于需要做笔记等特殊原因,不能带头盔,所以需要裸眼VRVR网络需求:一段几秒钟的VR视频数据流...原创 2020-03-24 11:05:53 · 1344 阅读 · 0 评论 -
基于K8S搭建HLS直播/点播云服务
基于K8S搭建HLS直播/点播云服务Nginx本身是一个非常出色的HTTP服务器,FFMPEG是非常好的音视频解决方案.这两个东西通过一个nginx的模块nginx-rtmp-module,组合在一起即可以搭建一个功能相对比较完善的流媒体服务器。同时利用K8S集群管理,快速完成直播点播云服务。Pod模块架构图模块讲解待续容器编排待续该模式缺点由于通过读取ts文件的方式进行流媒体...原创 2020-03-17 10:30:15 · 2670 阅读 · 0 评论 -
Kubernetes存储
Kubernetes存储在Docker的设计实现中,容器数据是临时性的,当容器销毁或重启时存储在容器内部数据将全部丢失但实际上很多容器化应用是需要持久化保存数据,K8S的POD和容器一样,重建销毁数据就会丢失,K8S也通过挂载数据卷的方式为POD数据持久能力,这些数据卷以Pod为最小单位进行存储,通过共享存储或分布式存储在POD之间实现共享。存储使用场景K8S是由Master节点以及N...原创 2020-03-16 14:07:46 · 665 阅读 · 0 评论 -
Kubernetes 核心概念 StatefulSet、Service
StatefulSetStatefulSet旨在与有状态的应用及分布式系统一起使用。StatefulSet使用起来相当复杂,当应用具有以下特点时才建议使用StatefulSet有唯一的稳定的网络标识符需求。有稳定性、持久化数据存储需求。有序的部署和扩展需求。有序的删除和终止需求。有序的自动滚动更新需求。如果应用不需要任何稳定的标示、有序的部署、删除和扩展,则该应用应使用一组无状态副...原创 2020-03-11 16:29:10 · 883 阅读 · 0 评论 -
Kubernetes 核心概念Label、RC、HA、Deployment
LabelKubernetes使用Label的键值对来标识附加到系统中的各种API(Pod、Service、Replication Controller 等)每个API可以有多个Label,但是每个Label的Key只能是唯一的值。相应地LabelSelect 则是针对匹配对象的标签进行查询。Label和LabelSelect是K8s主要的分组机制如果有多个标签,LabelSelect可以...原创 2020-03-11 14:39:14 · 602 阅读 · 0 评论 -
Kubernetes 核心概念 POD及网络
Pod概念pod 是k8s的基本操作单元,是应用运行的载体。包含一个或多个容器。整个k8s系统都是围绕POD围绕展开的。比如如何运行POD,保持POD数量、如何访问POD等。Pod模板#pod.ymlapiserver: v1 # Kubernetes的API版本声明,目前是V1kind: pod # API对象的类型声明,当前类型是P...原创 2020-03-10 15:12:52 · 1014 阅读 · 0 评论 -
基于Docker的新型PaaS平台(一)
PaaS模式 PaaS作为云计算重要的一类服务,为用户提供完整的应用生命周期管理和相关资源服务。 用户可以通过PaaS平台完成应用的构建、部署、运维管理,无需自行搭建计算执行环境, 如安装服务器,操作系统,中间件和数据库等。IaaS提供虚拟硬件、系统资源, PaaS负责部署、运维,实现弹性伸缩和高可用等功能。传统PaaS有很多局限性:只能提供有限的开发语言,框架和中间件的支持...原创 2020-03-09 14:37:08 · 977 阅读 · 0 评论 -
HLS-搭建Nginx流媒体点播服务(SaaS docker)
HLS-搭建Nginx流媒体服务器Nginx本身是一个非常出色的HTTP服务器,FFMPEG是非常好的音视频解决方案.这两个东西通过一个nginx的模块nginx-rtmp-module,组合在一起即可以搭建一个功能相对比较完善的流媒体服务器。同时利用Docker容器,编写nginx-rtmp容器,简单高效。docker-compose.yml 编写直接使用docker hub 上的 rt...原创 2020-03-06 17:44:01 · 2988 阅读 · 0 评论 -
微服务---服务发现架构
微服务概念微服务是将单一服务按照业务独立分开,共同组成稳定的应用系统。每个服务可单独部署、弹性拆分、相互通信。服务的拆分符合低耦合,高内聚的特性。从而降低每个服务间的代码复杂度,提高整个系统稳定性。所有服务遵循统一的分布式管理,统一的通信机制。每个微服务可以使用不同的代码开发。微服务架构可以看做是面向服务架构和分布式架构的拓展,使用更细粒度的服务和一组设计准则来考虑大规模的复杂系统架构设计。...原创 2019-11-22 15:53:09 · 273 阅读 · 0 评论 -
CMake 项目管理
CMake进行复杂工程管理与目录结构设计项目目录结构如下: SEED:总项目 SEED_BP: 项目公共依赖库 SEED_SERVER:业务后台服务 SEEDOTHER:其他后台服务 SEEDOUT:项目输出目录已经依赖目录 2.目录结构图项目文件结构图 3.CMakeList.txt编写 3.1.工程总配置...原创 2019-06-03 18:03:49 · 1096 阅读 · 0 评论 -
通过docker容器控制宿主机其他容器---监控容器
Docker架构Docker框架主要由Docker Client、Docker Daemon、Docker Registry、Driver、Docker Container五个模块组成,另外还有Graph和Libcontainer两个辅助模块,如下图所示:用户通过docker-client向daemon发送命令操作docker,根据这个原理,可以通过挂载目录的方式让容器发送命令来操作其它do...原创 2019-11-13 16:12:02 · 1370 阅读 · 0 评论 -
利用MongoC自动化配置复制集(replSet)
MongoDB复制集简介Mongodb复制集由一组Mongod实例(进程)组成,包含一个Primary节点和多个Secondary节点,Mongodb Driver(客户端)的所有数据都写入Primary,Secondary从Primary同步写入的数据,以保持复制集内所有成员存储相同的数据集,提供数据的高可用。MongoDB C Drivermongoc 是官方的mongo驱动,用于通过...原创 2019-11-12 12:32:37 · 353 阅读 · 0 评论 -
PaaS-云性能监控解决方案
PaaS-云性能监控解决方案1 性能监控1.1 概念介绍grafana:度量仪表盘图形界面性能监控工具。heapster: 容器集群监控和性能分析工具。InfluxDB:开源的分布式时序数据库。1.2 运行机制• Grafana 是业界使用最为广泛的开源监控展示面板,高效、可灵活定制。• 系统可以对容器的性能数据进行集中式的采集存储,通过heapster从各个Node上获取相...原创 2019-09-09 09:37:21 · 812 阅读 · 0 评论 -
PaaS-云计算实时性能监控工具(netdata)
简介Netdata是一个高度优化的性能监控工具,它为Linux系统,docker,SNMP服务等提供实时的性能监测。它用可视化的手段,将被监测者最细微的细节,展现了出来。这样,你便可以清晰地了解你的系统和应用程序此时的状况。由于云计算特性,需要将netdata容器化,目的方便部署使用,简化配置流程。经过几年的发展,以 Docker 为代表的容器技术正逐渐引领着未来,基于kubetnetes...原创 2019-09-05 15:25:19 · 749 阅读 · 0 评论 -
PaaS•ELK-云计算分布式日志管理
1.概念介绍:ELK: 业界使用最为广泛的开源日志管理平台,由Elasticsearch,logstash和kibana三部分组件组成 Elasticsearch:开源分布式搜索引擎,用来存储各类日志 Logstash:用来对日志进行收集、分析,并且将收集结果发给Elasticsearch。 Kibana:提供web界面,接口用作查询和可视化日志 filebeat:轻量级日志采...原创 2019-09-05 14:56:40 · 354 阅读 · 0 评论