- 博客(21)
- 收藏
- 关注
原创 海量数据大课学习笔记(16)-热恋的感觉-海量数据下的分库分表 技术栈讲解一-小滴课堂
简介: 大话业界常见分库分表中间件介绍业界常见分库分表中间件Cobar(已经被淘汰没使用了)TDDL淘宝根据自己的业务特点开发了 TDDL (Taobao Distributed Data Layer)基于JDBC规范,没有server,以client-jar的形式存在,引入项目即可使用开源功能比较少,阿里内部使用为主Mycat地址Java语言编写的MySQL数据库网络协议的开源中间件,前身 Cobar遵守Mysql原生协议,跨语言,跨平台,跨数据库的通用中间件代理。...
2022-08-30 17:34:58
433
原创 海量数据大课学习笔记(15)-如漆似胶-海量数据下的分库分表策略讲解-小滴课堂
简介: Mysql数据库⽔平分库分表常⻅策略介绍-range水平分库分表,根据什么规则进行?怎么划分?方案一:自增id,根据ID范围进行分表(左闭右开)规则案例1~1,000,000 是 table_11,000,000 ~2,000,000 是 table_22,000,000~3,000,000 是 table_3…更多优点id是自增长,可以无限增长扩容不用迁移数据,容易理解和维护缺点大部分读和写都访会问新的数据,有IO瓶颈,整体资源利用率低。...
2022-08-30 15:07:00
396
原创 海量数据大课学习笔记(13)-账号微服务注册-登录功能开发完善-小滴课堂
小滴课堂,旨在让编程不在难学,让技术与生活更加有趣。随着互联网+的时代,在线教育技术越来越便捷,小滴课堂依托在线教育时间以及空间上的便利,为广大IT从业者提供了更为方便、快捷的学习交流途径、提供大量高质量的IT在线课程。更多教程请访问xdclass.net(添加VX:xdclass99)简介:账号微服务注册接口介绍和业务代码编写微服务注册接口开发请求实体类编写controllerservice手机验证码验证密码加密(TODO)账号唯一性检查(TODO)插入数据库。
2022-08-23 18:00:00
422
原创 海量数据大课学习笔记(14)-初恋的感觉-海量数据下的分库分表知识阶段一-小滴课堂
面试官:这边有个数据库-单表1千万数据,未来1年还会增长多500万,性能比较慢,说下你的优化思路思路。
2022-08-23 18:00:00
262
原创 海量数据大课学习笔记(12)-账号微服务-阿里云OSS接入实战-小滴课堂
小滴课堂,旨在让编程不在难学,让技术与生活更加有趣。随着互联网+的时代,在线教育技术越来越便捷,小滴课堂依托在线教育时间以及空间上的便利,为广大IT从业者提供了更为方便、快捷的学习交流途径、提供大量高质量的IT在线课程。更多教程请访问xdclass.net(添加VX:xdclass99)简介:分布式文件存储常见解决方案介绍目前业界比较多这个解决方案,这边就挑选几个介绍下MinIO。...
2022-08-16 17:49:48
860
原创 海量数据大课学习笔记(9)-架构核心技术-池化思想-异步结合 性能优化最佳实践《上》-小滴课堂
小滴课堂,旨在让编程不在难学,让技术与生活更加有趣。随着互联网+的时代,在线教育技术越来越便捷,小滴课堂依托在线教育时间以及空间上的便利,为广大IT从业者提供了更为方便、快捷的学习交流途径、提供大量高质量的IT在线课程。更多教程请访问xdclass.net简介:讲解Jmeter里面GUI菜单栏主要组件添加->threads->线程组(控制总体并发)线程数:虚拟用户数。一个虚拟用户占用一个进程或线程。.........
2022-08-09 18:00:00
694
原创 海量数据大课学习笔记(10)-架构核心技术-池化思想-异步结合 性能优化最佳实践《下》-小滴课堂
小滴课堂,旨在让编程不在难学,让技术与生活更加有趣。随着互联网+的时代,在线教育技术越来越便捷,小滴课堂依托在线教育时间以及空间上的便利,为广大IT从业者提供了更为方便、快捷的学习交流途径、提供大量高质量的IT在线课程。更多教程请访问xdclass.net。.........
2022-08-09 18:00:00
810
原创 海量数据大课学习笔记(8)-账号微服务注册模块+短信验证码+阿里云OSS开发实战-小滴课堂
小滴课堂,旨在让编程不在难学,让技术与生活更加有趣。随着互联网+的时代,在线教育技术越来越便捷,小D课堂依托在线教育时间以及空间上的便利,为广大IT从业者提供了更为方便、快捷的学习交流途径、提供大量高质量的IT在线课程。简介:介绍微服务注册功能和流程介绍功能需求使用手机号注册,已经注册的手机号不能重复注册,密码不能使用简单的MD5加密用户上传头像需要用文件存储安全需求高并发下账号唯一性 注册邮箱或者手机验证码不能被恶意调用验证码+唯一索引头像文件存储访问方便扩容和管理阿里云OSS。............
2022-08-05 18:00:00
464
原创 海量数据大课学习笔记(7)-商用短链平台实战-账号微服务+流量包设计-滴课堂
小滴课堂,旨在让编程不在难学,让技术与生活更加有趣。随着互联网+的时代,在线教育技术越来越便捷,小D课堂依托在线教育时间以及空间上的便利,为广大IT从业者提供了更为方便、快捷的学习交流途径、提供大量高质量的IT在线课程。...............
2022-08-05 13:45:56
600
原创 海量数据大课学习笔记(6)-短链平台项目创建+git代码管理+开发分层规范讲解--小滴课堂
小滴课堂,旨在让编程不在难学,让技术与生活更加有趣。随着互联网+的时代,在线教育技术越来越便捷,小D课堂依托在线教育时间以及空间上的便利,为广大IT从业者提供了更为方便、快捷的学习交流途径、提供大量高质量的IT在线课程。简介开源中国Gitee仓库-介绍和项目纳入版本管理+ignore文件配置置Git介绍基于git协议的代码仓库github全球最大同性交友社区gitee开源中国gitlab开源的git仓库平台,阿里等大厂就是基于这个搭建codeup阿里云上的免费git仓库https。............
2022-07-29 17:30:52
698
原创 海量数据大课学习笔记(5)-阿里云Linux服务器选配和常用中间件环境安装-小滴课堂
小滴课堂,旨在让编程不在难学,让技术与生活更加有趣。随着互联网+的时代,在线教育技术越来越便捷,小D课堂依托在线教育时间以及空间上的便利,为广大IT从业者提供了更为方便、快捷的学习交流途径、提供大量高质量的IT在线课程。.........
2022-07-29 17:30:40
277
原创 海量数据大课学习笔记(4)-商⽤短链平台-功能需求介绍和微服务拆分讲解-小滴课堂
简介学以致用-短链平台实战需求文档拆分和总结看了前面的方法论和拓展知识,我们再来巩固下需求文档和功能小滴短链商用平台需求文档地址https。
2022-07-22 18:09:01
779
原创 海量数据大课学习笔记(3)-商用短链平台介绍和技术Leader常用方法论介绍-小滴课堂
简介短链平台业务介绍+需求背景说明一、什么是短链平台,应⽤场景有哪些二、短链长啥样?三、业务背景为啥需要短链?(一)公司电商产品推广、业务活动页、⼴告落地页缺少实时【数据反馈和渠道效果分析】(二)老项目业务推⼴【没⼈维护,⽆法做埋点】需要统计效果例子https(二)APP和营销活动发送营销短信链接过⻓,【浪费短信发送费用】(三)国内【反垄断后】微信、抖⾳、淘宝流量互通,很多知识付费公司需要做私域流量、社群运营(四)可以对外做产品输出,实现商业化能力增加公司营收。............
2022-07-22 18:08:58
680
原创 海量数据大课学习笔记(2)-不在其位要谋其政,技术Leader能力模型提升-小滴课堂
简介:职级的能力模型,不要只顾自己的⼀亩三分地一、前⾔先说(一)可能同学到现在都不知道【商用短链平台】是什么,没关系,后续讲完前面几章我们就开始了(二)前⾯几章是讲产品方法论,就是技术Leader需要掌握的内容(三)不管你是否校招、社招、⼯作5到10年的⼈1、不要说【⼆当家⼩D】瞎扯淡!!!不讲技术只讲虚幻的2、我需要给⼤家打个强心剂!!!!3、⼤课软硬技能都有,但是层级⾼的或者野心⼤的,就必须学二、【不画⼤饼】看我们课程不会让你成为CTO、阿里P7、P8(一)课程让你成为CTO、阿里P
2022-07-15 15:05:15
231
原创 海量数据大课学习笔记(1)-海量数据处理商用短链平台大课介绍-小滴课堂
简介海量数据处理商用短链平台大课介绍课程核心介绍一、目标岗位能力说明二、适合⼈员简介商⽤短链平台技术栈。
2022-07-15 14:21:11
534
转载 【云原生 • Docker】镜像的迁移与备份、Dockerflie 使用方法
目录一、迁移与备份1. 容器保存为镜像2. 镜像备份3. 镜像恢复与迁移二、Dockerflie1. 认识 Dockerfile2. Dockerfile 常用命令3. 使用 Dockerfile 构建镜像迁移和备份主要有三个操作命令将容器保存为镜像、备份镜像(将镜像导出为一个文件)、镜像的迁移与恢复。迁移与备份在实际操作 Docker 的过程中使用的是非常多的,比如要将一台服务器的镜像迁移到另外一台服务器,就么可以先将镜像保存为一个文件,然后将文件拷贝至另一台服务器,最后进行镜像的恢复来实现。如下,此时
2022-07-08 10:38:15
154
转载 Keras深度学习实战——基于Inception v3实现性别分类
我们已经学习了基于 和 体系结构实现性别分类,除此之外,还有许多其它设计更加巧妙的深度神经网络架构,例如 在保证模型质量的前提下,极大的减少模型参数个数。在本节中,我们将对 模型的核心思想进行介绍,然后使用基于预训练的 体系结构实现性别分类。为了更好理解 模型的核心思想,我们首先考虑以下场景:在数据集中,有一些图像中的对象占据了图像的大部分,但在另一些图像中对象可能仅仅占整个图像的一小部分。如果在两种情况下我们都使用相同大小的卷积核,则将使模型难以同时学习到识别图像中较小的对象和图像中较大的对象
2022-07-08 10:37:35
1135
转载 计算机视觉项目-银行卡卡号自动识别
😊😊😊欢迎来到本博客😊😊😊 本次博客内容将继续讲解关于OpenCV的相关知识,利用项目讲解继续巩固自己得基础知识。 📝目前更新:🌟🌟🌟目前已经更新了关于网络爬虫的相关知识、机器学习的相关知识、算法小案例、目前正在更新计算机视觉-OpenCV的相关内容。 以上得几期内容我们就把所有得计算机视觉得基础相关处理介绍完了,然后我们这里以几个小项目来继续巩固一下前面得基础知识。其实我们本次博客做的银行卡号识别和车牌识别、快递单号识别等等项目之间都是相通的,所以我们掌握了本节课得相关知识,就相当于...
2022-07-01 18:00:00
444
转载 五分钟快速搭建一个实时人脸口罩检测系统(OpenCV+PaddleHub 含源码)
本文主要介绍如何使用OpenCV和PaddleHub实现一个实时人脸口罩检测系统。(公众号:OpenCV与AI深度学习) 从19年疫情爆发到现在,佩戴口罩对大家来说已是常态。应运而生的就有了很多相关应用,如病毒发展预测、口罩佩戴检测以及戴口罩的人脸识别等。 今天介绍的人脸口罩佩戴检测系统主要使用OpenCV和百度飞浆(PaddlePaddle)的PaddleHub提供的检测模型。PaddleHub提供了很多实用的模型,包括图像处理、文字处理、音频处理、视频处理和工业应用等。github地址:ht
2022-07-01 18:00:00
628
转载 Docker实战 -- 部署Redis集群与部署微服务项目
Docker的好处在于:在不同实例上运行相同的容器Docker的五大优点: 、、、、Docker适用于较为小的应用,并发量不大的情况下、微服务为超过10个,建议适用Docker部署,这样也省资源、可减少开发成本。K8S适用于大集群的情况,高并发,并且微服务超过了10个,同时性能也是非常好的,性能好的前提下,开发成本也增加了不少!下面部署如图所示三主三从的Redis集群停掉所有的容器,删除全部记录创建自定义网络redis通过脚本创建六个redis的基本信息启动6个redis容器,并进行数据挂载进入redis-
2022-06-24 13:42:04
266
转载 C / C++ 内存管理
目录1、C / C++内存分布2、C语言中动态内存管理方式 malloc / calloc / realloc / free3、C++内存管理方式 new / delete 操作内置类型 new / delete 操作自定义类型4、operator new与operator delete函数(重要点进行讲解) operator new与operator delete函数(重点) operator new与operator delete的类
2022-06-24 11:42:10
61
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人