大数据-k8s集群-资源记录

本文介绍了云原生环境下的ServiceMesh技术,特别是 Istio 在 Kubernetes 中的应用。深入探讨了 Kubernetes 的 Admission Webhook,以及腾讯云在 Kubernetes 资源优化方面的实践,包括节点资源超卖方案和 GPU 管理。同时,文章讨论了扩展 Kubernetes 的方法,如 Kubectl Plugin 和 Scheduler。此外,还涉及了 etcd 官方文档、GPU 集群资源碎片问题的解决方案以及阿里云的资源编排服务。对于并行计算,提到了 Dask 如何解决 Pandas 中的问题以及如何在 Kubernetes 上部署 Dask 集群。最后,文章涵盖了 Spark 基础知识、PySpark 示例和 Shuffle 参数调优。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

Service Mesh介绍: 什么是 Service Mesh - 知乎

云原生体系下的技海浮沉与理论探索: http://3ms.huawei.com/km/blogs/details/9657383

深入理解 Kubernetes Admission Webhook: 深入理解 Kubernetes Admission Webhook-阳明的博客|Kubernetes|Istio|Prometheus|Python|Golang|云原生

腾讯自研业务上云:优化Kubernetes集群负载的技术方案探讨: 腾讯自研业务上云:优化Kubernetes集群负载的技术方案探讨 - 腾讯云开发者社区-腾讯云

节点资源超卖方案的实现: 节点资源超卖方案的实现 - 编程猎人

扩展 Kubernetes 之 Kubectl Plugin: 扩展 Kubernetes 之 Kubectl Plugin - 腾讯云开发者社区-腾讯云

扩展 Kubernetes 之 Scheduler:  扩展 Kubernetes 之 Scheduler - 腾讯云开发者社区-腾讯云

etcd官方文档: 官方文档 - etcd官方文档中文版

GPU集群的资源碎片问题: 如何解决GPU集群的资源碎片问题? - 知乎

GPU Mounter - 支持GPU热挂载的Kubernetes插件: GPU Mounter - 支持GPU热挂载的Kubernetes插件 - 知乎

Linux内存管理的伙伴堆算法

阿里云首页-->产品,可以了解很多基础知识

阿里云开发者社区-课程中心: 学习中心课程列表页 — 阿里云开发者社区

阿里云资源编排: 资源编排ROS_云计算资源自动化部署_解决方案模版_弹性计算-阿里云

阿里云运维编排: 运维编排服务OOS-自动化运维平台-管理ECS、RDS、SLB、VPC等云产品-阿里云

腾讯云专栏: Kubernetes的全部内容 - 腾讯云开发者社区-腾讯云

腾讯云k8s专栏: Kubernetes的全部内容 - 腾讯云开发者社区-腾讯云

k8s webhook server开发教程: Kubernetes admission webhook server 开发教程 - ZengXu's BLOG

linux的进程栈和线程栈: Linux中的进程栈和线程栈 - 知乎

TinyFlow介绍: https://tinydoc.cloudbu.huawei.com/cdocs/tinyflow-doc/

【dask解决pandas并行计算问题】: 使用Dask DataFrames 解决Pandas中并行计算的问题 - 腾讯云开发者社区-腾讯云

【dask集群快速搭建】: 【干货】Dask快速搭建分布式集群(大数据0基础可以理解,并使用!)_肥宅_Sean的博客-优快云博客_dask分布式

【k8s安装dask】:Deploy and Scale your Dask Cluster with Kubernetes

【Spark基础知识】想学习Spark?先带你了解一些基础的知识 - 腾讯云开发者社区-腾讯云

【pysaprk示例】PySpark Tutorial For Beginners | Python Examples - Spark by {Examples}

【Spark Shuffle原理、Shuffle操作问题解决和参数调优】Spark Shuffle原理、Shuffle操作问题解决和参数调优 - 混沌战神阿瑞斯 - 博客园

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值