- 博客(30)
- 收藏
- 关注
RSS订阅转载 Azure 数据资源管理器 -- 当 ADX 遇上 ML
本月初，Azure Data Explorer （后面简称 ADX） 已经在 Azure 中国区发布预览。ADX 作为一款海量数据的交互查询引擎，良好的数据格式兼容性（结构化，半结构化，非结构化），出色的性能可以支持亿级数据秒级的查询。今天这篇文章不做 ADX 的通用使用说明书，我们换一种玩法，如今很多数据分析产品已经将计算能力开放给用户，使客户可以实现对数据近缘计算，这...
2019-07-23 13:51:00
452
转载 多快好省 -- Azure VMSS AI 推理篇
上一期文章介绍了 Azure Batch + Low Priority VM 的方式实现了成本优化的训练架构，其实训练这种任务式的场景在可接受中断的情况下非常适合 Low Priority VM 来执行，即使中途被中断了也没有关系，可以重新来执行。推理场景就略有不同，推理通常是一个 Always On 永久在线的服务，不太接受中断。Low Priority VM 同时支持...
2019-07-01 08:18:00
16333
转载 多快好省 -- Azure Batch AI 训练篇
今天我们来说一说如何通过 Azure Batch 实现多快好省的 AI 训练。多：Azure 云平台提供各种规格型号的计算服务资源，从 CPU 到 GPU 再到 FPGA，响指一打最新的 V100 卡加持 NVLINK 手到擒来。快：Azure 平台除了基础的计算资源外，还提供其它丰富的产品和工具，使工作效率大大提升，以 Azure Batch 做 AI 训练为例，Bat...
2019-06-30 23:55:00
432
转载 Azure NSG Flow Log 引发的自嗨 -- 日志查询分析
上一篇中通过 Function 服务来实现了 NSG Flow Log 的 ETL 和流化处理，然后将处理好的 NSG Flow Log 推入到 Event Hub 中。NSG Flow Log 的分析引擎这里选用 Azure Data Explorer，是因为 Data Explorer 有强大的查询能力，对时序数据有良好的支持，内置机器学习能力，以及和 Azure 上...
2019-06-14 14:32:00
347
转载 Azure NSG Flow Log 引发的自嗨 -- 日志 ETL 流式处理
上一篇中我们已经完成了事件驱动的日志注入的事件驱动的部分，本篇我们继续介绍关于由事件驱动产生的增量 NSG Flow Log 如何进行 ETL 处理，然后流式的方式注入到 Data Explorer 分析引擎中。我们先来回顾一下整体架构图，当 NSG Flow Log 的日志事件产生后，我们通过调用 Function 服务来进行对日志的 ETL 然后再写入到 EventH...
2019-06-03 16:08:00
306
转载 Azure NSG Flow Log 引发的自嗨 -- 事件驱动的日志注入
上一回我们对 NSG Flow Log 方案的整体架构做了介绍，大家可以参考下面的架构图，快速回忆一下。本文我们主要聚焦在事件驱动的日志注入部分，即架构图中流程中的第一到第三步。 NSG Flow Log 目前支持的 Export 方式只有持久化到 Blob 存储中，使用的是 Block Blob 类型，NSG Flow Log 以 1 分钟...
2019-05-28 14:42:00
243
转载 Azure NSG Flow Log 引发的自嗨
最近无意间翻看手册，发现 Global Azure 发布了 NSG Flow Log v2，在原有 Log 的基础上增加了 Flow State，Flow Bytes Statistics，Flow Packet Statistics，这些 Telemetry 字段对于从网络层面做运维和运营非常有帮助，比如想做流量分析，分析安全事件等，无限的遐想。# NSG FL...
2019-05-23 11:13:00
227
转载 Azure 托管身份服务 -- 无密代码访问
最近爆出的在代码仓库中泄露密钥的新闻屡见不鲜，今儿我们就来聊聊如何在 Azure 中有效管理代码中的密钥。Azure 中的服务通常可以分为控制平面和数据平面，控制平面通常指资源的CRUD操作（比如创建xx Azure 资源服务），数据平面通常指与服务的数据连接（比如在 Azure Blob Storage 中做 Blob 的 CRUD 操作）。很多小伙伴常常把 RBAC (...
2019-03-26 02:01:00
301
转载 Azure 虚拟机计划运维管理
今天我们来聊聊 Azure 虚拟机运维的计划运维管理（Scheduled Event），在微软云 Azure 上会出现计划性的运维事件一种是 Azure 平台发起的，一种是客户自主发起的，对于这种可预知的运维事件，是否可以进行有效的发现-管理-响应呢，下面我们就来做个小 demo 来带大家 Get 这个技能。发现： Azure 上支持将计划性运维事件发...
2019-03-01 12:40:00
308
转载 Azure GPU 主机 Benchmark
Step 1：CUDA_REPO_PKG=cuda-repo-ubuntu1604_9.1.85-1_amd64.debwget -O /tmp/${CUDA_REPO_PKG} http://developer.download.nvidia.com/compute/cuda/repos/ubuntu1604/x86_64/${CUDA_REPO_PKG} ...
2018-11-26 23:30:00
154
转载 微软容器周边玩具之 Brigade 篇
今儿咱们撩一撩 Brigade，AZURE 的童鞋出去讲容器总会把 Helm，Draft，Brigade 挂在嘴边，这 Brigade 到底能做什么今天我们就来说一说。K8s 中有一种调度模式叫 Job，Job 不名思意就是任务，以达到某一目标定义的一系列执行，Job 其实非常适合在 K8s 中执行，容器呼之即来挥之即去的特点，可以非常方便的做任务的编排，任务执行中申请资...
2018-11-26 01:15:00
280
转载 TechSummit2018 -- Network 实验手册
Tech Summit 2018Hands-on labAzure Network Best Practise Hands-on LabContentsOverview....................................................................... 3...
2018-10-26 17:25:00
343
转载 AZURE 日志分析自动告警
小伙伴们好久不见，今天我们来聊聊中国 AZURE 的日志分析告警。为什么是中国 AZURE，目前中国 AZURE 的 Monitor 服务和运维相关周围服务和 Global 是有所不同的，所以有些功能和设计不能复制和套用全球版 AZURE 的架构。我们先看一下中国 AZURE 运维管理方面一些平台原生功能的缺失，1. Azure Monitor 支持新的 Metric 指标...
2018-09-18 23:09:00
474
转载 China AZURE Infniband Powered GPU VM
最近 China Azure 上刚刚发布了 NCv3 系列的 GPU 虚拟主机，细心的小伙伴可能注意到，NCv3 中有一款型号为 NC24rs 的虚拟主机，这个字母 r 来的些许蹊跷，代表什么意思呢？通过查阅官网对于该主机的介绍说明可见，原来 r 代表 RDMA，表示该虚拟主机支持 infiniband 来加持的 RDMA 网络。infiniband 可以帮计算节点获得高...
2018-08-30 00:30:00
644
转载 Azure Multiple IP 带你爬出新高度
爬虫爬不动，IP地址不够用，今儿咱们来搞一搞。Azure 虚拟机单网卡多 IP 可以支持在单个网卡上最多绑定256个 IP 地址， 并且同时每个 IP 同时支持内网 IP 和 公网 IP。什么搞一台机器我就能拥有 256 个 公网 IP，是滴小伙伴，这只是第一波福利呦，配合负载均衡使用效果会更好欧，一台机器不够用可以通过负载均衡水平扩展，第二波有没有感动到你。好了废话少说...
2018-06-29 08:22:00
287
转载 Azure AppGW SSL Offload 的快速打开方式
很多童鞋在日常项目中经常会碰到 SSL 终结卸载的需求，随着证书、域名的引入复杂度骤增，整个人都不好了。今天我来带大家玩一下 AppGW SSL Offload 的快速打开方式，希望通过这个小栗子帮助大家快速上手 AppGW SSL Offload，以后客户有关于SSL Offload的场景都可以快速帮客户搭建一个PoC场景。 开始之...
2018-06-04 16:38:00
279
转载 Azure Cognitive Service 访问优化
目前 MSFT 很多 Cognitive Service 在 China Azure 还没有落地，所以很多小伙伴只能使用国际版的 Azure 提供的 Cognitive 服务。但是这样存在两个问题，1. 使用体验，因为需要通过 Internet 进行调用，访问延迟及质量得不到保证。2. 有些 Cognitive 服务并不是所有 Global Azure 的 Region 都...
2018-05-30 23:40:00
333
转载 Azure Managed Disk 共享不灵，EventGrid + LogicApp 来搞
前言： 童鞋们估计已经抱怨过n次这个问题，为啥托管磁盘不能被用来制作镜像或者制作快照后在其他订阅或其它区域（Region）来创建虚拟机，说好的 Infrastructure as a code 呢，刚刚激动的做好了镜像，把应用架构描述成 infra code，一键点亮。跨了订阅，跨了区域玩不转啦，XX**。不要慌，这个事儿并非没有解，就是稍微麻烦，你可以把托管磁盘做导出...
2018-05-17 00:53:00
176
转载 AZURE ACI -- 无服务器化容器解决方案
标题很对仗，目的很明确，蹭热度！！！前天看了 A 站的童鞋搞了一个，今儿我换个姿势用软 A 也搞一个。Azure Container Instance 服务是一种无服务器化的容器解决方案。ACI 服务是一个完全托管的容器服务，客户不需要搭建和维护容器计算集群（如用 VM 去搭建 Swarm 或者 Kubernetes ），客户管理视图和颗粒度在容器，可以直接进行容器消费，...
2018-04-19 12:15:00
453
转载 Azure Logic Apps + Azure Container Instance 实现Serverless + Codeless 架构
之前和几个客户交流都提到希望快速频繁变更服务器的公网地址，想到的有几种方案来做： 1. 如果 VM 使用实例级公网 IP，可以通过 SDK 动态调整 VM NIC 上所关联的公网 IP 地址； 2. 如果 VM 使用 SLB 的公网 IP，可以通过 SDK 动态调整 SLB 的 公网 IP; 但是上述方法都有些不足之处，方法 1 如果客户有大量 VM...
2018-02-23 02:04:00
303
转载 AZURE K8S NETWROK 实战
今儿我们来念叨念叨 AZURE NETWROK 在K8S下的实战，有童鞋可能说这东西有啥可说的对容器来说不都是透明的嘛，这么说大体上也没啥毛病，但是捋清楚它的实现会有助于我们来做一些有意思的事情，这里先卖个关子。那我们先来看看要容器网络何用？1. 容器网络的由来容器单机也能玩，CLUSTER下也能玩，跟虚拟化的思路是差不多的。那么问题就来的单节点内部解决通信问题容易，集群下解决跨...
2018-02-06 00:24:00
473
转载 玩转 AZURE SLB 负载均衡 --- 实现主备模式负载均衡
各位童鞋，好久不见，一段时间没露面了，庆祝付出献上小文一篇。有不少童鞋在问 AZURE 的负载均衡支不支持主备模式，答案是不支持，准确来说是原生不支持，AZURE 的 SLB 三四层负载均衡器原生只支持主主模式，即后端可用池中健康主机都会被负载均衡分配流量。但是对于一些场景，还是希望通过主备方式来做，在云端上主备模式可以通过支持主备模式的如NGINX，HAPROXY等解决方案来做，今天这...
2018-01-16 22:02:00
698
转载 MS Ignite 2017 网络服务新功能之高可用-TrafficManager篇
上一篇给大家介绍了AZURE的下一代负载均衡，今天跟大家聊一聊Traffic Manager（智能DNS）。现在很多AZURE的用户还在使用单站点服务（资源全部在Azure的一个Region），对于理想国度的完美应用架构，从灾备以及应用性能的角度出发，多站点部署必不可少的。如何做到异地的灾备，如何做到用户的近源覆盖达成最优响应延迟？Traffic Manager（智能DNS）其实是...
2017-11-06 22:12:00
252
转载 MS Ignite 2017 网络服务新功能之高可用-负载均衡篇
本周可谓普大喜奔的一周，一年一度的MS Ignite大会再次召开，老规矩一大波新产品新功能扑面而来。我最近会抽时间把新功能陆续梳理出来给大家做介绍和演示（排名不分先后，完全取决于Preview的就绪情况）。今天我们先来一篇高可用之负载均衡篇，AZURE在负载均衡产品上从Day1的三四层负载均衡到Day2的四到七层负载均衡，产品在不断快速迭代演进，本次微软发布了第二代三四层负载均衡产品，相...
2017-09-29 03:21:00
211
转载 Azure NSG网络安全组日志分析
好久不见，最近很多小伙伴说Azure的监控不大灵光，所以就去回去好好看了一下目前Azure上服务的监控支持情况。整理来看AZURE目前GLOBAL从运维监控角度的支持好于国内AZURE，无论是基础组件的日志支持能力还是平台级的运维监控PaaS工具都是比较完整的，对应到国内AZURE应该只是时间的问题。今天的博客以NSG网络安全组日志监控分析为例，为大家抛砖引玉，希望对大家有所启发。...
2017-09-20 14:54:00
785
转载 Azure快速制作自定义镜像
在Azure中原生的IaaS服务在虚拟机计算服务模块为大家主要提供两种服务，一种是原生的操作系统虚拟计算实例（如CentOS/Ubuntu Linux，Windows），一种是Azure与Ecosystem合作在应用市场上发布的Day1装载好相关应用的虚拟计算实例（如Wordpress）。对于大部分用户在批量创建系统时，通常会有定制化虚拟实例的需求，通常客户会在虚拟机算实例的操作系统上进...
2017-06-15 10:27:00
1068
转载 Infrastructure Auto Depolyment on Azure
上周给各位小伙伴扒了扒Azure Resource Template的使用，大家应该已经通过模板方式交付基础架构有了一些体会。今天我们的就来在深入一些，经过上一篇介绍Resource Template的部署文章，我们仅仅是向Infrastructure As Code迈出了第一步，为什么这么讲？因为我们在谈论交付的时候可以有不同的界面，比如把界面划定在IaaS，PaaS，SaaS等，最理...
2017-06-10 20:09:00
157
转载 扒一扒AZURE Resource Template
最近AZURE发布了ARM模式（Azure Resource Manager），其中包含了对于Resource Manager Template的支持。什么是Resource Template？我们先来看一下AZURE在ARM模式下的逻辑架构。 对于Day1接触共有云的小伙伴，通常会习惯通过Azure Portal门户来完成相关服务及资源的配置交付（如创建虚拟云主机，虚拟网络，M...
2017-06-03 22:06:00
498
转载 Azure创建隐藏版本VM实例
这两天有童鞋抓狂的问之前在Azure Resource Manager Portal上还有Centos 7.1实例，怎么突然就下架啦。这可怎么办，别着急看了下面的介绍，一切就都妥了。NOTE：本文下述内容均以AZURE CLI 1.0为例，同理在AZURE Power Shell中，以及通过resource template也可以实现相同效果。在azure.cn小伙伴们可以容易查...
2017-05-26 00:09:00
265
转载 Azure传输vNet实现Hub-Spoke模型S2S连接
在Azure上很多小伙伴有vNet互联互通的需求。目前在Azure中在跨区域场景中可以选用vNet Gateway通过S2S实现互通，同区域内可以通过vNet Peering实现互通。以上是简单的两个vNet互通的场景，当有多个vNet之间实现Any to Any的互通时，通过以此两两互联互通的方法工作量及复杂度明显过高。有没有办法可以更简单的实现Full Mesh Any to Any...
2017-05-25 08:59:00
743
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人