如何解决HTTP通道大量消耗CPU问题

最新推荐文章于 2023-05-04 21:35:28 发布
原创 最新推荐文章于 2023-05-04 21:35:28 发布 · 3.5k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#SSL加速卡 #SSL加速 #RSA #硬件SSL加速 #SSL加密

苹果强制使用HTTPS传输了怎么办这个举措意味着什么？

苹果公司强制所有iOS App在2017年1月1日前使用HTTPS加密，这就意味着，如果您的APP如果仍采用HTTP传输，那么，在Apple Store中您的APP将不再能被用户下载使用

为什么这么做？
企业对于网络信息安全的也越来越高，只有保证绝对的加密传输才能确保在线交易及用户个人隐私数据的安全性。由于HTTP明文传输带来的安全事件频发，企业对于HTTP已无信任可言，只有通过HTTPS加密传输才能有效的防钓鱼，防篡改，防监听，防劫持使网站安全可信

开发者应该做什么？
首先需要选择合适的证书为部署https证书做决策，然后调整后台应用实现后台应用全站https，协调运营及开发完成部署完善服务端应用部署及Web服务器配置，最后以安全方式发布应用完成应用改造，重新发布应用。

如何解决因HTTPS通信中因SSL握手造成大量消耗CPU的问题？
目前可以通过采用Cavium硬件SSL加速卡的模式来解决此问题，该卡将SSL握手中复杂的RSA算法offload到卡上实现硬件加速，为接入服务器安装专用的Cavium SSL 硬件加速卡，作用类似 GPU，释放 CPU，能够具有更高的 HTTPS 接入能力且不影响业务程序的。测试某硬件加速卡单卡可以提供 35k 的解密能力，相当于175核 CPU，至少相当于7台24核的服务器，考虑到接入服务器其它程序的开销，一张硬件卡可以实现接近10台服务器的接入能力。联系方式：18910327984，刘先生
使用Process Explorer/Process Hacker和Windbg初步定位软件高CPU占用问题
dvlinker的技术专栏
10-30 1万+
详细讲述如何使用Process Explorer/Process Hacker和Windbg排查软件高CPU占用问题。
使用Process Explorer/Process Hacker与Windbg初步定位软件高CPU占用问题
dvlinker的技术专栏
01-09 3万+
本文详细介绍如何使用Process Explorer/Process Hacker与Windbg初步定位软件高CPU占用问题。
HTTP传输接收服务的一次CPU占比100%排查
安优小青和他的程序生活
09-30 1214
笔者有个HTTP数据接收的项目上线，接收了大量的客户端HTTP请求，部署在三台LINUX 服务器上。 WEB容器采用TOMCAT9，使用JAVA 开发，负责接收客户端持续不断的JSON请求，服务端负责解析为JAVA对象，并对每个对象的属性作合法性验证（比如，某个属性必须是16位的数字和字母且允许|间隔等待）以及相关性验证（比如 某个值必须等于A+B+C）。 上线几日来，每天接收80万的基本流水以及800万条的扩展流水。 突然某天，客户端那边报告，发送时有大量的连接超时（每次请求达到几十秒才能完成，正常
linux服务器http进程CPU异常飙高（轮为免费矿工）
weixin_34235105的博客
01-21 1023
最近两次发现服务器CPU占用率达95%左右，top 查看后发现有个进程占用异常偏高。但却不占用大量宽带资源，并且服务器在请求压力不大的情况下能正常访问，也就是不设置资源报警不易发觉。在第一次发现时还以为是系统代码问题导致死循环直接kill进程，但过一周后再次出现相同的情况感觉不对，应该是被玩了。首先查看下进程信息top从top命令中可以看到一个http的进程占用资源非常大，服...
http 请求cpu_今日艰难笔记http知识储备
weixin_42431713的博客
01-13 396
互联网上的任意角落都存在通信内容被监听的风险。这是因为tcp簇协议的工作机制，世界上的互联网是互通的。监听某段线路只需要通过抓包工具抓取互联网上流动的数据包(帧)，常用抓包工具Wireshark。常用的http协议，通常是明文传递(被盗窃)，无法证明报文的完整性(易被改)，不验证通信者的身份(被伪装)。https针对问题改进。https并不是新协议，是披着SSL协议外壳的Http。通常h...
【网络编程实践】1.3.2 CPU占用率对网络传输的影响
专注于C/C++/Linux领域创作
11-29 1835
注意到1.3.2 中三次测量结果： 1：从内存中读取数据，580MB/s 2：从磁盘中读取数据,115.720MB/s （磁盘性测量结果） 3：从内存中读取数据，1074.876MB/s 可以看到，1 与 3 的测试结果差异很大。原因是 1 在测试时使用 dd 命令也有一定的资源消耗，下面我们测试 dd atom发送端：使用 dd + nc 测试 atom接收端：使用 nc + pv 测试 可以看到此次测试结果约为 455MB/s ， 弱于1.3.2第 3 次测试的1074.876MB/s。 原因
linux 查看java cpu_Linux查看CPU和内存使用情况
weixin_39967938的博客
02-13 406
在系统维护的过程中，随时可能有需要查看 CPU 使用率，并根据相应信息分析系统状况的需要。在 CentOS 中，可以通过 top 命令来查看 CPU 使用状况。运行 top 命令后，CPU 使用状态会以全屏的方式显示，并且会处在对话的模式 -- 用基于 top 的命令，可以控制显示方式等等。退出 top 的命令为 q (在 top 运行中敲 q 键一次)。top命令是Linux下常用的性能分析工具...
NIO在Windows下占用大量CPU资源原因详解
一亩三分地
01-10 3313
1. 现象简述 在项目性能测试过程中发现，同样的代码，连接同样数量（10万）的设备（设备和代码之间通过NIO有大量的数据交互），在Linux下CPU利用率只有20%~30%，而在windows下却一直高于80%。 2. 原因初步排查 通过jconsole分别监控运行在linux和windows上的程序，在【线程】选项卡中发现，windows下启动了大量未命名线程，堆栈信息都类似于下图： 通过Ja...
相关业务问题+系统问题+设计问题整理统计
热门推荐
曾经“等你生日那天”都遥远得像未来，如今却可欢愉的挥手说“下个十年见”
04-07 171万+
业务系统及其他相关面试问题整理：线上相关问题排查+高并发系统的限流+高并发秒杀系统设计+负载均衡+一个网站有 20 亿 url 存在一个黑名单中，这个黑名单要怎么存？若此时随便输入一个 url，你如何快速判断该 url 是否在这个黑名单中？并且需在给定内存空间（比如：500M）内快速判断出？
JVM高频面试基本问题与知识点整理
曾经“等你生日那天”都遥远得像未来，如今却可欢愉的挥手说“下个十年见”
01-16 86万+
JVM高频面试基本问题与知识点整理
C#多线程程序CPU占用巨高，解决方案
余道长的博客
04-06 2434
代码问题！ 代码问题！ 代码问题！ 找whlie循环中是否Sleep线程，Sleep(1)；即可解决问题。
Cpu消耗过高原因分析
weixin_42311196的博客
10-22 1772
Cpu消耗过高原因分析背景现象猜测导致服务器响应变慢的原因排查过程及结果猜测Cpu高消耗的原因Top命令查看进程占用Cpu情况Top -Hp 【pid】查看进程内线程占用Cpu情况发现异常线程占用Cpu情况线程、进程堆栈导出，jmap、jstack命令导出jvm线程对应的堆栈信息分析jvm内存对象信息导出java进程中单个线程的轨迹可使用自动化脚本结果 背景 记录公司一次技术分享，也是一次生产服务器假死的解决过程。 现象 1.前端页面响应慢，用户无法正常工作。 2.大量接口客户端服务超时报警。 猜测导致服务
一次Full GC导致CPU飙升的排查过程
AlbenXie的博客
05-04 1655
我们决定调整jvm参数，扩大内存，修改jvm垃圾收集器，扩大内存后，后面还是出现了该问题，不过这次只是cpu飙升，系统没有出现卡顿，出现问题后，我们使用如下命令，查看jvm堆内存快照，线程堆栈，等信息。因为这次调整了堆内存大小，触发问题后，没有进行full gc，对象还在，查看内存对象占用比，发现相关代码问题，一次性加载了150万的实例到对象中，调整内存之前加载该对象后，导致内存飙升，触发gc，进而引起cpu使用率飙升。从监控看到，cpu，内存，磁盘，网络在异常发生时都有明显的抖动。
cpu过高分析
zhaozhenzuo的专栏
06-16 2388
cpu过高分析
Java 程序中导致CPU 100%的常见原因与诊断思路
spytian的专栏
03-10 2597
原文链接 上周某团队的某个业务的新功能1%上线, 上线不到1天, 开发人员发现该流程里下游有个应用不断有服务器挂掉, 症状表现为CPU 100%, 不能处理新请求. 为了临时快速解决该问题, 同事先是做了2个 heap dump 和 2个 CPU 在某个interval的usage的截屏, 然后让开发人员关闭该新功能, 同时下游服务器被完全重启一遍. 问题得以解决. 问题虽然被临时解决, 但是...
解决 socket.io 频繁连接导致 cpu 升高问题
AnitaSun的博客
05-17 2725
前提 如果前端频繁刷新页面或者频繁断开重连将会导致服务端 cpu 升高 解决方法 使用 localStorage 缓存连接，每次通信都使用这个连接 代码 let socket; if(localStorage.getItem('socket')) { socket = JSON.parse(localStorage.getItem('socket')); // 创建一个不自动连接的 socket 对象 let temp = io({autoConnect: false});
java httpclient cpu_Java自带HttpClient下载CPU占用过高
weixin_29254029的博客
02-16 755
下载HTTP协议没有问题，下载HTTPS协议的时候CPU一直维持在20%-30%左右。升级到JDK15问题依旧存在。"Snail-Thread-HTTP-Client" #25 daemon prio=5 os_prio=0 cpu=216656.25ms elapsed=272.70s tid=0x0000024e34a84800 nid=0x3a68 runnable [0x00000066...
一次性传输大量数据的问题
最新发布
07-08
### 一次性传输大量数据时可能遇到的性能问题及解决方案 在进行一次性大数据量传输时，通常会面临几个关键性能瓶颈。这些问题包括但不限于高延迟、资源耗尽以及系统不稳定等现象[^3]。为了解决这些挑战，需要采取一系列策略和技术手段来优化数据传输过程。 #### 分批处理 逐条插入数据比批量插入更慢。通过使用如`INSERT INTO ... VALUES (), (), ...`这样的语法来进行批量插入操作，或者利用`LOAD DATA INFILE`命令从文件加载数据，可以显著提高效率[^4]。这种方法减少了与数据库之间的通信次数，从而降低了网络延迟的影响，并且能够有效减少服务器上的CPU和内存消耗。 ```sql -- 批量插入示例 INSERT INTO `insert_table` (`datetime`, `uid`, `content`, `type`) VALUES ('0', 'userid_0', 'content_0', 0), ('1', 'userid_1', 'content_1', 1); ``` #### 网络优化 如果数据是从远程位置插入的，那么网络延迟可能会成为主要问题之一。为此，可以通过优化现有的网络配置以降低延迟，同时考虑采用更快的网络连接来进一步提升传输速度[^4]。此外，在设计分布式系统时，确保良好的数据本地性也是至关重要的，这有助于最小化跨节点的数据传输需求[^1]。 #### 缓存机制 对于频繁访问或重复使用的数据集，实施适当的缓存策略可以帮助减轻后端存储的压力并加快响应时间。例如，可以将最近经常查询的结果暂时保存于内存中，这样当用户再次请求相同信息时就可以直接从缓存获取而无需重新计算或读取磁盘。对于前端应用来说，也可以利用浏览器提供的本地存储技术（比如localStorage）来缓存部分历史记录，以此减少不必要的HTTP请求。 #### 数据压缩 对即将发送的数据进行有效的编码和压缩是另一种常用的加速方法。通过对原始数据应用特定算法（如gzip, deflate等），可以在不丢失任何信息的前提下大幅度减小其体积大小，进而缩短了整个传输过程所需的时间长度。需要注意的是选择合适的压缩级别，在保证足够压缩率的同时也要考虑到解压成本。 #### 并行化处理 利用多线程或多进程的方式并发执行多个独立的任务单元，使得能够在同一时间内完成更多的工作量。特别是在涉及大规模文件上传下载或是跨地域数据中心间的数据迁移场景下，合理地分配负载至不同的通道上运行，往往能取得事半功倍的效果。 #### 异步非阻塞I/O模型 相较于传统的同步阻塞式IO操作，采用异步非阻塞模型可以让应用程序更好地应对高并发情况下的输入输出请求。它允许程序继续执行其他任务直到某个IO操作真正准备好结果，而不是一直等待直至该操作结束。这种方式特别适合那些需要持续不断地接收并处理来自客户端大量实时流数据的应用场合。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值