【ELT.ZIP】OpenHarmony啃论文俱乐部—硬件加速的快速无损压缩

最新推荐文章于 2024-07-01 10:08:31 发布
最新推荐文章于 2024-07-01 10:08:31 发布
阅读量457 收藏
点赞数
分类专栏： 压缩算法 文章标签： 人工智能 harmonyos 算法 鸿蒙
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qq_30407339/article/details/125279515
版权
本文介绍了针对移动设备的LZ4压缩算法优化，提出了改进的LZ4算法和硬件架构，旨在解决移动设备资源限制问题。通过增加可变长度的偏移量、优化哈希算法，实现了3.84Gbps的压缩吞吐量和4的压缩比，比原LZ4算法快4%，压缩比高5%。硬件架构设计考虑了低功耗和内存性能提升，适用于OpenHarmony等场景。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

  • 本文出自ELT.ZIP团队，ELT<=>Elite(精英)，.ZIP为压缩格式，ELT.ZIP即压缩精英。
  • 成员：
    • 上海工程技术大学大二在校生
    • 合肥师范学院大二在校生
    • 清华大学大二在校生
    • 成都信息工程大学大一在校生
    • 黑龙江大学大一在校生
    • 华南理工大学大一在校生
  • 我们是来自7个地方的同学，我们在OpenHarmony成长计划啃论文俱乐部里，与华为、软通动力、润和软件、拓维信息、深开鸿等公司一起，学习和研究操作系统技术…

文章目录

【往期回顾】

 ① 2月23日 《老子到此一游系列》之 老子为什么是老子 —— ++综述视角解读压缩编码++
 ② 3月11日 《老子到此一游系列》之 老子带你看懂这些风景 —— ++多维探秘通用无损压缩++
 ③ 3月25日 《老子到此一游系列》之 老子见证的沧海桑田 —— ++轻翻那些永垂不朽的诗篇++
 ④ 4月4日 《老子到此一游系列》之 老子游玩了一条河 —— ++细数生活中的压缩点滴++
 ⑤ 4月18日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——一文穿透多媒体过往前沿++
 ⑥ 4月18日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——这些小风景你不应该错过++
 ⑦ 4月18日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——浅析稀疏表示医学图像++
 ⑧ 4月29日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——计算机视觉数据压缩应用++
 ⑨ 4月29日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——点燃主缓存压缩技术火花++
 ⑩ 4月29日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——即刻征服3D网格压缩编码++
 ⑪ 5月10日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——云计算数据压缩方案++
 ⑫ 5月10日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——大数据框架性能优化系统++
 ⑬ 5月10日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——物联网摇摆门趋势算法++
 ⑭ 5月22日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——电子设备软件更新压缩++
 ⑮ 5月22日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——人工智能短字符串压缩++
 ⑯ 5月22日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——多层存储分级数据压缩++
 ⑰  6月3日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——数据高通量无损压缩方案++
 ⑱  6月3日 ++【ELT.ZIP】OpenHarmony啃论文俱乐部——快速随机访问字符串压缩++

【本期看点】

  • LZ4回顾
  • 对于数据格式的改进
  • 对于哈希计算的优化
  • 优化后硬件架构

【技术DNA】

最低0.47元/天 解锁文章
微位移：一种高效的硬件图像压缩算法
ziyouruf的博客
03-15 598
在本文中，我们提出了一种称为微移位的有损图像压缩算法。我们采用算法-硬件协同设计方法，产生一种硬件友好的低功耗压缩方法。在我们的方法中，图像首先被微移位，然后子量化值被进一步压缩。利用自然图像的空间相关性，提出了快速和MRF模型两种恢复位深度的方法。这两种方法都可以逐步解压缩图像。平均而言，我们的压缩算法可以将图像压缩到每像素1.25位，其质量在峰值信噪比(PSNR)和结构相似性(SSIM)方面都优于最先进的片上压缩算法。然后，我们提出了一种硬件结构，并在FPGA上实现了该算法。ASIC设计的结果进一步验证
【ELT.ZIP】OpenHarmony啃论文俱乐部—gpu上高效无损压缩浮点数
ELT.ZIP的博客
06-14 632
本文出自ELT.ZIP团队，ELT<=>Elite(精英)，.ZIP为压缩格式，ELT.ZIP即压缩精英。 成员： 上海工程技术大学大二在校生 合肥师范学院大二在校生 清华大学大二在校生 成都信息工程大学大一在校生 黑龙江大学大一在校生 山东大学大三在校生 我们是来自6个地方的同学，我们在OpenHarmony成长计划啃论文俱乐部里，与华为、软通动力、润和软件、拓维信息、深开鸿等公司一起，学习和研究操作系统技术… 文章目录【往期回顾】【本期看点】【技术DNA】【智慧场景】图像压缩历史.
lz4压缩算法源码
01-21
lz4压缩算法源码 LZ4 is a lossless data compression algorithm that is focused on compression and decompression speed
数据压缩 —— 一种基于LZ4算法的硬件加速的快速无损压缩
繁依Fanyi的博客
06-11 2782
近年来，随着物联网等场景的不断发展，一些问题也逐渐的暴露了出来，就比如嵌入式设备上的 ，等资源都是有限的；对于部分设备来说可能换个时钟频率高的时钟、换个大的电池确实可以解决问题，但对于手机这种嵌入式移动设备来说，像是要做到便携、轻薄等等要求，体积就被限制住了，电源也因此被限制住了。因此，需要一种基于硬件的压缩方法来解决这个问题。 大多数基于字典的自适应压缩方法都起源于 Lempel-Ziv 算法，就比如最快的压缩算法之一 LZ4。作者也就对 LZ4 进行了改进，并根据改进后的 LZ4 的压缩提出了一种硬件架
压缩算法LZ4
qq_16106195的博客
07-01 3126
LZ4 是无损压缩算法，提供每个核 大于 500 MB/s 的压缩速度，可通过多核 CPU 进行扩展。LZ4算法解压速度极快，单核解压速度达到GB/s，通常达到多核系统的 RAM 速度限制。
Lz4压缩算法学习
热门推荐
MarkusZhang的博客
06-05 2万+
lz4是目前基于综合来看效率最高的压缩算法，更加侧重于压缩解压缩速度，压缩比并不突出，本质上就是时间换空间。对于github上给出的lz4性能介绍：每核压缩速度大于500MB/s，多核CPU可叠加；它所提供的解码器也是极其快速的，每核可达GB/s量级。...
【ELT.ZIP】OpenHarmony啃论文俱乐部——多维探秘通用无损压缩
ELT.ZIP的博客
03-11 1112
本文出自 ELT.ZIP 团队，ELT<=>Elite(精英)，.ZIP为压缩格式，ELT.ZIP即压缩精英。 成员： 上海工程技术大学大二在校生 合肥师范学院大二在校生 清华大学大二在校生 成都信息工程大学大一在校生 我们是来自4个地方的同学，我们在OpenHarmony成长计划啃论文俱乐部里，通过啃论文方式学习操作系统技术… 文章目录引言熵编码器BWT算法基于BWT的改进算法一般结构实际效率算法比较检验算法实验结论Lempel-Ziv Parsing概述LZ78双标准数据..
【ELT.ZIP】OpenHarmony啃论文俱乐部——综述视角解读压缩编码
ELT.ZIP的博客
02-21 698
---本文出自ELT.ZIP团队，ELT<=>Elite(精英)，.ZIP为压缩格式，ELT.ZIP即压缩精英 目录 入门指北 有趣玩件 轻松上手 小波变换（Wavelet transform） 小波变换原理 研究方向 小波系数零树(EZW)的嵌入式图像编码 无损加密后压缩(ETC)技术 Brotli 介绍 Brotli 概述 Brotli 的优势 情况1：压缩Canterbury语料库的11个文件 情况2：压缩包含 93种不同语言的 1285个HTML文档 情况.
【ELT.ZIP】OpenHarmony啃论文俱乐部——点燃主缓存压缩技术火花
ELT.ZIP的博客
04-30 1083
本文出自ELT.ZIP团队，ELT<=>Elite(精英)，.ZIP为压缩格式，ELT.ZIP即压缩精英。成员： 上海工程技术大学大二在校生合肥师范学院大二在校生清华大学大二在校生成都信息工程大学大一在校生黑龙江大学大一在校生山东大学大三在校生华南理工大学大一在校生 我们是来自7个地方的同学，我们在OpenHarmony成长计划啃论文俱乐部里，与华为、软通动力、润和软件、拓维信息、深开鸿等公司一起，学习和研究操作系统技术… @[toc] 【往期回顾】 ① 2月23日 《老子到此一游系列》之 .
速度之王 — LZ4压缩算法（二）
weixin_30662539的博客
12-19 1312
LZ4(Extremely Fast Compression algorithm) 项目：http://code.google.com/p/lz4/ 作者：Yann Collet 本文作者：zhangskd @ csdn blog LZ4格式 The compressed block is composed of sequences. 每个数据块可以压缩成若干个序...
lz4：极快压缩算法
02-04
LZ4-极快的压缩 LZ4是无损压缩算法，提供每核心大于500 MB / s的压缩速度，可通过多核CPU进行扩展。 它具有极快的解码器，每个内核的速度为多个GB / s，通常在多内核系统上达到RAM速度限制。 速度可以动态调整，选择一个“加速”因数，以权衡压缩比以获得更快的速度。 另一方面，还提供了高压缩导数LZ4_HC，以CPU时间为代价来提高压缩率。 所有版本均具有相同的减压速度。 LZ4还与和级别的兼容。 尽管仅使用最后的64KB，但它可以将任何输入文件作为字典接收。 该功能可以与结合使用，以大大提高小文件的压缩性能。 LZ4库作为使用BSD 2条款许可证的开源软件提供。 科 状
一种高效的硬件 图像压缩算法_PGA_matlab 图像处理 硬件架构 验证日志 图像压缩 计算摄影 图像传感器_代码_下载
06-06
Microshift是一种有损图像压缩算法，可以在硬件上以极低的功耗高效实现。 在数据集上进行测试时，它可以将图像压缩到1.25 BPP，其结果质量优于最先进的片上压缩算法（PSNR=33.16，SSIM=0.90）。 提出了一种高效的 VLSI 架构，并在 FPGA 上实现。 ASIC 设计的结果进一步验证了低硬件复杂性和高功率效率。 我们的方法有望用于低功耗无线视觉传感器网络（WVSN）。
LZ4压缩算法集合包
06-25
项目中用到的LZ4资源，集合成了一个压缩包，包含开发jar包，源文件，文档，测试代码
速度之王 — LZ4压缩算法（一）
weixin_30753873的博客
12-19 3750
LZ4(Extremely Fast Compression algorithm) 项目：http://code.google.com/p/lz4/ 作者：Yann Collet 本文作者：zhangskd @ csdn blog 简介 LZ4 is a very fast lossless compression algorithm, providing comp...
LZ4 内存压缩算法分析
weixin_42136255的博客
03-28 4130
LZ4 内存压缩算法分析
LZ4压缩算法简介
rayylee
08-18 6794
lz77编码思想：它是一种基于字典的算法，它将长字符串（也可以称为匹配项或者短语）编码成短小的标记，用小标记代替字典中的短语，也就是说，它通过用小的标记来代替数据中多次重复出现的长字符串来达到数据压缩的目的。其处理的符号不一定是文本字符，也可以是其他任意大小的符号。............
lz4压缩算法--速度之王
一缕阳光的博客
05-21 8109
简介 lz4是目前综合来看效率最高的压缩算法，更加侧重压缩解压速度，压缩比并不是第一。在当前的安卓和苹果操作系统中，内存压缩技术就使用的是lz4算法，及时压缩手机内存以带来更多的内存空间。本质上是时间换空间。 压缩原理 lz4压缩算法其实很简单，举个压缩的栗子 输入：abcde_bcdefgh_abcdefghxxxxxxx 输出：abcde_(5,4)fgh_(14,5)fghxxxxxxx 其中两个括号内的便代表的是压缩时检测到的重复项，(5,4) 代表向前5个byte，匹配到的内容长度有
速度之王 — LZ4压缩算法（三）
zhangskd的专栏
12-19 2万+
LZ4是一个快速的无损压缩算法，单核的压缩速度超过400MB/s，单核的解压速度超过1GB/s。 LZ4也适用于多核的情况，压缩速度能成倍的提高，解压速度几乎达到RAM的速度限制。 文本主要分析LZ4的原理和实现。
lz4压缩算法
xihuanzhi1854的博客
11-28 3667
简介 lz4是目前综合来看效率最高的压缩算法，更加侧重压缩解压速度，压缩比并不是第一。在当前的安卓和苹果操作系统中，内存压缩技术就使用的是lz4算法，及时压缩手机内存以带来更多的内存空间。本质上是时间换空间。 压缩原理 lz4压缩算法其实很简单，举个压缩的栗子 输入：abcde_bcdefgh_abcdefghxxxxxxx 输出：abcde_(5,4)fgh_(14,5)fghxxxxxxx ...
xml文件报cvc-elt.1.a: Cannot find the declaration of element 'beans'.
最新发布
11-06
这个错误信息 "cvc-elt.1.a: Cannot find the declaration of element 'beans'" 出现在XML解析过程中，通常意味着XML文档结构有问题。`beans`元素未在XML的命名空间（namespace）中声明或是在当前的DTD（Document Type Definition，文档类型定义）或XML Schema中找不到它的定义。 `beans`通常是Spring框架中配置Bean的标签，如果你正在处理Spring XML配置文件，那么确保你在文件开头有正确的Spring命名空间引用，例如： ```xml <beans xmlns="http://www.springframework.org/schema/beans" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans.xsd"> </beans> ``` 如果不在Spring环境中，检查是否引入了正确的XML Schema定义，或者确认`beans`元素应该存在于的那个位置的确存在。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值