内存映射(1)

Matlab大数据处理1:Matlab内存映射文件 在maltab程序中,经常需要读取一些.mat格式的数据文件,如果文件非常大,内存装不下或者加载时间过长,我们可以通过matlab提供了内存映射文件机制(memroy mapped file)[1]来解决这一问题。内存文件映射是一种内存管理方法,应用程序可以通过内存指针对磁盘上的文件进行访问。         Matlab memory mapped file的语法格式如下: m = 阅读详情

内存映射

将磁盘文件中的数据映射到内存,用户通过修改内存就能修改磁盘文件

相关的系统调用:

 void *mmap()

功能:将一个文件或设备的数据映射到内存中

参数:

  1.         void *addr : NULL 由内核指定
  2. length : 要映射的数据长度,这个值不能为0,建议使用文件的长度。获取文件的长度,stat,lseek
  3. port : 对申请映射区的操作权限
    1. PORT_EXEC : 可执行的权限
    2. PORT_READ : 读权限
    3. PORT_NONE :没有权限
    4. 要操作映射区必须要有读权限
  4. flags : 
    1. MAP_SHARED : 映射区的数据会自动和磁盘文件进行同步,进程间通信必须要设置这个选项
    2. MAP_PRIVATE : 不同步,内存映射区的数据改变了对原来的文件不会进行修改,会重新创建一个新的文件
  5. fd :需要映射的文件的文件描述符
    1. 通过open得到,open的是一个磁盘文件
    2. 注意:文件的大小不能为0,open指定的权限不能和port参数有冲突
      1. open:只读/读写   port:PORT_READ
      2. open:读写           port : PORT_READ | PORT_WRITE
  6. offset : 偏移量,一般不用
  7. 返回值:返回创建的内存的首地址,失败返回MAP_FAILED,

int munmap()

  1. 功能:释放内存
  2. 参数:
    1. addr :要释放的内存首地址
    2. length :释放的内存大小

 使用内存映射实现进程间通信:

  1. 有关系的·进程(父子进程)
    1. 通过唯一父进程,创建内存映射区
    2. 然后创建子进程
    3. 父子进程共享创建的内存映射区
  2. 没有关系的进程间通信:
    1. 准备一个大小不是0的磁盘文件
    2. 进程1:通过磁盘文件创建内存映射区,得到一个操作这块内存的指针
    3. 进程2:通过磁盘文件创建内存映射区,得到一个操作这块内存的指针
    4. 使用内存映射区进行通信

注意:内存映射区通信,是非阻塞的。

实现

父进程读取到子进程输入的数据

/*
#include <sys/mman.h>
void *mmap(void *addr, size_t length, int prot, int flags,int fd, off_t offset);

int munmap(void *addr, size_t length);
*/
#include<stdio.h>
#include<sys/mman.h>
#include<fcntl.h>
#include<sys/types.h>
#include<unistd.h>
#include<string.h>
#include<stdlib.h>
#include<wait.h>
int main(){
    //打开一个文件
    int fd = open("test.txt",O_RDWR);
    //获取文件的大小
    int size = lseek(fd,0,SEEK_END);
    //创建内容映射区
    void *ptr = mmap(NULL,size,PROT_READ | PROT_WRITE, MAP_SHARED, fd , 0);
    // 返回一个指针
    if(ptr == MAP_FAILED){
        perror("mmap");
        exit(0);
    }
    //创建子进程
    pid_t pid = fork();
    if (pid > 0)
    {
        wait(NULL);
        //父进程
        char buf[64];
        strcpy(buf,(char *)ptr);
        printf("read data : %s\n",buf);
    }
    else if(pid == 0)
    {
        //子进程
        strcpy((char *)ptr,"nihao!!!!");

    }
    //关闭内存映射区
    munmap(ptr,size);
    return 0;
}

 

 文件也发生了改变

 

瑞萨RA6W1集成QSPI PSRAM实战:硬件焊接、FSP配置与内存映射应用 在嵌入式系统开发中,内存扩展是应对复杂应用需求的关键技术。其核心原理是通过外部总线接口为微控制器(MCU)增加存储空间,从而突破片上SRAM的容量限制。这项技术的价值在于,它能在不显著增加系统成本与复杂度的前提下,为设备提供处理大量数据缓冲区、图形帧缓存或复杂协议栈的能力,极大地提升了系统的灵活性与性能。在物联网网关、智能家居设备和带图形界面的嵌入式终端等场景中,内存扩展技术尤为重要。本文聚焦于QSPI PSRAM这一高效解决方案,它通过高速四线SPI接口,以极少的引脚占用实现大容量RAM扩展。文章以瑞萨R 阅读详情

相关推荐

PGA460-Q1 GUI内存映射功能详解:从寄存器配置到超声波测距优化

在嵌入式系统开发中,寄存器配置是实现软件算法与硬件交互的基础,其核心在于对芯片内部功能寄存器的精确读写,即内存映射访问。这一过程是连接数字逻辑与物理信号的关键桥梁,其技术价值在于能够绕过底层代码,直接与硬件对话,从而快速验证设计、优化参数并提升开发效率。在传感器信号处理、尤其是超声波测距等应用场景中,高效的寄存器配置工具至关重要。德州仪器(TI)为PGA460-Q1超声波信号处理器提供的图形化用户界面(GUI),其内存映射(Memory Map)功能正是这样一个集成了批量操作、实时监控和错误诊断的综合性调试

weixin_28703507的博客 188

进程基础(PROCESS)

A申请一次内存(3000),系统分配一次内存页(4096),系统堆内存进行使用限制,允许程序员A使用,锁定1096,申请第二次内存,系统检查其内存使用情况,根据需求分配新的一页。2.分时复用机制有限的cpu资源被多进程公用,cpu占用进行时间限制,创建时间片单位,进程可以获取时间片,暂时使用cpu,多进程快速切换。注意这里锁定的1096,在不同的系统中,处理方式不同,有的系统会在第二次申请时,解锁,有的系统则不会。阻塞态进程即将陷入睡眠或阻塞,停止工作,放弃时间片资源(S)...

weixin_51916360的博客 602

1、深入探索内存映射输入/输出技术

本文深入探讨了内存映射输入/输出(MMIO)技术的基本原理与实际应用。从内存映射I/O的概念出发,详细解析了地址解码机制,包括全地址解码与部分地址解码的实现方式及其优缺点,并介绍了多寄存器连续地址映射的优势。结合FE310-G002 RISC-V和STM32H7等实际系统,展示了GPIO和UART接口在汇编与C语言中的编程实现,帮助读者全面理解MMIO在现代计算机系统中的关键作用及其未来发展方向。

star5的专栏 82

Linux开发(九):多进程通信与同步---共享内存

共享内存是进程间通信的一种最基本、最快速的机制。共享内存是两个或多个进程共享同一块内存区域,并通过该内存区域实现数据交换的进程间通信机制。通常是由一个进程开辟一块共享内存区域,然后允许多个进程对此区域进行访问。由于不需要使用中间介质,而是数据由内存直接映射到进程空间,因此共享内存是最快速的进程间通信机制。 共享内存的最大不足之处在于,由于多个进程对同一块内存区具有访问的权限,各个进程之间的同步问题显得尤为突出。必须控制同一时刻只有一个进程对共享内存区域写入数据,否则将造成数据的混乱。但是同步控制的问题,可

王木木 3348

白话详细解读(七)----- CBAM:Convolutional Block Attention Module

一、CBAM简介 论文链接:https://x.sci-hub.org.cn/scholar?hl=zh-TW&as_sdt=0%2C5&q=CBAM%3A+Convolutional+Block+Attention+Module&btnG=&oq=CB CBAM这篇论文是在2018年提出的,自提出之后,已经被引用上千次,可见其影响力。CBAM是一种专门为了卷积神经网络而设计的注意力模块,传统的卷积存在只关注局部信息,而往往忽略全局信息的弊端,以3*3卷积为例,滤波器有9个

奋斗の博客 1万+

电机驱动技术中关于磁阻转矩生成的理解

正交在物理学和数学中指的是两个方向或两个向量之间的夹角为90°(直角)。在图中,当气隙磁场的轴线与转子轴线的夹角为90°时,我们称它们为正交。转子磁极的方向。通常由转子的磁极中心指向另一极的连线表示。转子轴线用图示中的d 轴表示。通过对定子、转子、气隙磁场、磁力线的理解,我们可以清晰地分析不同角度下电磁转矩的方向。这种分析不仅有助于电机的理论学习,还能为实际设计提供重要参考。掌握这些基础知识后,可以更好地理解电机工作原理及优化其性能。

weixin_48327795的博客 2077

C/C++学习笔记——环境变量及内存管理

date 2020.07.08 1.访问环境变量表 char** char 2.访问特定环境 #include<stdlib.h> /* succesful return 0;filed return -1 name :环境变量名 value:环境变量值 overwrite:当所给环境变量名已存在时(存在为1;反之为0)是否覆盖原值; */ char* getenv(char const* name); 内存管理:内存分配与释放 vo...

qq_41811813的博客 753

OneNet平台MQTT连接避坑指南:C语言Token计算实战(附完整代码)

本文详细解析了OneNet平台MQTT连接中的Token计算机制,提供了C语言实现的完整代码和实战指南。通过HMAC算法和Base64编码,开发者可以高效生成安全凭证,避免常见连接问题,适用于物联网设备开发。

weixin_29193359的博客 464

底层系统调用(三)(mmap、msync、nummap、error))

mmap函数 ​ mmap(内存映射)函数的作用是建立一段可以被两个或更多个程序读写的内存,一个程序对它做的修改可以被其他程序看到。这一功能可以用在文件处理上,方法,mmap函数创建一个指向内存区域的指针,该内存可以通过一个打开的文件描述符访问与文件的内容相关联。 #include"stdio.h" void *mmap(void *addr,size_t len,int prot ,int flags,int fildes,off_t off); ​ 可以通过传递参数off改变共享内存段访问的文件

qq_42584874的博客 1364

【基于CKF的IMM】CV和CT两个模型下的IMM,二维,滤波使用CKF(容积卡尔曼滤波),附完整的matlab代码

该文章摘要: 本文提出了一种基于交互多模型(IMM)和容积卡尔曼滤波(CKF)的融合定位算法,用于解决目标在直线运动和转弯机动之间的模型切换问题。通过MATLAB仿真实现了IMM-CKF算法,并与单一的CV-CKF(匀速模型)和CT-CKF(匀角速转弯模型)方法进行对比。实验结果表明,在包含直线段和转弯段的复合轨迹跟踪中,IMM-CKF方法能够自适应调整模型权重,显著提高了定位精度。轨迹跟踪图、位置/速度误差对比图以及模型概率曲线直观展示了IMM算法的优势。文章提供了完整的MATLAB实现代码,可用于目标跟

985工科博士毕业,专攻定位、导航和滤波等算法研究。从业10年,主要使用MATLAB 617

乐企归集能力说明文档V2.0006

纳税人销售货物、提供服务开具的增值税发票及购进货物、接受服务取得的增值税发票、海关缴款书(含出口转内销证明)、代扣代缴完税凭证,可以通过本能力进行归集。纳税人可将本能力中的各类规则和接口嵌入本单位信息化系统中(如:销售、报销、财务等),实现发票自动化归集,便于纳税人完成发票入账、抵扣、退税以及代办退税等操作,有效提升涉税业务办理效率。

记录点滴 575

11.4.1 内存映射概述

11.4.1 内存映射概述 mmap系统调用的作用是在调用进程的虚拟地址空间中创建一个新的内存映射。 根据内存背后有无实体文件与之关联,映射可以分成以下两种: 文件映射:内存映射区域有实体文件与之关联。 mmap系统调用将普通文件的一部分内容直接映射到调用进程的虚拟地址空间。 一旦完成映射,就可以通过在相应的内存区域中操作字节来访问文件内容。这种映射也被称为基于文件的映射。 匿名映射:匿名映射没有对应的文件。 这种映射的内存区域会被初始化成0。 一个进程映射的内存可以与其他进程中的映射共享物理

Scroll_C的博客 409

【WRF编译-Lab1】使用自动脚本编译WRF:错误总结

WRF编译过程及错误总结

WW、forever的博客 84

内存学习(四):内存映射1

**内存映射是在进程的虚拟地址空间中创建一个映射,分为以下两种。** + (1)文件映射:**文件支持的内存映射,把文件的一个区间映射到进程的虚拟地址空间**,数据源是存储设备上的文件。 + (2)匿名映射:**没有文件支持的内存映射,把物理内存映射到进程的虚拟地址空间**,没有数据源。 通常**把文件映射的物理页称为文件页**,**把匿名映射的物理页称为匿名页。**

叫好与叫座虽然不是对立面,但想在同一个作品中达到双重效果很难。 2988

Xilinx平台Aurora IP介绍(汇总篇)

Aurora IP核使用超简单的,COME ON!

数字IC/FPGA杂货铺,找一找,或许有你想要的~ 2万+

无法启动此程序,因为计算机丢失api-ms-win-core-path-l1-1-0.dll的解决方案

本文主要介绍了无法启动此程序,因为计算机丢失api-ms-win-core-path-l1-1-0.dll的解决方案,希望能对使用Python的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案 文章目录 1. 问题描述 2. 解决方案

weixin_43178406的博客 20万+

2.17、内存映射(1)

内存映射是将磁盘文件的数据映射到内存,用户通过修改内存就能修改磁盘文件。- 功能:将一个文件或者设备的数据映射到内存中 - 参数: - void * addr : NULL , 由内核指定 - length : 要映射的数据的长度,这个值不能为 0。建议使用文件的长度。获取文件的长度:stat lseek - prot : 对申请的内存映射区的操作权限 - PROT_EXEC :可执行的权限 - PROT_READ :读权限 - PROT_WRITE :写权限 - PROT_NONE :没有权限。

z2812470857的博客 290

温度PID控制PLC程序

温度PID稳定控制程序,适用于欧姆龙PLC,对其他PLC也具有很大参考价值

如何用Java NIO在1秒内读取2GB文件?:内存映射黑科技全解析

掌握Java处理大文件的NIO内存映射技术,轻松实现1秒读取2GB文件。适用于日志分析、大数据导入等场景,通过MappedByteBuffer提升I/O性能,减少内存开销。高效稳定,值得收藏。

PixelFlow的博客 615

C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片

基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正

Probability and Statistics - 4th edition

Probability and Statistics - 4th edition

2.17 内存映射(1) 2.18内存映射(2)

open()函数中的权限建议和prot参数的权限保持一致。4.通过内存拷贝将第一个文件的内存数据拷贝到新的文件内存中。-还没有子进程的时候:通过唯一的父进程,先创建内存映射区。- 可以的,但是创建的文件的大小如果为0的话,肯定不行。映射区还存在,创建映射区的fd被关闭,没有任何影响。越界操作操作的是非法的内存 -> 段错误。- 进程1 通过磁盘文件创建内存映射区。- 有了内存映射区以后,创建子进程。- 父子进程共享创建的内存映射区。- 得到一个操作这块内存的指针。- 得到一个操作这块内存的指针。

hongyuyahei的博客 248

假人有限元模型

假人模型,车辆碰撞假人有限元模型,适合做乘员安全的研究者利用

Linux 内存映射mmap,Linux內存映射(mmap)系列(1)

看到同事的代碼中出現了mmap.所以自己私下學習學習,研究研究.....(一).概述內存映射,簡而言之就是將用戶空間的一段內存區域映射到內核空間,映射成功后,用戶對這段內存區域的修改可以直接反映到內核空間,相反,內核空間對這段區域的修改也直接反映用戶空間。那么對於內核空間用戶空間兩者之間需要大量數據傳輸等操作的話效率是非常高的。首先,驅動程序先分配好一段內存,接着用戶進程通過庫函數mmap()來告...

weixin_33417904的博客 106

文件内存映射分析(Windows VS Linux)【Section 1】

【代码】文件内存映射分析(Windows VS Linux)【Section 1】

qq_39827740的博客 1196

内存映射文件

JDK1.4版本引入了java.nio包,对文件流进行读写操作,提供无阻塞模式,同时也提供了一种高效率的文件读写模式,内存映射文件,把文件某个区域块映射到内存,进行高效率的读写,主要用到下面类 java.nio.MappedByteBuffer; java.nio.channels.FileChannel 本文参考java核心技术的例子进行说明,代码如下:   package com.s

学习、思考、分享 1708

数据结构-1-内存映射文件原理详解

内存映射文件,初次听说,不知道它和虚拟内存有什么区别,也不知从何说起。经过一番查询和研究,下面,我先解释一下我对内存映射文件这个词的理解,解释下原理,然后具体说明其用法。这是数据结构一个很偏僻但是很经常出现的面试考点,希望大家注意。 原理  “映射”,就和数学课上说的“一一映射”是一个意思,就是建立一种一一对应关系,在这里主要是只 硬盘上文件 的位置与进程 逻辑地址空间 中一块大小相同的区域之

loadingsong的专栏 1166

Linux下在内存映射文件中给计数器持续加1

#include #include #include /* For O_* constants */ #include /* For mode constants */ #include #include #include #define SEM_NAME "chansem" #define FILE_MODE (S_IRUSR|S_IWU

Lce的专栏 999
上一篇: 有名管道实现简单版--聊天功能
下一篇: 信号--进程间的通信方式
Neo_21
博客等级 码龄6年 4粉丝 83原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值