读书笔记—View的工作原理

本文详细解析了View的工作原理,包括ViewRoot的作用、MeasureSpec的概念及其三种模式、View和ViewGroup的测量过程,以及如何获取View的测量宽高。

View的工作原理

1.ViewRoot
  • ViewRoot对应于ViewRootImpl类,它是链接WindowManager和DecorView的纽带,View的三大流程(measure/layout/draw)均是通过ViewRoot来完成的。
  • 在ActivityThread中,当Activity对应被创建完毕后,会将DecorView添加到Window中,同时会创建ViewRootImpl对象,并将ViewRootImpl对象和DecorView建立关联。这个过程的源码如下
root=new ViewRootImpl(view.getContext(),display);
root.setView(view,wparams,panelParentView);
  • View的绘制过程是从ViewRoot的performTraversals方法开始的,它经过measure,layout和draw三个过程才能最终将一个View绘制出来,其中measure用来测量View的宽高,layout用来确定View在父容器中的放置位置,而draw则负责将View绘制在屏幕上。
  • performTraversals会依次调用performMeasure,performLayout和performDraw三个方法,这三个方法分别完成顶级View的measure,layout和draw过程。

performMeasure/performLayout/performDraw——>measure/layout/draw——>onMeasure/onLayout/onDraw

  • Measure过程决定了View的宽高,Measure过程完成以后,可以通过getMeasuredWidth和getMeasureHeight方法获取View测量后的宽高。在某些极端情况下,系统可能需要多次measure才能确定最终的测量宽高。
  • 在onMeasure中拿到的测量宽高有可能是不准确的,比较好的方法是在onLayout方法中获取View的测量宽高。
  • 测量宽高形成于View的measure过程,最终宽高形成于View的layout过程
  • Layout过程决定了View的四个定点坐标和实际的View的宽高,完成以后,可以通过getTop/getBottom/getLeft/getRight来获取View的四个顶点位置,并可以通过getWidth和getHeight方法来获取View的最终宽高。
  • Draw过程决定了View的显示,只有draw方法完成后View的内容才能呈现在屏幕上。
  • DecorView作为顶级View,一般情况下内部会包含一个竖直方向的LinearLayout,在这个LinearLayout里面有上下两个部分(具体跟Android版本和主题有关),上面是标题栏,下面是内容栏。
  • 在Activity中我们通过setContentView所设置的布局文件其实就是被加在内容栏中,而内容栏的id是content,所以可以通过findViewById(android.R.id.content)获取内容栏布局。
2.MeasureSpec
  • MeasureSpec代表一个32位的int值,高2位代表SpecMode,低30位代表SpecSize。
  • SpecMode是指测量模式,SpecSize是指在某种测量模式下的规格大小。
  • MeasureSpec通过将SpecMode和SpecSize打包成一个int值来避免过多的对象内存分配,并提供了打包和解包方法。
  • SpecMode类型
    • 1.UNSPECIFIED:父容器不对View有任何限制,要多大给多大,这种情况下一般用于系统内部,表示一种测量的状态。
    • 2.EXACTLY:父容器已经检测出View所需要的精确大小,这个时候View的最终大小就是SpecSize所指定的值。它对应于LayoutParams中的match_parent和具体的数值这两种模式。
    • 3.AT_MOST:父容器指定了一个可用大小即SpecSize,View的大小不能大于这个值。对应于LayoutParams中的wrap_content.
3.Measure过程
  • 1.View的测量过程
protected void onMeasure(int widthMeasureSpec,int heightMeasureSpec){
    setMeasuredDimession(getDefaultSize(getSuggestedMinimumWidth(),widthMeasureSpec),
    getDefaultSize(getSuggestedMinimumHeight(),heightMeasureSpec));
}

public static int getDefaultSize(int size,int measureSpec){
    int result=size;
    int specMode=MeasureSpec.getMode(measureSpec);
    int specSize=MeasureSpec.getSize(measureSpec);

    switch(specMode){
        case MeasureSpec.UNSPECIFIED:
            result=size;
        break;
        case MeasureSpec.AT_MOST:
        case MeasureSpec.EXACTLY:
            result=specSize;
        break;
    }

    return result;
}

protected void getSuggestedMinimumWidth(){
    return (mBackground==null)?mMinWidth:max(mMinWidth,mBackground.getMinimumWidth());
}

protected void getSuggestedMinimumHeight(){
    return (mBackground==null)?mMinHeight:max(mMinHeight,mBackground.getMinimumHeight());
}
  • 2.ViewGroup的measure过程

    • ViewGroup是一个抽象类,没有重写View的onMeasure方法,但提供了一个叫measureChildren的方法,源码如下
    protected void measureChildren(int widthMeasureSpec,int heightMeasureSpec){
        final int size=mChildrenCount;
        final View[] children=mChildren;
    
        for(int i=0;i<size;i++){
            final View child=children[i];
            if((child.mViewFlags & VISIBILITY_MASK) != GONE){
                measureChild(child,widthMeasureSpec,heightMeasureSpec);
            }
        }
    }
    • measureChild的思想就是取出子元素的LayoutParams,然后再通过getChildMeasureSpec来创建子元素的MeasureSpec,接着将MeasureSpec直接传递给View的measure方法来测量。
  • 获取View测量完毕后的宽高的方法

    • 1.Activity/View # onWindowFocusChanged:该方法会被多次调用,当Activity的窗口获取焦点和失去焦点均会被调用一次。
    public void onWindowFocusChanged(boolean hasFocus){
        super.onWindowFocusChanged(hasFocus);
    
        if(hasFocus){
            int width = view.getMeasuredWidth();
            int height = view.getMeasuredHeight();
        }
    }
    • 2.view.post(runnable)
    view.post(new Runnable(){
    
        @Override
        public void run(){
            int width=view.getMeasuredWidth();
            int height=view.getMeasuredHeight();
        }
    });
    • 3.ViewTreeObserver
    ViewTreeObserver observer = view.getViewTreeObserver();
    observer.addOnGlobalLayoutListener(new OnGlobalLayoutListener(){
    
        @SuppressWarnings("deprecation")
        @Override
        public void onGlobalLayout(){
            int width=view.getMeasuredWidth();
            int height=view.getMeasuredHeight();
            view.getViewTreeObserver().removeGlobalOnLayoutListener(this);
        }
    });
    • 4.view.measure(int widthMeasureSpec,int heightMeasureSpec)
4.自定义View
  • 1.自定义View的分类
    • 1.继承View重写onDraw方法:注意对wrap_content测量模式的处理
    • 2.继承ViewGroup派生特殊Layout
    • 3.继承特殊的View(如TextView)
    • 4.继承特殊的ViewGroup(比如LinearLayout)
  • 2.自定义View须知
    • 1.让View支持wrap_content
    • 2.如果有必要,让你的View支持padding
    • 3.尽量不要在View中使用Handler,可以使用post代替
    • 4.View中如果有线程或者动画,需要及时停止(在View#onDetachedFromWindow),以防止内存泄露
    • 5.View带有滑动嵌套情形时,需要处理好滑动冲突
本文旨在系统阐述利用MATLAB平台执行多模态语音分离任务的方法,重点围绕LRS3数据集的数据生成流程展开。LRS3(长时RGB+音频语音数据集)作为一个规模庞大的视频与音频集合,整合了丰富的视觉与听觉信息,适用于语音识别、语音分离及情感分析等多种研究场景。MATLAB凭借其高效的数值计算能力与完备的编程环境,成为处理此类多模态任务的适宜工具。 多模态语音分离的核心在于综合利用视觉与听觉等多种输入信息来解析语音信号。具体而言,该任务的目标是从混合音频中分离出不同说话人的声音,并借助视频中的唇部运动信息作为辅助线索。LRS3数据集包含大量同步的视频与音频片段,提供RGB视频、单声道音频及对应的文本转录,为多模态语音处理算法的开发与评估提供了重要平台。其高质量与大容量使其成为该领域的关键资源。 在相关资源包中,主要包含以下两部分内容: 1. 说明文档:该文件详细阐述了项目的整体结构、代码运行方式、预期结果以及可能遇到的问题与解决方案。在进行数据处理或模型训练前,仔细阅读此文档对正确理解与操作代码至关重要。 2. 专用于语音分离任务的LRS3数据集版本:解压后可获得原始的视频、音频及转录文件,这些数据将由MATLAB脚本读取并用于生成后续训练与测试所需的数据。 基于MATLAB的多模态语音分离通常遵循以下步骤: 1. 数据预处理:从LRS3数据集中提取每段视频的音频特征与视觉特征。音频特征可包括梅尔频率倒谱系数、感知线性预测系数等;视觉特征则涉及唇部运动的检测与关键点定位。 2. 特征融合:将提取的音频特征与视觉特征相结合,构建多模态表示。融合方式可采用简单拼接、加权融合或基于深度学习模型的复杂方法。 3. 模型构建:设计并实现用于语音分离的模型。传统方法可采用自适应滤波器或矩阵分解,而深度学习方法如U-Net、Transformer等在多模态学习中表现优异。 4. 训练与优化:使用预处理后的数据对模型进行训练,并通过交叉验证与超参数调整来优化模型性能。 5. 评估与应用:采用信号失真比、信号干扰比及信号伪影比等标准指标评估模型性能。若结果满足要求,该模型可进一步应用于实际语音分离任务。 借助MATLAB强大的矩阵运算功能与信号处理工具箱,上述步骤得以有效实施。需注意的是,多模态任务常需大量计算资源,处理大规模数据集时可能需要对代码进行优化或借助GPU加速。所提供的MATLAB脚本为多模态语音分离研究奠定了基础,通过深入理解与运用这些脚本,研究者可更扎实地掌握语音分离的原理,从而提升其在实用场景中的性能表现。 资源来源于网络分享,仅用于学习交流使用,请勿用于商业,如有侵权请联系我删除!
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值