【深入浅出imx8企业级开发实战 | 02】Yocto工程repo源码gitee加速配置方法

已于 2022-09-08 10:33:20 修改
阅读量6k 收藏 45
点赞数 51
CC 4.0 BY-SA版权
分类专栏： 深入浅出i.MX8企业级开发实战 文章标签： yocto repo加速 yocto工程构建 gitee加速
于 2022-09-08 10:18:26 首次发布
版权声明：本文为博主原创文章，遵循CC BY-NC-SA 4.0 版权协议，转载请附上原文出处链接和本声明，禁止商业使用。
本文链接：https://blog.youkuaiyun.com/RobotFutures/article/details/126752136
本文详细介绍了如何在yocto环境下，针对imx8qxp开发板的yocto工程，通过配置repo使用Gitee源码仓库实现下载加速。原来需要2小时以上的下载时间，通过加速后缩短至1分钟。文章涵盖了加速配置文件的设置、repo manifest解析、操作步骤及注意事项，适合嵌入式软件工程师阅读。

这是机器未来的第47篇文章

原文首发地址：https://blog.youkuaiyun.com/RobotFutures/article/details/126752136

image-20220908100355092

文章目录

1. 概述

本文描述了yocto环境搭建时，使用repo源码管理工具下载加速的方法介绍。博主使用的imx8qxp的yocto工程使用repo下载源码时，使用官方配置得要下载2小时以上，而按照博主配置gitee加速后，速度提高到1分钟左右。

2. 最终的加速配置文件如下：

<manifest>
<default sync-j="2"/>
<remote fetch="https://github.com/yoctoproject" name="yoctoproject"/>
<remote fetch="https://gitee.com/RobotFutures" name="robotfutures"/>
<remote fetch="https://git.openembedded.org" name="python2"/>
<project remote="yoctoproject" name="poky" path="sources/poky" revision="4d7162798ec19c726877e85509e4c7a99eb6576d" upstream="honister"/>
<project remote="robotfutures" name="meta-openembedded" path="sources/meta-openembedded" revision="4647e3ea3708d30eeb0149f6d5626c9576bff520" upstream="honister"/>
<project remote="robotfutures" name="fsl-community-bsp-base" path="sources/base" revision="60f79f7af60537146298560079ae603260f0bd14" upstream="honister">
<linkfile dest="README" src="README"/>
<linkfile dest="setup-environment" src="setup-environment"/>
</project>
<project remote="robotfutures" name="meta-freescale" path="sources/meta-freescale" revision="ed3435620a2404c241fef3c4ef90d1f31d3b7a8a" upstream="honister"/>
<project remote="robotfutures" name="meta-freescale-3rdparty" path="sources/meta-freescale-3rdparty" revision="155ffd6d7b694d8de76919c25681ecb98882646e" upstream="honister"/>
<project remote="robotfutures" name="meta-freescale-distro" path="sources/meta-freescale-distro" revision="d2e27cc4778663450495a67bfb036cba600cb27a" upstream="honister"/>
<project remote="robotfutures" name="meta-browser" path="sources/meta-browser" revision="e22bac72bc1f1bb5d2f44e64a53128b8be644272"/>
<project remote="robotfutures" name="meta-clang" path="sources/meta-clang" revision="fc5389393adb005b519e488e9e6be4fc5791239c" upstream="honister"/>
<project remote="robotfutures" name="meta-qt6" path="sources/meta-qt6" revision="1b9f4646dd69c5567d19ed77b8347506fe7faf2b" upstream="6.2.2"/>
<project remote="python2" name="meta-python2" path="sources/meta-python2" revision="5243d509aebff378c1ae9d3dff6a29cfdc0dee1f" upstream="honister"/>
<project remote="robotfutures" name="meta-timesys" path="sources/meta-timesys" revision="93bf122d77e77aac1a917865538df84f148a8fcc" upstream="gatesgarth"/>
<project remote="robotfutures" name="meta-virtualization" path="sources/meta-virtualization" revision="ed52ba982179087ecc84f7dc3b0a16cfe25f2f8e" upstream="honister"/>
<project remote="robotfutures" name="meta-imx" path="sources/meta-imx" revision="refs/tags/rel_imx_5.15.5_1.0.1" upstream="honister-5.15.5-1.0.0">
<linkfile dest="imx-setup-release.sh" src="tools/imx-setup-release.sh"/>
<linkfile dest="README-IMXBSP" src="README"/>
</project>
<project remote="robotfutures" revision="4bbe714267b730df020438fe83ae2c7c91708045" name="meta-nxp-demo-experience" path="sources/meta-nxp-demo-experience"/>
</manifest>

3. repo板卡配置文件详解

先来看一下repo的manifest.xml文件的描述，在这个yocto项目中，配置文件为.repo/manifests/imx-5.15.5-1.0.0.xml

zhoushimin@zsm:imx-yocto-bsp2$ cat .repo/manifests/imx-5.15.5-1.0.0.xml 
<?xml version="1.0" encoding="UTF-8"?>
<manifest>
  
  // 多线程数，默认为2，可以指定为cpu数
  <default sync-j="2"/>
  
  // remote指定的git仓库的地址，fetch指定git仓库目录，实际地址为：fetch/project标签中的name；
  // remote和project通过remote标签中的name和project标签中的remote关联
  <remote fetch="https://source.codeaurora.org/external/imx" name="CAF"/>
  <remote fetch="https://github.com/OSSystems" name="OSSystems"/>
  <remote fetch="https://code.qt.io/yocto"  name="QT6"/>
  <remote fetch="https://github.com/TimesysGit"  name="Timesys"/>
  <remote fetch="https://github.com/kraj" name="clang"/>
  <remote fetch="https://github.com/Freescale" name="community"/>
  <remote fetch="https://github.com/openembedded" name="oe"/>
  <remote fetch="https://git.openembedded.org"  name="python2"/>
  <remote fetch="https://git.yoctoproject.org/git" name="yocto"/>
  <remote fetch="https://source.codeaurora.org/external/imxsupport" name="imx-support"/>

  // 通过remote和project标签组合，可以获得poky的git仓库地址为：	    
  // https://git.yoctoproject.org/git/poky；  (remote.fetch/project.name)
  // upstream指定分支；
  // revision指定分支中的提交记录
  // path指定本地仓库的存储路径
  <project remote="yocto" name="poky" path="sources/poky" revision="4d7162798ec19c726877e85509e4c7a99eb6576d" upstream="honister"/>

  <project remote="oe" name="meta-openembedded" path="sources/meta-openembedded" revision="4647e3ea3708d30eeb0149f6d5626c9576bff520" upstream="honister"/>

  <project remote="community" name="fsl-community-bsp-base" path="sources/base" revision="60f79f7af60537146298560079ae603260f0bd14" upstream="honister">
    <linkfile dest="README" src="README"/>
    <linkfile dest="setup-environment" src="setup-environment"/>
  </project>

  <project remote="community" name="meta-freescale" path="sources/meta-freescale" revision="ed3435620a2404c241fef3c4ef90d1f31d3b7a8a" upstream="honister"/>
  <project remote="community" name="meta-freescale-3rdparty" path="sources/meta-freescale-3rdparty" revision="155ffd6d7b694d8de76919c25681ecb98882646e" upstream="honister"/>
  <project remote="community" name="meta-freescale-distro" path="sources/meta-freescale-distro" revision="d2e27cc4778663450495a67bfb036cba600cb27a" upstream="honister"/>

  <project remote="OSSystems" name="meta-browser" path="sources/meta-browser" revision="e22bac72bc1f1bb5d2f44e64a53128b8be644272"/>
  <project remote="clang" name="meta-clang" path="sources/meta-clang" revision="fc5389393adb005b519e488e9e6be4fc5791239c" upstream="honister"/>
  <project remote="QT6" name="meta-qt6" path="sources/meta-qt6" revision="1b9f4646dd69c5567d19ed77b8347506fe7faf2b" upstream="6.2.2"/>
  <project remote="python2" name="meta-python2" path="sources/meta-python2" revision="5243d509aebff378c1ae9d3dff6a29cfdc0dee1f" upstream="honister"/>
  <project remote="Timesys" name="meta-timesys" path="sources/meta-timesys" revision="93bf122d77e77aac1a917865538df84f148a8fcc" upstream="gatesgarth"/>
  <project remote="yocto" name="meta-virtualization" path="sources/meta-virtualization" revision="ed52ba982179087ecc84f7dc3b0a16cfe25f2f8e" upstream="honister"/>

  <project remote="CAF" name="meta-imx" path="sources/meta-imx" revision="refs/tags/rel_imx_5.15.5_1.0.1" upstream="honister-5.15.5-1.0.0">
     <linkfile dest="imx-setup-release.sh" src="tools/imx-setup-release.sh"/>
     <linkfile dest="README-IMXBSP" src="README"/>
  </project>

  <project remote="imx-support" revision="4bbe714267b730df020438fe83ae2c7c91708045" name="meta-nxp-demo-experience" path="sources/meta-nxp-demo-experience" />

</manifest>

4. 操作方法

为了实现gitee加速，需要将remote标签中的git仓库地址更换到国内的gitee仓库中，因为gitee仓库拉取第三方git仓库失败率太高，只能人工手动拉取再上传。

  • 首先需要根据remote标签和project标签获得完整的git仓库地址，并下载master主分支

    $ git clone git clone https://git.yoctoproject.org/meta-virtualization

  • 然后根据project.upstream下载对应的分支

    $ git checkout -b honister origin/honister

  • 使用命令确保revision提交的版本记录存在

    $ git log | grep revision_value

    举例：

    $ git log | grep 4bbe714267b730df020438fe83ae2c7c91708045

  • 有的还需要拉取特定的tag，如

    <project remote="CAF" name="meta-imx" path="sources/meta-imx" revision="refs/tags/rel_imx_5.15.5_1.0.1" upstream="honister-5.15.5-1.0.0">

    # 查看远程tag
$ git ls-remote --tags origin
# 拉取需要的tag
$ git fetch origin refs/tags/rel_imx_5.15.5_1.0.1

  • 在gitee上建立对应的仓库

    • 将本地下载的git仓库的远程仓库地址修改为gitee仓库地址

      $ git remote set-url origin https://gitee.com/RobotFutures/meta-imx.git

    • 上传主分支

      $ git checkout master
$ git push origin master

    • 上传honister分支

      $ git checkout honister
$ git push origin honister

    • 上传tag

      $ git push origin --tags

      注意事项：下载meta-imx时出现无master分支的情况，直接切换到需要的分支上即可

      $ git checkout honister-5.15.5-1.0.0

5. 总结

博主使用的imx8qxp的yocto工程使用repo下载源码时，使用官方配置得要下载2小时以上，而按照博主配置gitee加速后，速度提高到1分钟左右。

写在末尾：

  • 博客简介：专注AIoT领域，追逐未来时代的脉搏，记录路途中的技术成长！
  • 专栏简介：imx8qxp小白从拿到板子到完成项目的过程记录
  • 面向人群：嵌入式软件工程师
  • 专栏计划：接下来会逐步发布跨入人工智能的系列博文，敬请期待

【深入浅出imx8企业级开发实战 | 01】imx8qxp yocto工程构建指南
机器未来的博客
09-08 6324
本文描述了IMX8QXP通过yocto编译烧写镜像和生成SDK的过程。本文参考《i.MX_Yocto_Project_User’s_Guide.pdf》文档，博主在实操过程中遇到了很多问题，例如repo国内无法下载的问题、repo同步慢的问题，生成SDK时包冲突的问题，等等。至少300G硬盘空间，yocto工程编译结果很大。网速越快越好编译时间至少一个晚上。按照博主的流程操作基本上就可以完整的生成多媒体镜像固件，可以在评估板上测试板载的各种功能，以及生成开发环境SDK。
【深入浅出imx8企业级开发实战 | 03】imx8qxp一键独立编译指南
机器未来的博客
09-18 6380
本文描述了imx8qxp利用optee项目的build工程整体编译的过程，op-tee项目的build工程仅支持imx8m，这里通过修改使其支持imx8qxp芯片。整个项目包含的内容挺多的，包含u-boot、atf、optee、optee-client、seco、scfw、kernel、rootfs、mkimage，并生成包含所有固件的烧写固件。
【深入浅出imx8企业级开发实战 02】Yocto工程repo源码gitee加速配置方法_yocto 加速
最新发布
2401_89323842的博客
01-15 559
本文描述了yocto环境搭建时，使用repo源码管理工具下载加速的方法介绍。博主使用的imx8qxp的yocto工程使用repo下载源码时，使用官方配置得要下载2小时以上，而按照博主配置gitee加速后，速度提高到1分钟左右。
Yocto笔记--使用gitee为bitbake do_fetch过程加速
中华田园巨龙
03-25 2900
介绍 最近在使用瑞萨的MPU时，构建Linux需要使用Yocto的bitbake指令，从国外网站下载Linux内核。但是由于需要访问外网，速度极慢。所以找了个办法修改了内核的获取地址。 步骤 （1）在进行bitbake linux-renesas -C fetch时，断网，程序会由于报错没有网络连接报错，由此找到指令获取资源的地址所在 git.kernel.org/pub/scm/linux/kernel/git/cip/linux-cip.git (2)由于访问外网速度较慢，我们把外网的资源导入到国内
NXP i.mx8mm 下载 yocto 源码，编译最小 rootfs
cfl927096306的博客
12-29 1935
下载编译yocto 下载repo mkdir test cd test curl https://storage.googleapis.com/git-repo-downloads/repo > ./repo 因为国内防火墙的原因，编辑 repo 里的 url 地址，改为国内的 REPO_URL = ‘https://mirrors.tuna.tsinghua.edu.cn/git/git-repo’ 如果是第一次下载使用 git ，需要配置 git 相关的环境变量 git config -
yocto源码下载
boyemachao的专栏
05-22 752
1、首先下载repo mkdir ~/bin (this step may not be needed if the bin folder already exists) curl https://storage.googleapis.com/git-repo-downloads/repo > ~/bin/repo 1 2 3 因为国内防火墙的原因，把repo 的url 地址改为国内 REPO_URL = 'https://mirrors.tuna.tsinghua.e...
（五）Yocto更改源码的获取位置与git clone 地址
yangteng0210的博客
08-27 6838
我在第一次编译的时候十分痛苦，因为不知道会出现什么样的问题，只是按部就班的按照教程编写，一个不起眼的小问题都纠结半天。在编译的时候有一个问题令我十分头疼，就是下载源码的时候经常下一半就不下了，一个文件下半天，而且只能下载到默认位置。那我比如说，我想把内核和u-boot的源码拿出来编译的时候再放进去，或者说我们自己从meta-xilinx中定义的源码下载地址提前下载好源码，然后在指定配置文件中更改为...
基于Yocto编译树莓派3B+（加速下载代码）
弓人水的技术分享
11-19 702
系统环境 接前文，操作系统选：推荐使用Ubuntu 18.04或20.04 Ubuntu 64位服务器，当然空间够用的话，用桌面版也可以，本人实际环境是Ubuntu 18.04 Desktop。 安装网络代理软件 安装网络代理软件这一步没有什么需要讲的了。 代理服务器：127.0.0.1 代理端口：1080 代理类型：socks5 配置Git代理 git config --global http.proxy socks5://127.0.0.1:1080 git config --global https.
【深入浅出imx8企业级开发实战 | 04】嵌入式Linux设备掉电数据容错研究
机器未来的博客
10-12 4067
本文针对嵌入式设备掉电应用数据丢失的问题，研究了掉电数据容错的一些措施。
使用云加速 Yocto 编译
toradexsh的博客
09-04 1116
简介 云服务技术已经形成多年。现在行业中一个最大的概念就是物联网，又称为 IoT。我们作为电子工程师，脑海中出现的第一个印象是将许多设备连接到云，上传数据用于可视化、存储和分析。当然，也可以有许多其他的应用：云服务还可以存储和处理资源，特别是SaaS和个人应用；IT专家和运维也可以发挥云虚拟机和数据库的优势。 有一件事我们经常会忽略，云不仅仅是 IoT 工具，或者只是大
yocto-3.1.3
03-04
使用仓库下载源代码 $ repo init -u git://github.com/NUA3500/yocto-3.1.3.git -m meta-ma35d1/base/ma35d1.xml $ repo sync 打造yocto DISTRO = nvt-ma35d1机器= ma35d1-evb源source / init-build-env构建 用法： MACHINE=<machine> DISTRO=<distro> source sources/init-build-env <build> <machine> machine name <distro> distro name <build> build directory 逐步构建yocto 要构建和使用yocto，请执行以下操作： $ repo init -u git://github.
imx-mkimage-yocto--rel_imx_4.14.98_2.0.0_ga.tar.gz
09-14
IMX8 镜像打包工具。将的scfw_tcm.bin boot 和M4单片机程序打包生成flash.bin ，用于烧录到SD卡启动IMX8芯片
yocto源码下载和目录分析
qq_24093081的博客
03-11 1575
本文记录下载yocto的源码提示：以下是本篇文章正文内容，下面案例可供参考Repo是一个构建在Git之上的工具，能够更便捷的管理工程项目中的代码存储仓库。简单来说，Git管理单独的模块，而repo管理所有的Git库，将多个Git库组合在一起，形成一个完整的大版本。
迅为IMX8MM开发板Yocto系统使用Gstarwmra（一）
mucheni的博客
03-11 600
1 Gstreamer 的特点 gstreamer 是一个媒体框架，可以实现采集，编码，解码，渲染，滤镜等一条龙的媒体解决方案。  用命令行工具进行测试验证，还可以通过代码框架直接封装命令来做工程开发，这一点 ffmpeg 是不具备的  Gstreamer 是 glib 实现的，跨平台的实现，windows,linux,androd,ios，macos 官方原生支持，而且官方发布了 windows,linux,androd,ios 二进制包，如果没有特别需求，可以直接拿发布二进制包集成使用。而 ffmp
imx8x 环境搭建1-yocto编译
Tim.Wang的博客
05-12 3118
主机 建议 Ubuntu18.04 ，参考： MX8X_4.14.78_ga_BootLoader_V3-20190301_chn.pdf 和 i.MX_Yocto_Project_User’s_Guide.pdf 两个文档。 博主虚拟机建议配置如下。 VMware Workstation 12.1.1+Ubuntu18.04 $sudo apt-get update $sudo apt-get install gawk wget git-core diffstat unzip texinfo
【i.MX8 Linux】构建 i.MX8 Yocto Project 映像
程序员「阿基米东」的编程之旅
03-05 5161
本文所使用的主机是 i5 四核 8GB 内存的 Ubuntu 20.04，官方建议在 Ubuntu 18.04 上操作，不过实测都 OK！ Tips：本文主要介绍构建 i.MX8 Yocto Project 映像的步骤，限于篇幅不能详细介绍 Yocto 和 BitBake 等工具的详细用法，关于 Yocto 的更多介绍请参见我的另一个专栏《Yocto 最佳实践》。 Yocto 概述 什么是 Yocto Yocto Project 起源于一群年轻人想给他们自己的 PDA 编写一个操作系统，当时没有一家公司
NXP i.MX8系列平台开发讲解 - 1.5 i.MX8M Linux 源码编译(yocto)
hywelstar的嵌入式软件开发笔记
02-22 895
fsl-image-machine-test FSL 社区的核心镜像，支持控制台环境，没有GUI 界面。fsl-image-gui 一个支持 GUI 但没有 Qt5 的镜像。fsl-image-gui 一个支持 GUI 但没有 Qt5 的镜像。core-image-base 目标设备硬件的只支持控制台的镜像。core-image-minimal 仅支持设备启动的小镜像。fsl-image-qt5 一个开源 Qt 5 的镜像。fsl-image-qt5 一个开源 Qt 5 的镜像。
【SemiDrive源码分析】【Yocto源码分析】04 - yocto/meta-semidrive目录及Yocto Kernel编译过程分析（下）
|~~~热爱生活、努力学习的小伙汁~~~|
05-07 1722
【SemiDrive源码分析】【Yocto源码分析】04 - yocto/meta-semidrive目录及Yocto Kernel编译过程分析（下）
Yocto tips (5): Yocto如何更改source code的下载与git clone地址
热门推荐
TonyHo's NotePad
12-20 1万+
现象 Yocto中在fetch一些软件包的时候经常出现一天也下载不下来，这种情况极大浪费了我们的时间。 例如，下面有三个Package下载了一天也没有完成： 解决方法 确定下载的地址，手动下载 先确定软件包的下载地址，例如对于opencv与opencv-samples软件包： 可以看到他们的git地址都是一样的，因此，我们可以手动来git clone：
评论 52
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

机器未来

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值