wget 如何获取真实文件

最新推荐文章于 2024-08-14 18:30:00 发布
最新推荐文章于 2024-08-14 18:30:00 发布
阅读量2.9k 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： linux OS
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/prince_jun/article/details/11743729
本文介绍了使用wget从特定URL下载压缩文件的方法，并解决了下载文件名不正确的问题。通过重命名并解压文件，成功获取了所需项目。此外，文章还提到了wget的一些局限性。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

例子：下载project from http://www.vim.org/scripts/download_script.php?src_id=6273

wget http://www.vim.org/scripts/download_script.php?src_id=6273

ls后发现下载了一个download_script.php?src_id=6273 这么个东西

然后 用命令file 查看

file download_script.php\?src_id\=6273 
输出：download_script.php?src_id=6273: gzip compressed data, was "project-1.4.1.tar", from Unix, last modified: Fri Oct 13 22:20:46 2006, max compression

发现下载的是一个压缩文件，只不过文件名不对，重命名：

mv download_script.php\?src_id\=6273 project-1.4.1.tgz

tar xzvf project-1.4.1.tgz

会得到两个文件目录。


结论：有时候wget 挺弱的。

Linux命令：wget命令
dl_11的博客
03-12 2307
wget命令是一种常用的网络工具，用于从Web服务器下载文件。wget命令基于HTTP、HTTPS和FTP协议从指定的URL下载文件。它可以在Linux和Unix系统的命令行中使用，并支持各种参数来定制下载行为。Wget也可以根据HTML、XHTML和CSS页面中的链接，创建远程网站的本地版本。Wget旨在应对缓慢或不稳定的网络连接;如果由于网络问题下载失败，它会不断重试，直到检索到整个文件。如果服务器支持重新获取，它会指示服务器从停止下载的地方继续下载。
linux 转发真实ip,获取真实IP（Linux）
weixin_33989935的博客
05-04 918
获取真实 IP(Linux)网易云负载均衡在将请求转发给后端时，会将请求头插入 X-Forwarded-For 请求头，后端服务可以通过查询该 HTTP 头来获取原始 IP 地址。1. Nginx 配置方案1.1. 确认 http_realip_module 模块已安装Nginx 使用 http_realip_module 模块来获取真实 IP。yum 或 apt-get 安装的 Nginx 一般...
使用Wget获取资源
weixin_45903995的博客
06-29 591
wget
使用wget获取其他服务器上的文件
weixin_30648963的博客
04-18 1514
http://www.cnblogs.com/tankblog/p/6081521.html 转载于:https://www.cnblogs.com/blog-of-Fourier/p/6729486.html
wget 自己服务器上的文件,关于linux：wget可以用于获取服务器上的所有文件吗？...
weixin_39522170的博客
07-31 744
可以用来获取服务器上的所有文件。如果这是在我的网站foo.com上使用Django框架的目录结构，请假设如果这是目录结构/web/project1/web/project2/web/project3/web/project4/web/templates不知道/project1，project2的目录名称。是否可以下载所有文件请参阅stackoverflow.com/questions/273743...
嵌入式linux学习笔记--使用wget下载文件
jeason的博客
02-04 1743
如何使用wget下载文件 优快云 和百问网一起发 1.正确搭建开发环境 开发板直接接在路由器或者交换机下，确保这个交换机或者路由器能连接到需要下载的网络，本节会以下载百度的网页作为demo 所以需要 开发板能连接到外网。这一点很重要。 2.测试网络的连通性 2.1测试开发板到路由器的连接 这一步基本看一下网口灯就行了，正常的连接状态网口灯应该是亮起的。 2.2测试开发板能否连接外网 建议使用dhcp 的方式给开发板获得固定的IP ，笔者在野火的板子上进行测试的时候发现存在使用固定IP 的情况下缺少DNS
wget wget wget wget
06-07
它的名字是“World Wide Web”和“get”的组合，表明其主要功能是从Web获取文件。`wget`的特点在于其非交互式操作、后台运行以及能够继续中断的下载，这使得它在自动化脚本和低带宽环境下的下载任务中非常有用。 **...
使用slb后nginx、apache获取真实ip.docx
09-27
使用 SLB 后 Nginx、Apache 获取真实 IP 在使用 SLB（Server Load Balancer）后，如何获取真实 IP 是一个常见的问题。...在配置时，我们需要将 SLB 的 IP 地址加入配置文件，以便服务器可以正确地获取真实 IP。
LNAMP架构中后端Apache获取用户真实IP地址的2种方法
09-15
#### 方法二：使用Apache模块获取真实IP 除了通过Nginx传递真实IP外，还可以在Apache侧通过特定的模块来实现这一功能。这里主要介绍两个模块：`mod_rpaf`和`mod_remoteip`。 **A. 使用mod_rpaf模块** `mod_rpaf`...
Windows批处理脚本 - 网站静态资源自动化下载工具（Wget镜像脚本）
05-16
依赖文件下载：自动获取页面关联的CSS样式表、JavaScript脚本、SVG矢量图 格式过滤：仅下载html/htm/css/js/svg等核心Web文件类型 HTTPS支持：绕过证书验证（适用于测试环境） 使用环境 操作系统：Windows 10/11 ...
php-wget 把远程文件下载到本地服务器上。
02-10
php 中调用 WGET ,就是把其它网站的下载到本地服务器上.,
【Linux命令详解 | wget命令】 wget命令用于从网络下载文件，支持HTTP、HTTPS和FTP协议
qq_43657810的博客
08-16 9092
在编程世界中，处理网络资源是一项关键任务，而`wget`命令就是一位可靠的助手。`wget`（全名为“Web Get”）是一种用于从网络下载文件的工具，它能够处理多种协议，包括HTTP、HTTPS和FTP。作为一个博主，我们可以利用`wget`命令来获取文件、备份网站内容、自动下载资源等。
利用wget命令获取FTP资源
xwy9526的博客
12-11 4167
wegt命令作用：可以从对方的ftp服务器上直接下载现存的软件包 命令格式：wget ftp://IP/软件包名称 若是防止网站上面现在相关软件包可以使用该命令：wget http://IP/软件包名称 验证： 环境：一台微软服务器（windows 10系统）搭建ftp服务器，并在该ftp服务器上面存放一个镜像文件 在从ftp服务器上把镜像文件下载到linux本地，类似与从网站或者其他服务器上下载。 服务器 搭建（开启）ftp服务 windows键+ R，输入control指令 打开控制面板 - 程序和功
wget从ftp服务器上拉文件
qq_42334297的博客
01-07 1478
从ftp服务器上下载到当前目录 wget --ftp-user=account --ftp-password=*** ftp://192.168.x.x/file/file.txt ftp-user ——用户名 ftp-password ——密码 最后一个为文件所在路径
Linux系统中wget命令用法详解
IT之一小佬的博客
06-29 2744
Linux系统中wget命令用法详解
Wget如何获取下载地址
第十六年春
11-16 8619
我们在学习Linux的过程中，Wget下载命令是很常用的，我们下载所需的包时，有时候不知道下载地址是什么，就去找一些别人的博客去复制，版本不可选，下面简单示范一下，如何获取下载地址。 我们以Maven为例，打开浏览器，搜索Maven,进入到官网的下载页。 maven ...
Linux系统之wget命令的基本使用
热门推荐
jks212454的博客
08-17 1万+
Linux系统之wget命令的基本使用
【Linux】Wget的使用
HR的博客
03-17 486
Wget的使用 什么是wget？ wget命令用来从指定的URL下载文件。wget非常稳定，它在带宽很窄的情况下和不稳定网络中有很强的适应性，如果是由于网络的原因下载失败，wget会不断的尝试，直到整个文件下载完毕。如果是服务器打断下载过程，它会再次联到服务器上从停止的地方继续下载。这对从那些限定了链接时间的服务器上下载大文件非常有用。 基础语法 wget (选项) (参数) 选项 选项 含义 -a<日志文件> 在指定的日志文件中记录资料的执行过程； -A<后缀名&
详解Linux命令--wget
简介
08-14 8418
wget命令是Linux中最常用的命令之一，用于从网络下载文件。本文将详细介绍wget命令的用法，并给出具体的示例。
命令行下载如何获取真实地址
最新发布
07-26
<think>我们无法直接从官网页面获取真实下载地址，因为ST官网的下载链接是动态生成的，且需要登录和认证。但是，我们可以通过模拟浏览器行为或解析网页来获取。然而，由于命令行环境通常没有浏览器，我们可以使用curl和grep等工具来提取下载链接。 注意：ST官网的下载链接需要登录，所以直接使用命令行下载可能比较复杂。不过，我们可以尝试以下步骤： 1. 首先，我们需要获取下载页面的HTML内容。 2. 然后，从HTML中提取下载链接。 但是，由于ST官网的下载页面（https://www.st.com/en/development-tools/stm32cubeide.html）在加载时会进行重定向，并且需要处理Cookie和JavaScript，因此使用简单的curl可能无法获取到真正的下载链接。 替代方案：ST提供了一个文件分发服务器（file.st.com），但是下载链接是动态生成的，并且包含一个临时的token，这个token会过期。 因此，对于命令行下载，最可靠的方式是： - 从官网页面手动获取下载链接（复制链接地址） - 然后使用该链接通过命令行工具下载 但是，如果用户希望自动化，我们可以通过以下步骤尝试： 步骤1：获取下载页面，并提取出包含下载链接的JSON数据。 实际上，ST的下载页面通过一个JavaScript对象来存储下载信息。我们可以查找一个名为“filesearch”的API调用，但需要API密钥。 步骤2：使用ST提供的REST API（需要登录，且API密钥） 由于ST官网的限制，非官方的自动化下载可能会遇到困难。因此，我们建议用户手动从官网获取下载链接，然后使用命令行下载。 但是，我们可以提供一种可能的方法，通过解析网页来获取下载链接（注意：网站结构可能变化，此方法可能失效）： 1. 使用curl获取网页内容： curl -L "https://www.st.com/en/development-tools/stm32cubeide.html" 2. 在网页中搜索包含“downloadUrl”的字符串，或者使用grep提取。 然而，经过分析，ST的下载页面现在使用动态加载，直接curl获取的HTML中可能不包含下载链接。因此，我们需要模拟浏览器行为，可以使用类似`pup`或`htmlq`这样的工具，或者使用`selenium`，但在纯命令行环境中，我们可以尝试使用`wget`或`curl`配合一些参数。 另一种思路：ST官网提供了一个“直接下载链接”的按钮，但是该按钮的链接是经过重定向的。我们可以通过获取重定向后的链接来得到真实地址。 例如，在浏览器中右键复制下载链接，得到类似这样的链接： https://file.st.com/downloads/stm32cubeide/updates/1.15.0/STM32CubeIDE-win64-1.15.0-20221207_1718.exe.zip 但是，这个链接是临时的，而且需要认证（通过Cookie或Referer）。因此，即使我们获取到了这个链接，直接使用curl下载可能会返回403。 所以，我们必须在请求中包含Referer头，例如： curl -L -O -H "Referer: https://www.st.com/" "https://file.st.com/.../STM32CubeIDE_1.15.0_20221207_1718_x86_64.exe.zip" 但是，由于ST的下载服务器使用了CDN，并且有安全措施，这种方法并不总是有效。 因此，最可靠的方式还是通过浏览器下载，或者使用ST官方提供的其他方式（如STM32CubeMX内集成下载）。 如果用户坚持要通过命令行下载，可以尝试以下步骤： 1. 登录ST官网（需要处理登录表单和会话Cookie） 2. 访问下载页面，获取动态生成的下载链接 3. 使用该链接下载 这个过程比较复杂，涉及到模拟登录和会话保持，而且ST官网的登录机制可能包括CSRF令牌等。 因此，我们给出一个折中的方案： 1. 用户手动登录ST官网，进入STM32CubeIDE下载页面。 2. 右键点击下载按钮，选择“复制链接地址”。 3. 然后在命令行中使用curl命令，并设置Referer和Cookie（如果必要）进行下载。 例如（假设复制的链接为：https://file.st.com/.../file.zip）： curl -L -O -H "Referer: https://www.st.com/" "复制的链接" 但是，由于安全原因，复制的链接可能包含临时token，该token有时间限制，所以需要尽快使用。 另外，ST提供了另一种下载方式：通过邮件发送下载链接。在下载页面，用户可以选择“通过电子邮件发送下载链接”，然后命令行中可以使用邮件中的链接。 总结：完全自动化的命令行下载STM32CubeIDE较为困难，建议手动获取下载链接后使用命令行工具下载。 如果用户需要定期下载（例如自动化脚本），建议使用ST官方提供的API，但需要申请API密钥，且只对合作伙伴开放。 因此，我们提供手动获取链接后使用命令行下载的示例： 步骤1：在浏览器中访问：https://www.st.com/en/development-tools/stm32cubeide.html 步骤2：登录ST账号（如果没有则注册） 步骤3：在“获取软件”部分，选择适合的版本（Windows/Linux/macOS），右键点击“下载”按钮，复制链接地址。 步骤4：在命令行中使用以下命令（以Windows版本为例）： ```bash # 将<复制的链接>替换为实际链接 curl -L -o STM32CubeIDE.zip -H "Referer: https://www.st.com/" "<复制的链接>" ``` 注意：如果下载过程中出现403错误，可能需要添加Cookie。可以通过浏览器开发者工具（Network标签）查看下载请求的请求头，复制其中的Cookie值，然后在curl命令中添加： ```bash curl -L -o STM32CubeIDE.zip -H "Referer: https://www.st.com/" -H "Cookie: <你的Cookie值>" "<复制的链接>" ``` 由于安全原因，Cookie会过期，所以此方法仅适用于一次性下载。 对于Linux用户，也可以使用wget： ```bash wget --header="Referer: https://www.st.com/" --header="Cookie: <你的Cookie值>" "<复制的链接>" -O STM32CubeIDE.tar.gz ``` 最后，由于这些步骤较为复杂，且ST的下载机制可能变化，如果遇到问题，建议直接通过浏览器下载。 相关问题： 1. 如何注册ST官网账号？ 2. 如何通过STM32CubeMX下载STM32CubeIDE？ 3. 如何验证STM32CubeIDE下载文件的完整性？ 4. 在Linux系统中安装STM32CubeIDE需要哪些依赖库？</think>### 通过命令行获取 STM32CubeIDE 真实下载地址的方法 #### 核心原理 ST 官网使用动态令牌保护下载链接，真实地址格式为： `https://file.st.com/downloads/stm32cubeide/[版本]/STM32CubeIDE_[版本]_[时间戳]_[架构].[扩展名]` 令牌有效期通常为 **2 小时**，需实时从官网页面提取[^1]。 --- ### 获取步骤 #### 1. 获取页面源码 ```bash # 获取官网页面源码 curl -s "https://www.st.com/en/development-tools/stm32cubeide.html" > cubeide.html ``` #### 2. 提取动态令牌 ```bash # 提取下载链接中的动态令牌 (Linux/macOS) grep -oP 'href="\Khttps://file\.st\.com[^"]+' cubeide.html | grep "stm32cubeide" | head -1 # Windows (PowerShell) Select-String -Path cubeide.html -Pattern 'https://file\.st\.com[^"]+' | % { $_.Matches.Value } ``` #### 3. 完整命令行下载示例 ```bash # 获取并下载最新 Linux 版本 curl -s https://www.st.com/en/development-tools/stm32cubeide.html | grep -oP 'href="\Khttps://file\.st\.com[^"]+' | grep "stm32cubeide.*linux" | head -1 | xargs curl -O -L ``` #### 4. 参数说明 | 参数 | 作用 | |------|------| | `-s` | 静默模式 | | `-O` | 保留远程文件名 | | `-L` | 跟随重定向 | | `grep -oP` | 启用 Perl 正则 | | `xargs` | 将链接传递给 curl | --- ### 版本架构标识符 | 系统 | 文件后缀 | |-----------|--------------------------| | Windows | `win64.exe.zip` | | Linux | `linux.x86_64.tar.gz` | | macOS | `macosx.cocoa.x86_64.dmg`| --- ### 验证下载完整性 ```bash # Windows (PowerShell) Get-FileHash STM32CubeIDE*.exe -Algorithm SHA256 # Linux/macOS shasum -a 256 STM32CubeIDE*.tar.gz ``` 官方 SHA256 值可在下载页面的 **Release Notes** 中查看[^1]。 --- ### 注意事项 1. **令牌过期**：获取链接后需在 2 小时内完成下载 2. **企业防火墙**：可能需要添加例外规则 ```bash curl --resolve www.st.com:443:[IP地址] ... ``` 3. **历史版本**：在页面中搜索 `All versions` 部分的链接
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值