Python:os.path.join()产生的斜杠在Windows和Linux下的不同表现和解决方法

原文链接
https://www.polarxiong.com/archives/Python-os-path-join-产生的斜杠在Windows和Linux下的不同表现和解决方法.html#comments

问题描述

  • 我一直以为Python是隔离了操作系统的差异,同样的function在不同操作系统下会有一致的结果,直到前几天临时切换到Windows下发现有些Python代码跑不出来,才发现如os.path.join()这样的方法在不同操作系统下的表现是不一致的。
  • 例如
<span style="color:#000000"><span style="background-color:#ffffff"><code class="language-Python"><span style="color:#0000ff">import</span> os.path

<span style="color:#0000ff">print</span>(os.path.join(<span style="color:#a31515">'a'</span>, <span style="color:#a31515">'b'</span>, <span style="color:#a31515">'c'</span>))
</code></span></span>

在Linux/macOS下会显示
a/b/c
而在Windows下会显示
a\b\c

  • 即 os.path.join()在Linux/macOS下会以斜杠(/)分隔路径,而在Windows下则会以反斜杠(\)分隔路径。

原因分析

  • 这种内置标准库方法的不一致从哪来的?官方文档实际上早就有明显的暗示了。
  • 在os.path的官方文档页面11.2. os.path — Common pathname manipulations — Python 3.7.0 documentation开始位置就提到源代码文件根据不同操作系统在三个不同文件中:
  • Source code: Lib/posixpath.py (for POSIX), Lib/ntpath.py (for Windows NT), and Lib/macpath.py (for Macintosh)
  • 可见在安装Python时就会根据不同操作系统,仅使用对应操作系统类别的os.path模块。如果顺着源码去看,就会发现os.path.join()在Linux下是以斜杠(/)作为分隔符的,而在Windows下则是以反斜杠(\)作为分隔符的。

Mac的一些细节

  • 如果跟着看Macintosh操作系统对应的源码Lib/macpath.py的话,会很惊讶地发现Macintosh下不是以斜杠(/)也不是以反斜杠(\),而是以冒号(:)作为分隔符的,是不是很震惊:我的mac怎么可能是以冒号(:)为分隔符的?!
  • 这其实是一个历史问题了,这里Lib/macpath.py仅应用到了2001发布的Mac OS X之前的Macintosh操作系统中,那时的Macintosh确实是用冒号(:)为分隔符的。而从2001年的Mac OS X开始,到2012年的OS X,再到2016年的macOS,都采用了遵循Unix的斜杠(/)分隔符,也就直接使用Linux的源码Lib/posixpath.py了。

为什么Windows要使用反斜杠()

  • 为什么Windows不使用斜杠(/),而独树一帜使用反斜杠(\)呢,专门为了为难程序员?
  • 这其实也是个历史问题,归根到底还是因为Windows为了保持对DOS的兼容性,而DOS为什么要使用反斜杠(\)就说来话长了

解决方法

  • 从上面的分析可以发现os.path.join()仅包含对应操作系统类型的实现,所以我们无法通过指定参数的形式生成诸如适用于Linux或Windows的路径,那么如何解决这一问题呢?这里以在Windows下生成Linux格式(斜杠(/)分隔符)路径为例来说明。

通过str.replace()

  • 这是一种简单直接的方法,直接把Windows下os.path.join()生成的反斜杠(\)全部替换为斜杠(/),如:
<span style="color:#000000"><span style="background-color:#ffffff"><code class="language-python"><span style="color:#0000ff">import</span> os.path

result = os.path.join(<span style="color:#a31515">'a'</span>, <span style="color:#a31515">'b'</span>, <span style="color:#a31515">'c'</span>)
<span style="color:#0000ff">print</span>(result)

result = result.replace(<span style="color:#a31515">'\\'</span>, <span style="color:#a31515">'/'</span>)
<span style="color:#0000ff">print</span>(result)
</code></span></span>
  • 会得到
    a\b\c
    a/b/c

通过pathlib.PurePath.as_posix()

  • 从Python 3.4开始可以通过pathlib.PurePath.as_posix()来生成斜杠(/)格式的路径,其实其实现原理和str.replace()并没有太大区别。例如:
<span style="color:#000000"><span style="background-color:#ffffff"><code class="language-python"><span style="color:#0000ff">import</span> os.path
<span style="color:#0000ff">from</span> pathlib <span style="color:#0000ff">import</span> Path

result = os.path.join(<span style="color:#a31515">'a'</span>, <span style="color:#a31515">'b'</span>, <span style="color:#a31515">'c'</span>)
<span style="color:#0000ff">print</span>(result)

result = Path(result).as_posix()
<span style="color:#0000ff">print</span>(result)
</code></span></span>
  • 会得到
    a\b\c
    a/b/c
### Python `os.path.join` 对于正斜杠斜杠的处理 在不同操作系统上,路径分隔符有所不同Windows 使用反斜杠 `\` 而 Unix/Linux/MacOS 则使用正斜杠 `/` 。Python 的 `os.path.join()` 函数会依据当前操作系统的约定来构建路径字符串。 当运行环境为 Windows 时,即使输入参数中包含正斜杠 `/` ,最终生成的路径也会被转换成适合该平台的形式——即带有反斜杠 `\` [^1]: ```python import os root_dir = "code/hymenoptera_data/train" label_dir = 'ants' path = os.path.join(root_dir, label_dir) print(path) # 输出: code\hymenoptera_data\train\ants (如果是在 Windows 上) ``` 然而值得注意的是,在某些情况下可能会遇到混合使用的场景,比如给定两个绝对路径作为参数传递给 `os.path.join()` 方法,则无论在哪种平台上都不会发生任何连接动作而是直接返回第二个参数所代表的路径[^2]: ```python path1 = "/home\\wangweiqing\\soft" # 假设这是第一个参数 path2 = "/root/wangweiqing\\soft/python/test.py" result_path = os.path.join(path1, path2) print(result_path) # 结果可能是后者覆盖前者成为新的完整路径而非简单相加的结果。 ``` 对于跨平台兼容性的考虑,建议始终采用纯正斜杠 `/` 或者通过调用 `os.sep` 来获取对应的操作系统默认分隔符来进行路径定义;另外也可以利用 `raw string` (r"" 字符串前缀) 防止转义字符干扰[^3]. #### 示例代码展示如何正确处理斜杠问题: ```python import os # 推荐做法一:统一使用正斜杠 '/' dir1 = '/user/hou/Package/' dir2 = 'python' corrected_directory = os.path.join(dir1, dir2).replace('\\', '/') print(f'directory after correction : {corrected_directory}') # 推荐做法二:使用 raw string os.sep 获取系统特定分隔符 dir_raw = r'\user\hou\Package\' + os.sep + 'python' normalized_directory = os.path.normpath(dir_raw) print(f'normalized directory : {normalized_directory}') ```
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值