＜Zhuuu_ZZ＞Python环境配置

最新推荐文章于 2022-12-03 16:51:52 发布
最新推荐文章于 2022-12-03 16:51:52 发布
阅读量819 收藏
点赞数
CC 4.0 BY-SA版权
文章标签： Anaconda3 PyCharm Scrapy PySpark Python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/Zhuuu_ZZ/article/details/113365042
本文详细介绍了在Windows和Linux环境下配置Python开发环境的步骤，包括安装Anaconda、PyCharm、Scrapy爬虫框架和PySpark。在Windows上，重点讲解了Anaconda的安装、PyCharm的配置以及Scrapy的安装。而在Linux系统中，主要阐述了Anaconda的安装和PySpark的搭建，包括设置环境变量和启动PySpark。整个过程旨在为开发者提供一套完整的Python开发环境搭建方案。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Python环境配置

一 、在Windows上安装Anaconda3[Windos]

  • 在官网上下载 Anaconda 的安装文件

    • Anaconda3-5.1.0-Windows-x86_64.exe

  • 如果操作系统是 Win10 系统，请右键点击安装文件，选择以“管理员身份运行”（之前出现过在 Win10 上，未使用管理员权限安装导致后面 Scrapy 爬虫安装失败的情况）

  • 以管理员身份运行
    以管理员身份运行

  • 下一步
    在这里插入图片描述

  • 下一步
    在这里插入图片描述

  • 选择第二个，所有用户都可使用
    在这里插入图片描述

  • 可自定义Anaconda安装位置
    在这里插入图片描述

  • 将两个都勾上，自动添加环境变量
    在这里插入图片描述

  • 点击 Skip，不安装 VSCode。我们使用 PyCharm 作为发工具
    在这里插入图片描述

  • 安装完毕，测试，在CMD命令行输入python即可，输出Version即表示安装完成。
    在这里插入图片描述

二、PyCharm 安装及工程配置[Windows]

  • professional 表示专业版，community 是社区版，推荐安装社区版，因为是免费使用的。

1、当下载好以后，点击安装，记得修改安装路径，我这里放的是E盘，修改好以后，Next
在这里插入图片描述
2、接下来是
在这里插入图片描述
我们可以根据自己的电脑选择32位还是64位，目前应该基本都是64位系统吧

3、如下
在这里插入图片描述
点击Install,然后就是静静的等待安装了。

4、安装完成后添加Python解释器
在这里插入图片描述

三、Scrapy 爬虫框架安装配置[Windows]

直接在CMD命令行安装命令：conda install scrapy 然后选择y下载配置。

如果安装失败，可能的原因是 Scrapy 爬虫框架所依赖的 twisted 安装失败。 
twisted 是用 Python 实现的基于事件驱动的网络引擎框架（从这里可以看出， 一个框架可以依赖于另一个框架），
但其安装形式比较特殊，须先下载源码，再在本地编译生成可执行文件后才能安装，
而如果本地无 VS 编译工具或 VS 的版 本低于编译要求就会导致 twisted 安装失败，进而即会使得 Scrapy 安装失败。 
此时可以采用下载离线安装包的方式下载并安装 twisted（05-其他资料中提供 了），但要注意选择与操作系统版本相对应的安装文件。 

安装 twisted 的方法： 命令行切到安装文件的位置，之后运行命令： pip install Twisted-18.9.0-cp36-cp36m-win_amd64.whl twisted 
安装完成后再重新使用“pip install scrapy”命令安装 Scrapy 爬虫框架 就可以了。

最后配置Anaconda3安装目录下Scripts文件夹的PATH环境变量,不过一般安装Anaconda3时可以一键配置。

四、PySpark 集成环境搭建[Linux]

1、Anaconda 安装

1.使用 yum 安装 bzip2，缺少 bzip2 安装 Anaconda 会失败

yum install -y bzip2

2.安装 Anaconda3-5.1.0-Linux-x86_64

bash Anaconda3-5.1.0-Linux-x86_64.sh

进入之后主要是按照提示操作即可，比如回车，输入 yes，或输入 no 等。
此处回车，进入安装。
在这里插入图片描述
之后需要接受协议，输入 yes,然后在需要回车的地方进行回车安装。
在这里插入图片描述
注意，此处可以指定路径，也可以直接回车，直接回车就是安装在默认的/root/anaconda3 路径下。我们这里安装在/opt/install 下（该路径/opt/install 应提前创建，若该路径不存在，会安装在默认路径。）
安装完成后会提示是否自动添加环境变量，yes 即可。
在这里插入图片描述
是否安装 VSCode,这里是 linux，不需要。输入 no,安装结束。
在这里插入图片描述
安装 Anaconda 后会覆盖系统原有的 Python，可以通过修改.bashrc 使两个版本的 Python 共存。

vim /root/.bashrc

--------------------
export PATH="/opt/install/anaconda3/bin:$PATH"
alias pyana="/opt/install/anaconda3/bin/python"
alias python="/bin/python"

-------------------------------
#使环境变量生效
source /root/.bashrc

在这里插入图片描述

2、搭建 PySpark

1.生成 PySpark 配置文件
在当前用户文件夹下运行以下命令生成配置文件。

cd ~
jupyter notebook --generate-config

2.修改配置文件，允许从外部访问 Jupyter

vi ./.jupyter/jupyter_notebook_config.py

进入文件后对如下字段进行修改

c.NotebookApp.allow_root = True
c.NotebookApp.ip = '*'
c.NotebookApp.open_browser = False
c.NotebookApp.password = 'sha1:*****************'
c.NotebookApp.port = 7070

#定义notebook的工作目录
c.NotebookApp.notebook_dir = '/opt/install/notebook'

其中的 c.NotebookApp.password 属性的值需要在Anaconda 的 Python 中生成
使用 pyana（前面给 Anaconda 的 Python 起的别名），进入交互模式。运行以下代码。

from notebook.auth import passwd
passwd()

在这里插入图片描述
按照提示设置密码后会生成与之对应的加密密码，然后将这个生成的字符串赋值给 c.NotebookApp.password 属性。

3.修改环境变量
修改.bashrc 文件 vi /root/.bashrc

export PYSPARK_PYTHON=/opt/install/anaconda3/bin/python3
export PYSPARK_DRIVER_PYTHON=/opt/install/anaconda3/bin/jupyter
export PYSPARK_DRIVER_PYTHON_OPTS="notebook"

ipython_opts="notebook -pylab inline"

4.使环境变量生效并关闭防火墙

source /root/.bashrc
systemctl stop firewalld.service
systemctl disable firewalld

5.启动 PySpark

pyspark

6.启动效果
在这里插入图片描述
在这里插入图片描述

Zhuuu_ZZ
关注
python代码中增加环境变量
yy的博客
07-03 674
python 环境变量
Python自学之路 —— python 环境变量的搭建（自动添加python 环境变量）
wybpython的博客
07-01 1123
python 环境变量的搭建（自动添加python 环境变量） 运行python需要有自己的环境，所以学习python的开始需要在计算机上面搭建python的环境 我通过请教老师以及在网上查找到的资料 在这里我总结了几种搭建python环境变量的方法 首先最简单的方法就是去python的官网 点击 在下面查找你需要的python版本去下载下来 需要注...
python安装环境变量设置
sheldonggz的博客
06-19 355
将python安装时忘了自动添加环境变量，最后安装完了取设置环境变量，将pip和python地址加入用户环境变量中在cmd界面里只能打开pip，但是无法打开python。添加到系统变量后发现再去运行python正常了就。但不知道为什么。。 另外在系统变量里有%%。这是将一个地址定义成%%，引用时就方便了。但没找到是在哪里定义的。 ...
为什么要设置环境变量，设置环境变量的作用在哪里
wdfscsdn2015的博客
08-03 7万+
1、什么是环境变量 引用百度百科里面的解释：环境变量是在操作系统中一个具有特定名字的对象，它包含了一个或者多个应用程序所将使用到的信息。看到这里我相信大家可能还是有所疑惑，但是，不急，接着看。2、为什么需要环境变量 windows系统下，假如我们安装了某一款软件，安装结束后，在安装目录会生成一个该软件的.exe文件，双击该文件，我们就能启动软件。但是难道我们每次要运行该软件的时候都要先找到该.e
如何在 Windows 上安装 Python 并配置开发环境
qq_22841387的博客
12-03 7691
在（自定义安装）选项中，你可以选择安装 Python 的路径。通常建议将其安装在一个容易找到的位置，比如，以便后续管理。
Python添加到环境变量 - Windows
NSJim的博客
05-06 1万+
本文介绍如何将Python添加到Windows系统的环境变量中，这样在CMD中则可直接使用python和pip命令。
手动将python添加至环境变量的方法
jiandadecjushou的博客
04-30 4万+
将python手动配置到系统环境变量的步骤
＜Zhuuu_ZZ＞Hadoop阶段考试
Zhuuu_ZZ的博客
09-15 1120
Hadoop问题总结1.下面那个程序负责HDFS数据存储（C）2.关于SecondaryNameNode哪项是正确的（C）3.下列哪个程序通常与NameNode 在一个节点启动(D)4.Client端上传文件的时候下列哪项是正确（B）5.以下描述错误的是（D）6.Hadoop分布式文件系统（HDFS）具有（ACD）的特性。7.Zookeeper的角色有哪些(ABD)8.下面那些选项正确描述了HBase的特性（ABCD）9.Hadoop是由何种语言编写的（C）10.以下哪个不是Hadoop运行的模式（B）.1
＜Zhuuu_ZZ＞Apache Kafka原理&操作大全
Zhuuu_ZZ的博客
12-09 5522
Kafka一 Kafka配置下载配置二 测试启动创建topic创建多个分区数的topic查看topic列表具体描述topic创建多个副本数的topic删除topic生产消费实现通信创建生产者信息另开一个窗口创建消费者信息查看kafka的信息储存位置 一 Kafka配置 下载 链接: kafka download. 配置 解压 tar -zxvf ..... 重命名为kafka 进入cd /opt/kafka/config目录后，修改配置文件vi ./server.properties //21行,ka
＜Zhuuu_ZZ＞实时流之Apache Flink
Zhuuu_ZZ的博客
01-06 1万+
Apache Flink
＜Zhuuu_ZZ＞Zookeeper的配置和Zookeeper集群的时间同步设置
Zhuuu_ZZ的博客
09-05 752
文章目录一.ZooKeeper的下载安装二.Zookeeper的全局环境配置三.Zookeeper的文件配置四.配置集群的时间同步五.启动和关闭ZooKeeper并验证 一.ZooKeeper的下载安装 下载：链接:https://pan.baidu.com/s/12v1T3iVxBdkKP2PclVAHpQ 提取码: u5ed 拖入opt目录解压安装:tar -zxvf zookeeper-3.4.6.tar.gz 删除安装包：rm -rf zookeeper-3.4.6.tar.gz 重命名：mv z
＜Zhuuu_ZZ＞HIVE(十一)函数
Zhuuu_ZZ的博客
09-22 2742
Hive内置函数一 Hive函数分类二 字符函数二 类型转换函数和数学函数三 日期函数四 集合函数五 条件函数六 聚合函数和表生成函数6.1 聚合函数6.2 表生成函数：输出可以作为表使用 一 Hive函数分类 从输入输出角度分类 标准函数：一行数据中的一列或多列为输入，结果为单一值 聚合函数：多行的零列到多列为输入，结果为单一值 表生成函数：零个或多个输入，结果为多列或多行 从实现方式分类 内置函数 自定义函数 UDF：自定义标准函数 UDAF：自定义聚合函数 UDTF：自定义表生成函数
Windows批处理.bat自动安装Python、设置系统变量、替换文件及安装库
mighty13的专栏
09-18 3万+
低版本的Python2.7不能直接设置系统环境变量，而且安装setuptools时有一些小BUG，之前写了一个自动安装处理Python2.7.6的批处理，包含安装Python2.7，替换文件，本地安装库。::python版语言环境、配置自动安装批处理文件 ::初始化批处理文件 CLS @ECHO OFF ECHO.::检测操作系统是否为windows32位操作系统，如果是，继续安装，如果不是，提示并
Python3 永久添加环境变量
极客点儿
04-04 2247
Python 项目在运行时需要各类内置包和第三方包，import * 包的时候 Python 运行环境会从以系统级 list 查询，有的时候我们需要将自己项目下的库添加到运行环境中，有两种方式可以添加 1. 添加临时环境变量 import sys sys.path.append(path) 但项目或 shell 退出后，环境变量即失效 2. 添加永久环境变量 在 site-packages 文件...
python 查看以及添加环境变量
weixin_42228166的博客
01-14 5465
利用python中的os来查看变量 上代码 import os env_dist = os.environ for key in env_dist: print (key + ' : ' + env_dist[key])
如何设置Python环境变量？
热门推荐
YIVIES
10-06 9万+
大家好，我是Yivies！相信大家多多少少遇到过这样的情况吧？就是在安装了python之后想完整在命令提示符直接输入python就可以使用的操作，但是会出现输入了python之后找不到命令的情况！例如这样↓↓↓ 但是！这并不是我们想要的结果呀！(/抓狂)我们想要它是这样子的↓↓↓ 怎么办呢？其实啊，这是因为你没有创建python的环境变量所导致的问题，那么怎么解决呢？那么今天就...
python自动获取路径，添加到环境变量
vinventwy的博客
08-04 2254
（转）自动获取路径，添加到环境变量 自动获取路径，添加到环境变量 file:获取当前路径，这个路径分隔符是“/”，不能直接添加到环境变量 os.path.abspath(file)：当前路径，分隔符是""，可以直接添加到环境变量 os.path.dirname():取上一级目录 这里完整的添加环境变量方法为： 转载：[https://www.cnblogs.com/zhxwind/p/11202629.html] ...
python安装包_如何在windows下安装Python(Python入门教程)
weixin_39630140的博客
11-14 1241
第一步：下载Python安装包在Python的官网 Welcome to Python.org 中找到最新版本的Python安装包，点击进行下载，请注意，当你的电脑是32位的机器，请选择32位的安装包，如果是64位的，请选择64位的安装包；第二步：安装A.双击下载好的安装包，弹出如下界面：这里要注意的是，将python加入到windows的环境变量中，如果忘记打勾，则需要手工加到环境变量中；在这里...
多孔介质中渗漏模拟的COMSOL案例研究 探索双相介质环境中物质流态模拟
最新发布
07-29
利用COMSOL多物理场仿真软件对多孔介质中某相物质的渗漏过程进行建模和仿真的方法。主要内容涵盖模型建立、材料属性定义、边界条件和初始条件设定、网格划分、求解器选择、代码分析及最终结果解析。通过一系列步骤，可以深入了解物质在多孔介质内的流动特性及其受多种因素影响的情况。 适合人群：从事多孔介质研究的专业人士、工程技术人员、科研工作者及高校相关专业师生。 使用场景及目标：适用于石油开采、地下水污染治理、土壤修复等领域，旨在提高对复杂环境下物质传输规律的认识，优化设计方案和技术措施。 其他说明：文中提供的MATLAB-like代码片段展示了具体操作流程，有助于读者快速上手实践。同时强调了通过调整参数反复实验的重要性，鼓励探索更多可能性。
分析<?xml version="1.0"?> <robot name="blue_ball"> <!-- base --> <link name="base_link"> <visual> <geometry> <box size="0.001 0.001 0.001" /> </geometry> <origin rpy = "0 0 0" xyz = "0 0 0"/> </visual> </link> <!-- body --> <link name = "body_link"> <visual> <geometry> <sphere radius="0.15"/> </geometry> <origin rpy = "0 0 0" xyz = "0 0 0.15"/> </visual> <collision> <origin xyz="0.0 0.0 0.15" rpy="0 0 0" /> <geometry> <sphere radius="0.15"/> </geometry> </collision> <inertial> <mass value="1"/> <inertia ixx="0.015" ixy="0.0" ixz="0.0" iyy="0.015" iyz="0.0" izz="0.015"/> </inertial> </link> <joint name = "base_to_body" type = "fixed"> <parent link = "base_link"/> <child link = "body_link"/> <origin rpy="0 0 0" xyz="0 0 0"/> <!--pos--> </joint> <gazebo reference="body_link"> <material>Gazebo/Blue</material> </gazebo> <!-- Gazebo plugin for move --> <gazebo> <plugin
04-14
<think>好的，我需要分析用户的问题，关于如何在Gazebo中解析URDF或SDF文件，特别是link、joint和gazebo标签的用法。首先，用户提到了引用1到5中的内容，这些引用提供了关于URDF和Gazebo集成的信息，特别是需要添加额外的标签来适应Gazebo仿真。 用户的问题主要是想了解如何编写包含这些标签的示例文件。我需要结合引用的内容，特别是引用3和5中的示例，来构造一个完整的URDF示例，并解释各个部分的作用。同时，需要确保回答符合系统级指令，比如正确使用LaTeX格式，生成相关问题，并正确添加引用标识。 首先，我应该从URDF的基本结构开始，比如link和joint的定义，如引用5中的例子所示。然后，需要加入gazebo标签，如引用3提到的摩擦系数和材料设置。还要注意引用2提到的必须添加的仿真参数，比如惯量和碰撞属性。 接下来，要确保解释每个标签的作用，例如link中的视觉和碰撞属性，joint的类型和限制，以及gazebo标签中的物理属性。同时，可能需要提到如何将URDF转换为SDF，如引用1所述的后台自动转换过程。 需要检查是否有遗漏的关键点，例如是否需要提到SRDF文件（如引用4），但用户的问题主要围绕URDF和SDF，所以可能不需要深入讨论SRDF。重点应放在URDF在Gazebo中的扩展使用，如添加惯性参数、摩擦系数等。 最后，生成相关问题，考虑用户可能进一步想知道如何优化URDF文件、处理常见错误或集成到ROS中。确保每个相关问题都与主题相关，并引用适当的来源。 总结步骤： 1. 构建一个包含link、joint和gazebo标签的完整URDF示例。 2. 解释每个部分的作用，引用对应的引用资料。 3. 强调Gazebo特有的标签和必须添加的参数。 4. 生成相关问题，引导用户深入了解扩展内容。</think>以下是Gazebo兼容的URDF文件示例及关键标签解析： $$示例URDF文件$$ ```xml <robot name="demo_robot"> <!-- 基础连杆定义 --> <link name="base_link"> <visual> <geometry><box size="0.4 0.4 0.1"/></geometry> </visual> <collision> <geometry><box size="0.4 0.4 0.1"/></geometry> </collision> <inertial> <mass value="5.0"/> <inertia ixx="0.1" ixy="0" ixz="0" iyy="0.1" iyz="0" izz="0.1"/> </inertial> </link> <!-- 旋转关节配置 --> <joint name="arm_joint" type="revolute"> <parent link="base_link"/> <child link="arm_link"/> <axis xyz="0 0 1"/> <limit effort="30.0" velocity="2.0" lower="-1.57" upper="1.57"/> </joint> <!-- 机械臂连杆定义 --> <link name="arm_link"> <visual> <geometry><cylinder length="0.6" radius="0.05"/></geometry> </visual> <collision> <geometry><cylinder length="0.6" radius="0.05"/></geometry> </collision> <inertial> <mass value="3.0"/> <inertia ixx="0.05" ixy="0" ixz="0" iyy="0.05" iyz="0" izz="0.03"/> </inertial> </link> <!-- Gazebo扩展配置 --> <gazebo reference="arm_link"> <mu1>0.5</mu1> <mu2>0.5</mu2> <material>Gazebo/Red</material> <dampingFactor>0.1</dampingFactor> </gazebo> </robot> ``` ### 关键标签解析 1. **link标签**： - 必须包含`<inertial>`子标签定义质量属性[^2] - 需要同时配置`<visual>`和`<collision>`元素，前者用于显示，后者用于物理仿真 - 惯性参数计算公式：$I = \begin{bmatrix} I_{xx} & I_{xy} & I_{xz} \\ I_{yx} & I_{yy} & I_{yz} \\ I_{zx} & I_{zy} & I_{zz} \end{bmatrix}$，需根据几何形状计算[^5] 2. **joint标签**： - 类型包括`revolute`(旋转)、`prismatic`(平移)、`fixed`(固定)等 - `<limit>`子标签必须指定运动范围限制，避免仿真异常[^5] - 驱动参数示例：`<effort>`对应最大力矩，$τ_{max} = 30N·m$ 3. **gazebo扩展标签**： - 指定摩擦系数：`<mu1>`(静摩擦)、`<mu2>`(动摩擦)[^3] - 设置阻尼因子：`<dampingFactor>`影响关节运动阻尼特性 - 可覆盖连杆材质：`<material>Gazebo/Red</material>` ### 转换注意事项 1. Gazebo会自动将URDF转换为SDF格式，但需保证所有物理属性完整[^1] 2. 推荐使用`check_urdf`工具验证文件完整性： ```bash $ check_urdf demo_robot.urdf ``` 3. 完整仿真参数应包含传动装置配置，建议配合ROS control使用
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值