Together_CZ的博客

gcc: error trying to exec 'cc1plus': execvp: No such file or directory报错问题解决

windows下安装PyTorch框架支持CPU和GPU两种安装方式

阿里云GPU服务器异常重启后执行nvidia-smi命令报错：NVIDIA-SMI has failed because it couldn't communicate with the NVIDIA driver. Make sure that the latest NVIDIA driver is installed and running.

kubeflow SDK—kfp进行client实例化操作时报错kfp_server_api.exceptions.ApiException: (400)和ConnectionRefusedError: [Errno 111] Connection refused和urllib3.exceptions.NewConnectionError: Failed to establish a new connection

酷炫多彩的个性化词云可视化

学习数据开发，数据库一定是绕不开的一块重要的内容，在python的生态中，已经有很多非常出色的数据操作模块了，比如：sqllite、pymysql等等，今天在查询一些资料的时候无意间发现了一款被介绍说明得是很轻量化的数据库模块，关键是纯python开发的，突然就有了学习了解的兴趣。其实，从这里的数据形式我们不难看出，TinyDB的形式跟json即为相似，底层应该就是基于json字典对象开发构建的。感兴趣的话可以把玩一下，初次简单体验记录一下，后面有用到的时候可以快速应用。下面是一些作者给的介绍。

接下来是gcc升级，这里选择从4.8.5升级到5.2.0，当然你也可以选择自己对应的版本即可。可以直接从files里面下载，链接在。接下来查看gcc版本确认是否安装成功。，选择所需要的版本，我这里选择的是。首先处理cmake，官方链接在。可以看到已经安装成功了。

今天在编译安装C扩展模块nms_rotated的时候报这个错误了，感觉看到跟MircosoftVisual相关的错误都很麻烦，不是说简单安装一个依赖模块就可以解决的。在解决这个问题的时候记录一下实践过程。但是对于今天这种情况明显就不适用了，因为今天是项目中的源码需要基于setup.py模块进行编译安装才行的。查了一下资料很多都在说需要安装vscode，这个解决方法说实话从看到的时候我就觉得不靠谱，但是出于解决问题的急迫心理我还是照做了。又查了一些资料说的是要安装visual studio，就跟着下载了。

今天需要在嵌入式设备端运行C的程序，里面有依赖OpenCV的部分，这就需要编译安装好OpenCV才行，这个对于我来说还是比较陌生的，我很少用C，所以这里面也没少折腾，一路上遇上了很多的报错，这里我将完整的安装实践记录下来备忘，也希望帮到有需要的人。查询网上给的解决方案说的是权限不足，但是我本身就是root权限执行操作的，不可能是权限不足的问题，这个问题网上清一色的答案全部都是说权限不足，搞得我很苦恼，实在找不到解决办法的时候我突然想到是否可以手动复制一下这个文件到指定的目录里面去呢？......

6、跳转到了虚拟内存窗口，选中自己要设置的盘符，我这里选中的是D盘，点击【自定义大小】，设置【初始大小】和【最大值】，之后一定要点击右下角的【设置】选项，我前面好几次都操作完了但是程序还是依旧运行失败了，最终发现是这里没有点击【设置】，这些设置也都没有生效，自然也就没有设置成功。今天在windows本地以CPU模式来运行CV深度学习项目的时候报出来了这个错误，在之前的一些项目运行的过程中是没有报这个错误的，所以我最开始怀疑的是代码有问题，但是整体检查了一遍后发现并没有异常，就开始查这个问题。...

因为现在是全新的环境，为了能够后续方便使用，这里需要生成ssh key，并且添加到远程仓库中，这样之后的项目拉取提交就不再需要输入用户名密码等信息了。最近换了电脑，开发提交代码需要用的git需要重新安装一下，正好趁着这个机会，记录一下Git的安装操作流程，记录备忘。其中：几处【:】后面需要输入信息的时候直接回车即可，应该是连续三次回车。到这里就完成了远程仓库的配置了，接下来就可以快乐使用了。复制进去之后点击下方的【Add Key】即可。我这里下载的是64位的安装版的，

我排查定位到问题图片后分析出来的原因就是图片的命名中出现一些特殊的字符或者是无法被解析的字符，连续两个下划线也是不可以的比如我的就是"ad__name.jpg"，这样的就是错误的，可以对自己的文件夹中的图像数据批量重命名处理即可。根据报错指示进行查看，发现报错位置是torchmetrics模块，大概率是安装的torchmetrics版本与代码要求的版本不一致。正确解决方案：更换torchmetrics版本为0.5版本。这里千万不要手欠去修改源码。.........

在我之前的一篇文章中，详细介绍了sklearn模型转化为pmml的完整操作流程，因为实际业务的需要，很多时候只能将模型转化为pmml供平台端的java程序调用，在实际操作实践完成后我写了这篇文章，需要的可以看下。我查了很多网上的资源，关于【切换JAVA_HOME】不起作用的答案，比如：删除system32下的几个exe文件，将JAVA_HOME移到系统PATH的最前面对于我的问题来说都是没有用的。终于问题解决，记录备忘一下，希望帮到同样遇上这个问题的人。打印出来的版本信息一直都是1.6的，让我很是郁闷。..

在使用pycuda的时候安装报错：Could not build wheels for pycuda which use PEP 517 and cannot be installed百度到一解决办法如下：pip install -i https://pypi.tuna.tsinghua.edu.cn/simple pycuda --no-binary :all: 实测没有解决问题。 第二种方式是从源码编译安装，如下：1...

今天在一个新的环境里面安装包的时候报错[Errno 99] Cannot assign requested address，具体如下所示：网上也查了一些资料，发现跟我问题相关的几乎没有，我就开始想这个问题应该不是很复杂的报错，就尝试升级pip试一下：升级之后重新安装环境就可以了，记录一下吧，希望能帮到遇上同样问题的人。...

首先查看一下对应的系统相关的信息：radhat或centos存在： /etc/redhat-release 这个文件执行命令： cat /etc/redhat-releaseubuntu存在 : /etc/lsb-release 这个文件 执行命令： cat etc/lsb-release 可以看到我的系统信息是：CentOS Linux release 7.7.1908 (Core) 因为服务器断了一下，导致我之前的命令执行纪录被后面...

今天在使用docker进入指定容器的时候报错了，报错截图如下所示： 仔细核实了一下命令的确是没有错的，但是就是进不去容器中，经过一番查资料意识到这个是docker装的有问题，结合报错就可以理解了：Error response from daemon: OCI runtime exec failed: exec failed: container_linux.go:345: starting container process caused "exec: \"/bi...

今天在安装部署盒子上面环境的时候出现了下面的报错信息： 可以看到，是因为需要使用到rz命令来上传文件数据，触发不存在该命令，之后安装的时候出现异常，我们其实已经替换了原始的源数据为中科大的源了，不知道什么问题还是不行，所以这里要修改成其他的源。 sources.list文件的条目都是有格式的（通过上面的内容大家也看的出来），一般有如下形式：deb http://site.example.com/debian distribution component1...

最近需要用到cv，编译安装cv里面的一步就是需要用到cmake，这里就先把cmake编译安装起来。这里主要是自己亲身安装实践记录，备忘方便后续查看。 最开始的时候是需要先确定下自己的Linux机器是Centos还是Ubuntu的，最简单的区分办法就是通过软件的安装命令yum和apt-get来区分，Centos都是用的yum，而Ubuntu用的都是apt或者apt-get。还有一种方式可以区分，这里一并汇总如下：方式一【查看系统信息】: radhat或centos存在： ...

在本教程中，您将学习如何将 OpenCV 的“深度神经网络”(DNN) 模块与 NVIDIA GPU、CUDA 和 cuDNN 结合使用，以将推理速度提高 211-1549%。 早在 2017 年 8 月，我发表了我的第一个关于使用 OpenCV 的“深度神经网络”（DNN）模块进行图像分类的教程。 PyImageSearch 的读者非常喜欢 OpenCV 的 dnn 模块的便利性和易用性，因此我继续发布有关 dnn 模块的其他教...

今天要运行一个项目，首先在初始配置阶段要执行 yarn install 结果出现了下面的报错： 执行 yarn --version报错如下： 执行 yarn version结果如下： 网上查资料的时候看到一篇相关的文章，可以参考解决问题： 这也是我尝试解决问题的思路，这里给出来的说法是，原始的java安装环境里面已经有yarn了，新安装的yarn的环境变量需要放在它前面。 接下来下载yarn，我是在...

最近一个项目部署需要开启一个web服务，这个需要人工启动才可以，一旦电脑重启就会导致该服务关闭，如果后面忘记启动或者是维护就会导致前端项目无法访问到后台数据，所以最好的解决办法就是做一个自启动的脚本任务，将这个任务加入到Linux的系统启动中，这样系统初始化完成后可以直接自动执行我们自定义的脚本任务，接下来记录一下整个实践过程。 网上其实有很多讲解的文章，这里我选择的方式是修改 /etc/rc.local 文件来实现我的需求。 首先看下原始文件的内容，如下所示：...

由于实际工作的情况，我之前大多数的编辑开发工作都是在Windows下进行的，很多软件的安装使用也都是在Windows下的，最近需要在Ubuntu下用到软件Sublime，所以这里就需要进行一下安装配置了。 下面是整个操作过程的记录，备忘，也是为了帮到需要的人。1、直接访问官方，根据指令来完成基础软件的下载和安装Install the GPG key:wget -qO - https://download.sublimetext.com/sublimehq-pub.gpg ...

之前断断续续搞过一些Hadoop生态的学习和小实践，现在有这个需要了就重新捡起来了，但是机器上没有这套环境需要重新安装一下，其实本质上来说在Linux下安装很多框架或者是系统并不麻烦，大多都是解压缩，改一些配置文件，然后配置一下对应的环境变量最终source使其生效就可以了。 最近需要使用到HBase数据库，HBase数据库要依赖Hadoop，我们选择使用MySQL作为Hive的元数据，所以在安装配置Hive之前需要安装好Hadoop和MySQL才可以。 为了方便使用，我将自...

一直以来绝大多数的深度学习应用都是基于Keras和Tensorflow搭建的，很少有去花时间使用过Pytorch，最近正好有时间就想学习下这个被称为最适合做学术研究的深度学习框架。 这里主要是记录下自己windows环境下的环境搭建过程，希望能帮到需要的人。 安装Pytorch的方式比较特殊，虽然也是基于pip安装的，但是又不能像安装Keras一样，直接pip安装，这样的话会报错要你参考官网给出来的安装方式。 先来看下Pytorch的官网，在这里，首页...

最近的工作中需要用到高版本的gcc，系统自带的是5.4.0版本的，这里需要安装的高版本的是7.5.0的，安装过程也是比较坎坷的，也是因为没有搞过这个东西，不熟悉，所以踩了很多坑，耽误了很多时间，不过实践也是学习的一部分，这里还是成功解决掉了这个问题了，下面就不多说废话了，直接进入正题了。 原始版本截图如下所示： 升级后版本截图如下所示： 所需依赖资源包详情如下：升级本地gcc版本所需安装包详情如下：gcc-7.5.0.tar.gzgmp-6....

其实之前在学校的时候由于服务器会被很多人共同使用，资源什么的都是相互占用的，有时候权限控制得也是比较厉害的，这里我们有时候需要做一点小实验的时候直接操作服务器会比较麻烦，往往都是采用基于jupyternotebook的编程方式来进行编程练习的，这里正好最近公司新整合了一下服务器资源，这里就想着重新配置一下Jupyter方便使用，因为整理比较简单，主要就是基础环境的安装以及用户密码配置等...

Python是一门非常友好的语言，学习成本很低，这也是我很喜欢写Python的原因之一，在与应用端或者是业务端做整合的时候我们经常会将模型或者是数据分析的应用做成可以被直接调用的web服务来提供外部的访问，在web服务搭建这一块，有很多的第三方库可以完成这一任务，这里列举出来我了解的web框架，欢迎补充：Django: Python Web应用开发框架Diesel：基于Green...

今天需要基于gevent来启动gunicorn部署的flask服务，在Python2版本下面的时候是正常启动的，但是在Python3版本下面启动测试的时候就报错了，报错信息如下所示：pkg_resources.DistributionNotFound: The 'psutil>=5.6.1; platform_python_implementation== "CPython"...

今天临近下班的时候来了一个需求就是我们需要把当前比较耗费资源的接口开发成异步通讯的机制，简单来说就是有一个消息队列来不停地进行消息的集中分发与任务处理，这里应用端给出的方案是使用kafka来做，但是这个我在之前没有接触过，所以没有头绪，今天晚上外面下着大暴雨，正好还在公司里面没有回去，就想着在本机搭建一下kafka的环境，来实际地自己去搞一搞整个过程，先熟悉一下再说。 闲...

      今天在远程部署服务器的时候出现了一个问题，Python安装包在本地安装的时候会有Scripts文件夹，但是同样的安装包在服务器安装时一直不出现，找了几种方法解决了这个问题。       首先，这个问题是比较常见了，可能因为系统不同或者其他的因素会导致该情况的产生，下面是解决方案：1）方案1：      从官网下载安装包再次安装2）方案2：       下载easy_...

    今天在不知道多少次的尝试下终于成功完成了XGBOOST的安装，关于XGBOOST的更多介绍网上也有很多很多，不管是原理详解，还是实例调用等等，之前由于在windows下安装失败，就只好转账linux下了，可是在windows下安装xgboost的新依然不死，今天，终于实现了。。。。。    先说一下之前数次安装失败的原因吧，主要分为几种情况1.在编译成功后进入python目录下面输入pyt...

    今天使用到了GPU来加速计算，那种感觉简直就是一飞冲天了，临近毕业季，大家都在做实验，服务器早已是不堪重负了，我们屋的服务器一堆人再用，卡到爆炸，训练一个模型粗略计算一下迭代100次就需要3、4天的时间，得不偿失，正好隔壁有一台闲置的GPU深度学习服务器，决定上手搞一搞。    深度学习我也是初步接触，果断选择最简单的keras来入门，网上关于Tensorflow和Theano的GPU加速...

之前其实一直没有接触过.Net Frame这东西，今天项目需要用到了才来安装，本来已经导出来了安装包了，安装本应该很顺利的，却未曾想，每次安装都是以“安装未成功 ，出现严重错误”结束，让我颇为郁闷，上网查询了很多相关的资料，才知道在大家的安装过程中出现类似的错误信息数不胜数，网上大多给出来的解释都是在安装过程中它的相关组件损坏了导致无法成功安装，但是呢，.Net Frame这东西本省又是很难删除干