qq_43614355-优快云博客

系统：win10 64位python版本：3.7.5superset版本：1.0.0可能是markupsafe吧版本过高引起，执行如下命令2.2 ImportError: cannot import name ‘_ColumnEntity‘ from ‘sqlalchemy.orm.query‘sqlalchemy版本不兼容，执行如下命令2.3 ‘export’ 不是内部或外部命令，也不是可运行的程序或批处理文件。export是Linux和mac中的命令，Windows中应使用...

2022-07-08 17:53:19 1025

原创使用pyinstaller打包flask项目

使用pyinstaller打包flask项目1. 打包命令2. 生成app.spec文件2.1 Invalid async_mode specified2.2 AttributeError: 'NoneType' object has no attribute 'isatty'1. 打包命令pyinstaller app.py -D -w #app.py指项目启动文件-F：仅仅生成一个文件，不暴露其他信息，启动较慢。-D：生成一个文件夹，里面是多文件模式，启动快。-w：窗口模式打包，

2022-04-11 13:34:30 4028 7

原创 win10中安装cuda和TensorFlow-gpu的坑

1.首先查看电脑GPU上cuda的版本nvcc-V如果此处提示 :nvcc 不是内部或外部命令，也不是可运行的程序或批处理文件。说明电脑没有装cuda，需要到nvidia官网去下载cuda，下载时需要注意cuda和TensorFlow-gpu的版本一定要匹配具体请参开TensorFlow官网文件https://www.tensorflow.org/install/source_windows本人用的是下面的配置2. 安装CUDA去英伟达官网下载对应版本的cuda，下载完成后先查看电脑

2021-11-24 17:33:10 7804 12

原创 python win10 安装ta-lib报错

使用 conda install -c conda-forge ta-lib 命令进行安装

2021-11-09 09:48:29 230

原创 matplotlib常用操作

plt.rcParams['font.sans-serif'] = 'SimSun' # 用来正常显示中文plt.rcParams['axes.unicode_minus'] = False # 用来正常显示负号

2021-11-05 11:15:55 169

原创使用pandas自动替换数据的列名

使用pandas自动替换数据的列名import pandas as pdfrom setting import cols1def auto_replace_feat_name(file_path): """ 自动替换特征名称 :param file_path: :return: """ df = pd.read_csv(file_path) try: df = df.drop('Unnamed: 0', axis=1)

2021-10-19 10:30:56 585

原创 pandas相关性分析的三种方法

使用pandas中的皮尔逊，肯德尔和斯皮尔曼做特征相关性分析三种系数的具体试用范围可参考： https://blog.youkuaiyun.com/qrdsy_lrf/article/details/79227969import pandas as pdfrom settings import colssdef corr_matrix(df): """ 返回与标签列有关的相关性矩阵 :param dataset_name: :param label: :return

2021-09-14 10:36:48 2157

原创 pandas删除异常值

pandas初步删除明显错误的值，对数据做初步清洗 def del_error_data(self, data): data = data[data.IAS.between(0, 70, inclusive=True)] data = data[data.Throttle.between(0, 115, inclusive=True)] data = data[data.Rev.between(1, 6200, inclusive=True)]

2021-08-30 16:16:36 2677 1

原创 pandas样本均衡策略

训练模型时通常会遇到样本数据分布不均匀导致模型效果不理想，有些算法可以通过配置class_weight参数保证样本均衡，当算法不存在这些参数时我们需要手动处理样本数据保证样本得均衡。今天主要介绍样本不均衡中欠采样的处理方法：# !/usr/bin/python# -*- coding:utf-8 -*-# file: sample_balanced.py# author: Lawrence# datetime: 2021/8/26 16:23import pandas as pdfrom i

2021-08-30 14:39:41 796

原创 LSTM时序预测loss值为nan

当loss 显示为 nan时，首先检查训练集中是否存在nan值，可以用np.isnan()方法进行查看，如果数据集没问题再检查下损失函数会否适合当前模型，def trainModel(train_X, train_Y): """ trainX，trainY: 训练LSTM模型所需要的数据 """ model = Sequential() model.add(LSTM(units=50, activation='relu', i.

2020-12-16 15:20:56 6710 2

原创 Python图像处理 PIL中convert(‘L‘)函数原理

img.convert(mode=None, matrix=None, dither=None, palette=0, colors=256)　　　PIL有九种不同模式: 1，L，P，RGB，RGBA，CMYK，YCbCr，I，F。参数解释：param mode：请求的模式。参见：概念模式。 matrix：可选的转换矩阵。如果给定，则应为包含浮点值的4元组或12元组。 dither：抖动方法，在从模式“RGB”转换为“ P”或从“ RGB”或“ L”转换为“1”时使用。可用的方法.

2020-11-19 10:06:53 14409

原创关联分析算法Apriori Python

本文参考： zzzzMing在美国有这样一家奇怪的超市，它将啤酒与尿布这样两个奇怪的东西放在一起进行销售，并且最终让啤酒与尿布这两个看起来没有关联的东西的销量双双增加。这家超市的名字叫做沃尔玛。你会不会觉得有些不可思议？虽然事后证明这个案例确实有根据，美国的太太们常叮嘱她们的丈夫下班后为小孩买尿布，而丈夫们在买尿布后又随手带回了他们喜欢的啤酒。但这毕竟是事后分析，我们更应该关注的，是在这样的场景下，如何找出物品之间的关联规则。接下来就来介绍下如何使用Apriori算法，来找到物品之间的关联规则吧。一.

2020-08-19 15:42:31 453

原创利用python对数据分流

本文转自https://blog.youkuaiyun.com/u014770372/article/details/72819914仅个人学习使用，侵删业务需求：hive表中包含了顺丰的所有的运单流向（北京到深圳为一个流向，全国大约十万个流向），现将数据分流，将每一个流向写入一个文件中report_dt 报表时间src_area_code 始发地区代码src_dept_name 始发地区名称dest_area_

2020-06-20 10:06:04 328

原创 Python配置镜像源

由于Python库的服务器都在国外，国内下载是速度普遍会很慢，所以需要配置一个镜像源来加快下载速度，国内现在主要的镜像源有如下几个：清华：https://pypi.tuna.tsinghua.edu.cn/simple阿里云：http://mirrors.aliyun.com/pypi/simple/中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/华中理工大学：http://pypi.hustunique.com/山东理工大学：http://pypi.

2020-06-06 11:10:40 1976

空空如也

空空如也