
数据处理记录
多肉葡萄0511杯
这个作者很懒,什么都没留下…
展开
-
【数据处理】三维数据堆叠成四维并分割成训练集和测试集(为模型训练做准备)
def load_data(file_path): data = np.load(file_path) print(data.shape) return data file_path = '\series.npy' def split(data, train_cnt, input_num,output_num): # 计算三维数据的第一个维度的长度,确定如何分割 data_len = len(data[0]) set_len = input_原创 2021-11-02 16:40:21 · 619 阅读 · 1 评论 -
【数据处理】表格合并与去重
多表格合并与去重 import os import pandas as pd import glob def hebing(csv_list, outputfile): for inputfile in csv_list: f = open(inputfile) data = pd.read_csv(f) data.to_csv(outputfile, mode='a', index=False) print('完成合并') de原创 2021-11-02 16:23:04 · 428 阅读 · 0 评论 -
【数据处理】把记录了网格点位的DataFrame还原成网格形式(增加了数据归一化)
DataFrame存储的网格数据转换成数组或Tensor 存储(xr.Dataset 用法学习)NOAA 下载.csv 模型数据 转换成 Tensor 处理NOAA下载数据.csv 格式数据转换成 一般气象数据格式或array NOAA 下载.csv 模型数据 转换成 Tensor 处理 (1) 从NOAA 下载需要的数据 (2) .csv数据格式转换 (3) 保存成.npy或.nc 数据 NOAA下载数据 通常可以通过以下链接(NOAA)下载需要的气象数据/海洋数据等 NWW3 模型数据 台风天海洋数据原创 2021-11-02 16:19:06 · 489 阅读 · 0 评论