域适应编程:加载数据

文章介绍了在处理数据时,特别是seg-y、mat和npy文件格式的数据,如何使用numpy进行维度变换和数据类型转换。通过示例展示了加载mnist数据,增加矩阵维度,进行维度交换,转换数据类型以及对标签进行处理的过程,包括利用argmax降维和随机排列样本以增强模型训练的多样性。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

我们处理的数据,可能是seg-y文件、mat文件或者npy文件。

在读取数据到把数据输入网路之前,我们经常需要变换数据的维度,数据类型等。

在这个阶段,通常数据是ndarry类型。

以下总结常用的数据处理操作。

from scipy.io import loadmat
mnist_data = loadmat('../data/mnist.mat')
mnist_train = mnist_data['train_28']
mnist_test = mnist_data['test_28']
mnist_train = np.expand_dims(mnist_train, 3)   # 增加矩阵维度
mnist_test = np.expand_dims(mnist_test, 3)
mnist_train = mnist_train.transpose((0, 3, 1, 2)).astype(np.float32) #矩阵各维度数据交换
mnist_test = mnist_test.transpose((0, 3, 1, 2)).astype(np.float32) #改变数据类型
mnist_labels_train = mnist_data['label_train']
mnist_labels_test = mnist_data['label_test']
train_label = np.argmax(mnist_labels_train, axis=1) # 降维 6000*1 变为6000
inds = np.random.permutation(mnist_train.shape[0])  # 打乱后随机排列
mnist_train = mnist_train[inds]
train_label = train_label[inds]
test_label = np.argmax(mnist_labels_test, axis=1) 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值