批量读取tfrecord样本总数

博客展示了一段Python代码,定义了total_sample函数,用于计算指定目录下TFRecord文件中的样本总数。通过遍历目录获取TFRecord文件路径,再使用tf_record_iterator迭代最后一个文件来统计样本数量,并给出了调用示例。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

def total_sample(file_path):
tfrecords_list = []
temp = os.listdir(file_path)
# Get the path of tfrecord in a dir
sample_nums = 0
for tfrecord in temp:
tfrecords_list.append(os.path.join(file_path, tfrecord))
# print(tfrecords_list[-1])#返回list中的最后一个值
for record in tf.python_io.tf_record_iterator(tfrecords_list[-1]):
sample_nums += 1
# print(sample_nums)
return sample_nums

file_path = r’D:\python-soft\mtan\data\train’
i = total_sample(file_path)

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值