【运行环境】

系统:Windows10 64bit

框架:MindSpore 1.3.0

硬件:CPU

语言:Python 3.7.9

【功能模块】

mindspore.data.TFRecordDataset

【操作步骤&问题现象】

前言:利用Tensorflow中的tensorflow.data.TFRecordDataset进行对比实验

操作步骤1:

1、读取一个tfrecord文件

2、返回文件中包含的数据大小(即,多少条数据)

问题1:无法返回准确的数据大小

为进一步剖析上述问题,有下面的操作步骤2

操作步骤2:

1、读取一个tfrecord文件

2、遍历其数据

问题2:无法解析该文件

根据问题1、2,个人猜测是CPU版本的TFRecordDataset中未实现读取功能。

【截图信息】

代码:

运行结果:

操作步骤1对应结果,可见minspore返回结果为1,tensorflow返回结果为10748。

(为阅读方便,截图分割为两部分,对应操作步骤1和操作步骤2的结果)

操作步骤2对应结果为报错信息,无法解析tfrecord file。

 

这个问题主要是在windows上有问题,在linux cpu环境下应该是正常的;

这问题最近我们也发现了,并已有问题单在跟踪和分析,需要在windows上使用的话,请留意对应issue的解决情况:

https://gitee.com/mindspore/mindspore/issues/I4EAQB

Logo

昇腾计算产业是基于昇腾系列(HUAWEI Ascend)处理器和基础软件构建的全栈 AI计算基础设施、行业应用及服务,https://devpress.csdn.net/organization/setting/general/146749包括昇腾系列处理器、系列硬件、CANN、AI计算框架、应用使能、开发工具链、管理运维工具、行业应用及服务等全产业链

更多推荐