datasets api 问题

来源:互联网 发布:最优化理论与方法视频 编辑:程序博客网 时间:2024/06/06 02:46

datasetsAPI获取数据时也无法忽略其中一种错误,需要定位到底是哪种数据错误导致的
猜测1:是无法迭代的数据文件导致dataset的获取数据问题(没有任何错误提示)
验证1:datasets+estimator训练,也可以训练一阵子,然后报错 DataLossError (see above for traceback): corrupted record at 889902968,且总是在同一位置报错。 经过debug发现运行到该处后就无法继续迭代。

猜测2:可以迭代但是样本损坏的数据文件也会导致该bug?
验证2: 由于暂时没有获得该类型的文件,故而无法验证