找回密码
 立即注册
CeraNetworksBGVM服务器主机交流IP归属甄别会员请立即修改密码
查看: 54|回复: 4

求助tensorflow大佬

[复制链接]

53

主题

180

回帖

1589

积分

金牌会员

积分
1589
发表于 2021-11-10 21:44:52 | 显示全部楼层 |阅读模式



如图,调用tf.data.Dataset.from_tensor_slices()接口把pandas读出来的文件转成tf格式的时候的时候提示显存不足(内存不足?),我的电脑是r9000p 3060版本的,显存6G, 内存16G但是我又开了100G的虚拟内存。数据集大概有4Kw条,占20多G内存。怎么破呢,可以弄成迭代器吗,有无大佬给个demo,万分感谢。

我看的这个教程 https://m.imooc.com/wiki/tensorflow-tensorflowloadDateFrame

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×
回复

使用道具 举报

12

主题

1351

回帖

3106

积分

论坛元老

积分
3106
发表于 2021-11-10 22:09:24 | 显示全部楼层
这个超出MJJ理解范围了
回复

使用道具 举报

67

主题

216

回帖

925

积分

高级会员

积分
925
发表于 2021-11-10 22:18:29 | 显示全部楼层
我有个例子
回复

使用道具 举报

67

主题

216

回帖

925

积分

高级会员

积分
925
发表于 2021-11-10 22:19:52 | 显示全部楼层
你在读数据文件时,不要一次全部读到内存中
回复

使用道具 举报

67

主题

216

回帖

925

积分

高级会员

积分
925
发表于 2021-11-10 22:20:58 | 显示全部楼层
做成迭代器就行
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|HS2V主机综合交流论坛

GMT+8, 2024-6-12 21:32 , Processed in 0.083575 second(s), 3 queries , Gzip On, Redis On.

Powered by Discuz! X3.5

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表