立即注册  找回密码
 立即注册
CeraNetworksBGVM服务器主机交流会员请立即修改密码Sharktech防护
查看: 58|回复: 4

求助tensorflow大佬

[复制链接]

求助tensorflow大佬

[复制链接]

54

主题

180

回帖

1594

积分

金牌会员

积分
1594
lemeaco

54

主题

180

回帖

1594

积分

金牌会员

积分
1594
2021-11-10 21:44:52 | 显示全部楼层 |阅读模式



如图,调用tf.data.Dataset.from_tensor_slices()接口把pandas读出来的文件转成tf格式的时候的时候提示显存不足(内存不足?),我的电脑是r9000p 3060版本的,显存6G, 内存16G但是我又开了100G的虚拟内存。数据集大概有4Kw条,占20多G内存。怎么破呢,可以弄成迭代器吗,有无大佬给个demo,万分感谢。

我看的这个教程 https://m.imooc.com/wiki/tensorflow-tensorflowloadDateFrame

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×
回复

使用道具 举报

12

主题

1351

回帖

3106

积分

论坛元老

积分
3106
ApkB

12

主题

1351

回帖

3106

积分

论坛元老

积分
3106
2021-11-10 22:09:24 | 显示全部楼层
这个超出MJJ理解范围了
回复

使用道具 举报

78

主题

237

回帖

1234

积分

金牌会员

积分
1234
期权小王子

78

主题

237

回帖

1234

积分

金牌会员

积分
1234
2021-11-10 22:18:29 | 显示全部楼层
我有个例子
回复

使用道具 举报

78

主题

237

回帖

1234

积分

金牌会员

积分
1234
期权小王子

78

主题

237

回帖

1234

积分

金牌会员

积分
1234
2021-11-10 22:19:52 | 显示全部楼层
你在读数据文件时,不要一次全部读到内存中
回复

使用道具 举报

78

主题

237

回帖

1234

积分

金牌会员

积分
1234
期权小王子

78

主题

237

回帖

1234

积分

金牌会员

积分
1234
2021-11-10 22:20:58 | 显示全部楼层
做成迭代器就行
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|小黑屋|HS2V主机综合交流论坛

GMT+8, 2024-11-25 23:03 , Processed in 0.028102 second(s), 4 queries , Gzip On, Redis On.

Powered by Discuz! X3.5

© 2001-2024 Discuz! Team.

快速回复 返回顶部 返回列表