温温
2017-12-01 22:15 北京大学 算法工程师
关注
就算10亿条数据，每个有32特征，每个特征用double存，10^9*2^5*8=10^9*2^8 大概需要238G的内存，而你需要用这么多数据训练一个33维的向量，是不是有点数据量过多了呢。 我建议从两个方面走： 1）如果真的要用这么多数据，那么肯定没法读入内存的，那么就麻烦点，把每次训练的batch size搞大点，每次从硬盘读数据，然后训练 2）训练一个33维的向量真的不需要那么多数据，随机抽出一部分数据来训练就足够了
查看原帖
点赞 1
相关推荐
点赞 评论 收藏
分享
创作小队长：我给你这件衣服，三家hr不都炸了嘛
查看图片 点赞 评论 收藏
分享
牛客热帖
更多
正在热议
更多
# 国企还是互联网，你怎么选？ #
122769次浏览 947人参与
# 找工作，行业重要还是岗位重要？ #
8626次浏览 106人参与
# 五一之后，实习真的很难找吗？ #
47436次浏览 343人参与
# 盲审过后你想做什么？ #
13094次浏览 117人参与
# 应届生进小公司有什么影响吗 #
67285次浏览 984人参与
# 外包能不能当跳板？ #
22416次浏览 192人参与
# 25届秋招公司红黑榜 #
257393次浏览 1083人参与
# 租房找室友 #
13617次浏览 98人参与
# 小厂实习有必要去吗 #
42396次浏览 260人参与
# 领导秒批的请假话术 #
10269次浏览 76人参与
# 蚂蚁集团工作体验 #
10848次浏览 70人参与
# 设计人如何选offer #
98652次浏览 690人参与
# 五一假期，你打算“躺”还是“卷”？ #
34582次浏览 458人参与
# 考研可以缓解求职焦虑吗 #
21772次浏览 257人参与
# 如果校招重来我最想改变的是 #
245397次浏览 2781人参与
# 面试等了一周没回复，还有戏吗 #
116208次浏览 1078人参与
# 一句话证明你在找工作 #
292371次浏览 2408人参与
# 大疆的机械笔试比去年难吗 #
69732次浏览 603人参与
# 找工作前vs找工作后的心路变化 #
7253次浏览 64人参与
# 潍柴工作体验 #
17052次浏览 17人参与