基本信息
文件名称:大规模机器学习框架的四重境界.pdf
文件大小:3.46 MB
总页数:10 页
更新时间:2026-03-31
总字数:约9.58千字
文档摘要
大规模机器学习框架的四重境界
自从google发表著名的GFS、MapReuceB:gTable三篇paper以后,互
联网正式迎来了大数据时代。大数据的显著特点是大,哪里都大的大。本篇主
要针对volume大的数据时,使用机圈箜丑来进行数据处理过程中遇到的架陶方
面的问题做一个系统的梳理。
有了GFS我们有能力积累海量的数据样本,比如在线广告的曝光和点击数
据,天然具有正负样本的特性,累积一两个月往往就能轻松获得百亿、千亿级
的训练样本。这样海量的样本如何存储?用什么样的模型可以学习海量样本中
有用的pal”rn?这些问题不止是工