谷歌发布SensorFM:基于万亿分钟传感器数据训练的可穿戴健康基础模型
Decision Brief
变化SensorFM是谷歌研究团队与DeepMind及大学合作开发的可穿戴健康基础模型,在1万亿分钟未标注传感器数据上预训练。
为什么重要该模型在30,516个预测头搜索中仅用冻结嵌入加线性探针就超越特征工程基线35项中的34项,面向开发健康Agent的团队将显著降低传感器特征工程成本。
谁该关注所有 AI builder
受影响技术栈Gemini
来源可信度中 · 可靠媒体或一手报导
SensorFM采用ViT-1D掩码自编码器架构,在来自500万同意参与者的超过1万亿分钟未标注传感器信号上预训练。团队测试了四种模型规模和四种数据量的协同扩展效果,发现当模型容量超过数据量时有特殊表现。在35项健康任务中,冻结嵌入加PCA-50线性探针在34项上击败了手工特征工程基线。此外,研究团队还设计了一个智能体教室,自动搜索30,516个预测头,并通过临床医生评估验证了个人健康Agent的实用性。 对于开发可穿戴健康应用的团队,SensorFM提供了直接可用的基础模型,减少了对复杂特征工程的依赖。其线性探针即可达到SOTA,使资源有限的团队也能快速构建高精度健康监测系统。同时,模型在未标注数据上的预训练能力意味着开发者可以更轻松地适配不同传感器类型和人群数据。
摘要依据:官方/RSS 来源详摘依据上方标注的来源范围整理,内容以原文为准。
来源
- MarkTechPost
Fast research-paper and ML tooling summaries, useful for infra and agent updates.
- MarkTechPost
留言
登入后即可留言,和其他 builder 交换实测心得。
还没有留言,抢头香。