动态

HF成为存储机器人和视频AI数据的优选平台,支持高速流式传输

HF成为存储机器人和视频AI数据的优选平台,支持高速流式传输
AK
HF正在悄然成为存储数据的最佳场所,无论是公开还是私有数据,尤其适用于机器人和视频AI等严苛领域,这些领域的文件巨大、只追加、永不停歇。

举个例子?公开机器人数据集从2025年初的1000个激增到现在的60000个,而私有数据集数量是公开的两倍。

为什么?单个机器人以140 MB/s的速度全天候记录数据。这些数据必须被存储、流式传输到GPU,并反复送回硬件。处理不当,你的GPU会以0 MB/s的速度闲置等待数据集到达。处理得当(直接从Hub流式传输,利用预热缓存),同样的GPU将以约1326 MB/s的速度全速运行,数据供给充足。🚀

以下是LeRobot和Hugging Face Storage Buckets如何实现这一点的:https://t.co/SOUPAUpiZc
动态AK2026-06-23原文

相关内容