Hugging Face 收购由前苹果研究人员创立的 XetHub
24-08-13
XetHub 是一个由前苹果研究人员创立的协作开发平台,旨在帮助机器学习团队更高效地处理大型数据集和模型。尽管交易的具体金额尚未披露,但 Hugging Face CEO Clem Delangue 表示这是他们迄今为止最大的一笔收购。
Hugging Face 计划将 XetHub 的技术整合到其平台中,并升级其存储后端,使开发者能够以最小的努力托管比目前可能的更多的大型模型和数据集。
XetHub 成立于 2021 年,由 Yucheng Low、Ajit Banerjee 和 Rajat Arya 创立,他们曾在苹果的内部机器学习基础设施上工作。XetHub 通过为企业提供探索、理解和使用大型模型和数据集的平台而声名鹊起。该平台提供了类似 Git 的版本控制,适用于达到 TB 级别的存储库,允许团队跟踪变化、协作并保持机器学习工作流程的可重复性。
在过去的三年中,XetHub 凭借其处理不断增长的工具、文件和工件所带来的复杂可扩展性需求的能力,吸引了包括 Tableau 和 Gather AI 等主要客户。它使用内容定义的分块、去重、即时存储库挂载和文件流等先进技术改进了存储和传输过程。
目前,Hugging Face Hub 托管了 130 万个模型、45 万个数据集和 68 万个空间,总计达到 12PB 的 LFS。随着增强的存储后端的推出,支持更大的模型和数据集,这个数字将如何增长,这将是一件有趣的事情。目前,整合和推出其他支持特性的时间表尚不清楚。