乾象投资:基于JuiceFS 构建云上量化投研平台( 四 )


目前 ,JuiceFS 被用在了以下生产场景:

  • 计算任务数据文件系统,被应用于热数据输入;
  • 日志/ artifact 输出;
  • Pipeline 数据中转:数据特征生成之后,需要中转到模型训练中,训练过程中也会有数据中转的需求,Fluid 和 JuiceFS 作为中间的缓存集群来使用 。
未来,我们将继续探索云原生、AI技术,用以进行更高效、安全的工具链研发和基础技术平台建设 。
如有帮助的话欢迎关注我们项目 Juicedata/JuiceFS 哟! (0?0?)

经验总结扩展阅读