MLReef开源 ML-Ops 平台

MLReef 是一个 ML/DL 开发平台，包含四个主要部分：

• 数据管理 —— 完全版本化的数据准备和处理基础设施；
• 发布代码库 —— 容器化和版本化的脚本存储库，用于数据管道中的不可变用途
• 实验管理器 —— 实验跟踪、环境和结果
• ML-Ops —— ML/DL 作业的管道和编排解决方案

MLReef 架构

ML 生命周期中的 MLReef ML 组件：

• 当前基于 Git 和 Git LFS 的数据存储组件。
• 基于工作模块（由社区或您的团队发布）、数据管理、数据处理/数据可视化/托管或本地实验管道以及模型管理的模型开发。
• ML-Ops 编排、实验和工作流可重复性以及可扩展性。

MLReef 是我们与机器学习/深度学习领域中无数其他研究人员和开发人员共同解决的一个问题的解决方案：训练生产级深度学习模型是一个复杂的过程。MLReef 通过关联代码版本控制、研究项目、性能指标和模型来源来跟踪和控制过程。

我们根据最佳数据科学实践设计了 MLReef，并结合了从 DevOps 中获得的知识以及对协作的高度关注。

• 每天使用它来促进团队中的协作和可见性
• 只需单击一下按钮，即可从任何代码存储库在云中创建作业
• 自动化流程并创建管道以收集您的实验日志、输出和数据
• 通过在 MLReef 平台上对所有内容进行编目，使您的 ML 生命周期变得透明