Klever机器学习平台
Klever 是一个支持 OCI(Open Container Initiative)标准存储训练模型、支持在线模型服务部署的云原生机器学习平台。由字节跳动基础架构团队研发。基于字节跳动在机器学习和云原生开源社区的技术积累,Klever 提供通用的开源技术标准,方便企业无缝迁移线上应用。
目前机器学习平台 Klever 率先实现的是从模型仓库到模型服务的自动化管理。
Klever 有三大特性。
首先,通过与 Harbor 结合,它可以满足 OCI 标准的模型仓库管理,用户可以像使用 Docker 管理镜像一样管理机器学习模型。
其次,整个系统可通过容器化的方式部署在 Kubernetes 容器管理平台之上,用户无需管理模型解析、模型转换、模型服务实际运行在哪台物理机之上,系统会自动调度和运行资源充足的机器,并在模型服务负载较高时自动弹性伸缩。
最后,由于机器学习在不同训练过程中往往使用不同的数据集,会产生不同的模型,Klever 支持多种模型服务运行时,可将产生的模型用于提供生产环境可用的在线服务。
评论