简介
Petastorm是由UberATG(AdvancedTechnologiesGroup)开发的开源数据访问库。这个库可以直接基于数TBParquet格式的数据集进行单机或分布式训练和深度学习模型评估。Petastorm支持基于Python的机器学习框架,如Tensorfl... 更多
其它信息
地区
不详
开发语言
Python
开源组织
Uber
所属分类
神经网络/人工智能、 机器学习/深度学习
授权协议
Apache-2.0
操作系统
Linux
收录时间
2023-09-26
软件类型
开源软件
适用人群
未知
时光轴
里程碑1
LOG0
2023
2023-09
轻识收录
评价
0.0(满分 10 分)0 个评分
什么是点评分
全部评价(
0)
推荐率
100%
推荐
PatrickStar分布式深度学习训练工具
PatrickStar是一款腾讯开发的分布式深度学习训练工具,它的设计目标是支持以GPT、Bert为代表的超大预训练模型训练。用法PatrickStar基于PyTorch,这使得迁移pytorch项目
PatrickStar分布式深度学习训练工具
0
Deeplearning4j分布式深度学习库
Deeplearning4j(简称DL4J)是为Java和Scala编写的首个商业级开源分布式深度学习库。DL4J与Hadoop和Spark集成,为商业环境(而非研究工具目的)所设计。Skymind是
Deeplearning4j分布式深度学习库
0
BytePS高性能分布式深度学习训练框架
BytePS是字节跳动开源的高性能分布式深度学习训练框架,官方宣称BytePS在性能上颠覆了过去几年allreduce流派一直占据上风的局面,超出目前其他所有分布式训练框架一倍以上的性能,且同时能够支
BytePS高性能分布式深度学习训练框架
0
CaffeOnSpark分布式深度学习
该项目已归档许多现有的DL框架需要一个分离的集群进行深度学习,而一个典型的机器学习管道需要创建一个复杂的程序(如图1)。分离的集群需要大型的数据集在它们之间进行传输,从而系统的复杂性和端到端学习的延迟
CaffeOnSpark分布式深度学习
0