HPAT基于编译器的大数据框架

联合创作 · 2023-09-19 02:05

HPAT 是一个基于编译器的大数据框架,使用 Python 编写。

高性能分析工具包(HPAT)是一个基于编译器的框架,用于群集/云环境中的大数据分析和机器学习,既易于使用又非常快速;它比 Apache Spark 等替代品要快。

HPAT 自动或半自动并行化执行使用 Numpy 和 pandas 编写的分析任务,并使用 Numba 和 LLVM 生成高效的MPI 代码。 这些学术论文描述了 HPAT 的基本方法:

HPAT的文档可以在这里找到。

浏览 6
点赞
评论
收藏
分享

手机扫一扫分享

编辑 分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

编辑 分享
举报