英伟达推出了 cuPhoton,这是一个由 GPU 加速的软件平台,旨在处理并准备海量多维科学数据集,用于人工智能训练和分析。cuPhoton 于 2026 年 11 月 20 日公布,通过以 GPU 优化模块取代受 CPU 限制的流程,解决数据摄取、参数拟合、图像相减和 AI 分类工作流程中的处理瓶颈,使来自普林斯顿大学、哈佛大学以及世界各地天文台的研究人员能够显著加快将原始实验数据转化为可操作的科学洞见。
该平台通过专用 CUDA-X 构建模块,为科学成像和分析流水线提供端到端加速,支持天文数据处理、X 射线和纳米级成像工作流程,以及面向 GPU 的机器学习模型数据准备。cuPhoton 将整个数据工作流程迁移至英伟达 GPU,从而消除在专用工具和异构计算阶段之间耗时的切换,使科学家能够在关键研究工作中充分利用宝贵的束流时间和巡天观测时段。
英伟达 cuPhoton 性能指标和技术规格
该平台在由 64 块英伟达 GB200 NVL72 GPU 组成的分布式系统上扩展时,可在多个处理阶段实现显著加速。xDataReader 模块通过集成 NVIDIA GPUDirect Storage,以高达每秒 447 GB 的速度摄取 FITS、HDF5 和 VDIF 数据格式;相比之下,单个 x86 CPU 通常只能达到 0.03 GB/s,从而实现直接在 GPU 内存中进行输入/输出,速度最高提升 14,900 倍。xCorr 模块将互相关运行时间从 x86 上的 31,993 秒缩短至 69 秒(快 460 倍);xFit 模块将偶极子拟合从 x86 上的 4,520 秒加速至 1.52 秒(快 2,960 倍)。xPois 模块将图像映射和相减从 x86 上的 18,333 秒加速至 1.26 秒(快 14,550 倍)。这些性能指标是在规模达数百太字节的数据集上测得的。
科学应用与研究合作
普林斯顿大学和哈佛大学正与英伟达合作部署 cuPhoton,以处理和分析从天文台及暗能量巡天项目收集的海量数据。该平台简化了鲁宾天文台时空遗产巡天(LSST)相机的 PB 级数据处理、图像相减和瞬变探测工作流程,使天文学家能够通过 GPU 驱动的数据摄取、点扩散函数图像相减和 AI 驱动的瞬变分类,实时探测动态事件。除天文学外,cuPhoton 还支持 X 射线和同步辐射数据重建及轨迹分析,以充分利用研究机构有限的设施束流时间。
工作流程架构与开发者集成
cuPhoton 将标准 FITS 和 HDF5 数据格式直接集成至 CUDA Python、CuPy 和 PyTorch 环境,无需开发自定义流水线,并支持无需转换数据格式即可快速训练 AI 模型。其模块化架构支持在多 GPU 和多节点分布式系统上构建可复现、可验证的 Python 工作流程,并针对大型科学仪器采用 GPU 优化的输入/输出。研究人员可以使用面向特定领域、融入物理学知识的 API,进行天文图像相减、瞬变分类和 X 射线轨迹分析,而无需从头重建自定义处理流水线。
关键事实
- cuPhoton 在 64 块英伟达 GB200 NVL72 GPU 上以最高 447 GB/s 的速度摄取 FITS、HDF5 和 VDIF 数据格式;x86 CPU 上的速度为 0.03 GB/s
- 互相关运行时间从 31,993 秒缩短至 69 秒(加速 460 倍)
- 偶极子拟合从 4,520 秒加速至 1.52 秒(快 2,960 倍)
- 图像映射和相减从 18,333 秒加速至 1.26 秒(快 14,550 倍)
- 科学流水线端到端性能最高可实现输入/输出加速 14,900 倍、互相关加速 460 倍、多参数拟合加速 2,960 倍,以及最优图像相减加速 14,550 倍
- 性能指标是在规模达数百太字节的数据集上测得的
- 普林斯顿大学和哈佛大学正与英伟达合作,将该平台部署于天文台和暗能量巡天数据处理
- 该平台支持鲁宾天文台时空遗产巡天(LSST)相机的 PB 级数据处理
- 可直接集成 CUDA Python、CuPy 和 PyTorch,用于 AI 模型训练
- 源代码见 https://github.com/NVIDIA/cuPhoton
常见问题
英伟达 cuPhoton 支持哪些数据格式?
英伟达 cuPhoton 原生摄取 FITS、HDF5 和 VDIF 数据格式,并将其直接集成至 CUDA Python、CuPy 和 PyTorch 环境。该平台通过集成 NVIDIA GPUDirect Storage,在 64 块英伟达 GB200 NVL72 GPU 上实现每秒 447 GB 的摄取速度,而单个 x86 CPU 的速度为 0.03 GB/s。这消除了数据格式转换瓶颈,并能快速准备多维科学数据集,用于 AI 模型训练和分析工作流程。
与基于 CPU 的科学数据处理相比,cuPhoton 的速度快多少?
与 x86 CPU 实现相比,英伟达 cuPhoton 在不同处理阶段可实现 460 倍至 14,900 倍的加速。互相关运行时间从 31,993 秒缩短至 69 秒(快 460 倍),偶极子拟合从 4,520 秒加速至 1.52 秒(快 2,960 倍),图像相减从 18,333 秒加速至 1.26 秒(快 14,550 倍)。数据摄取速度最高提升 14,900 倍:该平台在 GPU 集群上的读取速度为 447 GB/s,而单个 x86 CPU 上为 0.03 GB/s。
哪些研究机构正在使用英伟达 cuPhoton?
普林斯顿大学和哈佛大学正与英伟达合作部署 cuPhoton,以处理和分析从天文台及暗能量巡天项目收集的海量数据。该平台正集成至鲁宾天文台时空遗产巡天(LSST)相机的工作流程中,为多个机构的天文学研究应用提供 PB 级数据处理、图像相减和瞬变探测能力。