HI,欢迎来到学术之家,发表咨询:400-888-7501  订阅咨询:400-888-7502  股权代码  102064
0

基于h5py和mpi4py的HDF5数据并行处理的探索

作者:宋阳; 周时强; 李成范并行计算hdf5h5pympi4py

摘要:随着层次性数据格式的不断发展,HDF5已经成为一种研究数据存储的通用格式之一。然而受限于HDF5数据文件通常包含大量的数据集这一现状,普通串行处理的方式逐渐不能满足数据处理的要求。本文通过介绍HDF5数据和并行计算的基础,结合目前流行的数据处理语言Python以及广泛应用于并行计算和HDF5处理的两个软件包——mpi4py和h5py,探索了一种新的对HDF5数据并行计算的方式,该方式具有计算简单、效率高的特点。

注:因版权方要求,不能公开全文,如需全文,请咨询杂志社

计算机产品与流通

《计算机产品与流通》(CN:12-1276/TP)是一本有较高学术价值的大型月刊,自创刊以来,选题新奇而不失报道广度,服务大众而不失理论高度。颇受业界和广大读者的关注和好评。 《计算机产品与流通》使命:为中国渠道企业提供全方位的、有效的信息产品和服务,doyourbusinesseasy。协助中国供应商最大化自身的渠道伙伴投资。

杂志详情