IBM助力SKA天文项目大数据存储技术开发

2011年12月5日星期一 The Register消息:IBM为天文工程中SKA这类的项目的大数据架构做了规范。SKA这样的项目的一个问题是随着不同地区的数据中心建设之后,需要存储的数据量的增加是非常巨大的。

随着SKA中数据量达到EB级,需要有新的存储技术帮助天文学家解决大数据问题。维多利亚大学的Melanie Johnston-Hollitt博士、新西兰射电天文学家和IBM创建了一套信息集中框架原型标准(Information Intensive Framework prototype)。

Johnston-Hollitt博士在IBm的一份声明中说EB级数据集将推进天文学进入一个新的技术高度,但是这种新的技术在自动化处理、成像和分析等方面还没有成熟。

如果A/NZ团队赢得SKA合同,监测数据将在监测设备一端进行预处理然后传到Pawsey超级数据中心进行储存和分析。