中国科学院云南天文台机构知识库
Advanced  
YNAO OpenIR  > 其他  > 期刊论文
题名:
基于Cassandra的海量MUSER数据分布式存储与检索研究
其他题名: The Study of the Data Storage and Retrieval for the Massive Data of MUSER based on Cassandra
作者: 石玥1; 王锋1,2; 李鹏程1; 刘应波1
刊名: 天文研究与技术(Astronomical Research & Technology)
出版日期: 2018-04
DOI: 10.14005/j.cnki.issn1672-7673.20180426.007
分类号: TN216
学科分类: 天文学::射电天文学
产权排序: 第2完成单位
收录类别: CSCD
关键词: 非关系型数据库 ; 存储 ; 检索
中文摘要: 明安图射电频谱日像仪每天产生海量观测数据,传统的关系型数据库存储和管理这些数据时,面临着读写延迟高、性能和容量扩展能力有限以及可用性弱等诸多问题。针对这些问题,开展了基于No SQL的海量数据存储与检索应用研究。首先,详细分析了明安图射电频谱日像仪数据特点、存储需要以及面临的问题;然后,对明安图射电频谱日像仪进行数据建模,给出了明安图射电频谱日像仪的列式非关系型数据模型,同时提出了元数据和数据在No SQL中的同步存储方法,解决了二者的一致性问题,在此基础上实现了基于Cassandra的海量天文数据存储管理系统(MBDMS),最后通过实验验证了系统存储与检索的高效性、扩展性以及可行性,从结果来看,MBDMS可以很好的满足数据管理需要,是解决当前数据存储问题的一种有效方案。
英文摘要: Mingantu Ultrawide Spectral Radioheliograph produces massive observational data every day. In order to solve the problem of high latency of reading and writing, limited
performance of capacity expansion and weak usability when the data is stored and managed by traditional relational database, The paper has carried out research on the application of MUSER data storage based on NoSQL. First of all, deeply analyze the characteristics of MUSER data, the requirement of storage and problems being solved in detail. Secondly, the MUSER data model is given as well as the MUSER column non-relational data model. The metadata and data are synchronized in NoSQL based on Cassandra. The MUSER massive astronomical data storage management system (MBDMS) is realized based on Cassandra. The experiment validates the efficiency, expansibility and feasibility of data storage and retrieval of the system. As aresult, 
MBDMS can well meet MUSER data management needs, is an effective program to solve the current MUSER data storage problem.
项目资助者: 国家自然科学基金(61462053, 11703010) ; 中国博士后科学基金(2016M602730)
语种: 中文
ISSN号: 1672-7673
Citation statistics:
内容类型: 期刊论文
URI标识: http://ir.ynao.ac.cn/handle/114a53/12154
Appears in Collections:其他_期刊论文

Files in This Item:
File Name/ File Size Content Type Version Access License
基于Cassandra的海量MUSER数据分布式存储与检索研究_石玥.pdf(560KB)期刊论文网络优先出版稿限制开放View 联系获取全文

作者单位: 1.昆明理工大学云南省计算机技术应用重点实验室,云南,昆明,650504
2.中国科学院云南天文台,云南,昆明,650216

Recommended Citation:
石玥,王锋,李鹏程,等. 基于Cassandra的海量MUSER数据分布式存储与检索研究[J]. 天文研究与技术(Astronomical Research & Technology),2018.
Service
打印该条目
Recommend this item
Sava as my favorate item
Show this item's statistics
Export Endnote File
Google Scholar
Similar articles in Google Scholar
[石玥]'s Articles
[王锋]'s Articles
[李鹏程]'s Articles
CSDL cross search
Similar articles in CSDL Cross Search
[石玥]‘s Articles
[王锋]‘s Articles
[李鹏程]‘s Articles
Related Copyright Policies
Null
Social Bookmarking
Add to CiteULike Add to Connotea Add to Del.icio.us Add to Digg Add to Reddit
文件名: 基于Cassandra的海量MUSER数据分布式存储与检索研究_石玥.pdf
格式: Adobe PDF
所有评论 (0)
暂无评论
 
评注功能仅针对注册用户开放,请您登录
您对该条目有什么异议,请填写以下表单,管理员会尽快联系您。
内 容:
Email:  *
单位:
验证码:   刷新
您在IR的使用过程中有什么好的想法或者建议可以反馈给我们。
标 题:
 *
内 容:
Email:  *
验证码:   刷新

Items in IR are protected by copyright, with all rights reserved, unless otherwise indicated.

 

 

Valid XHTML 1.0!
Copyright © 2007-2018  中国科学院云南天文台 - Feedback
Powered by CSpace