一种读写分离的分布式元数据管理方法——以“数字城市”应用为例

刘小俊; 徐正全; 潘少明

美国《工程索引》（EI）核心期刊
美国《剑桥科学文摘》（CSA）收录期刊
荷兰斯高帕斯数据库（Scopus）收录期刊
英国INSPEC数据库（SA）收录期刊

留言板

尊敬的读者、作者、审稿人, 关于本刊的投稿、审稿、编辑和出版的任何问题, 您可以本页添加留言。我们将尽快给您答复。谢谢您的支持!

姓名
邮箱
手机号码
标题
留言内容
验证码

一种读写分离的分布式元数据管理方法——以“数字城市”应用为例

刘小俊, 徐正全, 潘少明

文章导航 > 武汉大学学报 ● 信息科学版 > 2013 > 38(10): 1248-1252

刘小俊, 徐正全, 潘少明. 一种读写分离的分布式元数据管理方法——以“数字城市”应用为例[J]. 武汉大学学报 ● 信息科学版, 2013, 38(10): 1248-1252.

引用本文:

刘小俊, 徐正全, 潘少明. 一种读写分离的分布式元数据管理方法——以“数字城市”应用为例[J]. 武汉大学学报 ● 信息科学版, 2013, 38(10): 1248-1252.

LIU Xiaojun, XU Zhengquan, PAN Shaoming. A Distributed Metadata Management Method Based onSeparation of Read and Write --- Taking 'Digital City 'Applications as an Example[J]. Geomatics and Information Science of Wuhan University, 2013, 38(10): 1248-1252.

Citation:

LIU Xiaojun, XU Zhengquan, PAN Shaoming. A Distributed Metadata Management Method Based onSeparation of Read and Write --- Taking "Digital City "Applications as an Example[J]. Geomatics and Information Science of Wuhan University, 2013, 38(10): 1248-1252.

一种读写分离的分布式元数据管理方法——以“数字城市”应用为例

¹武汉大学测绘遥感信息工程国家重点实验室;²黄冈师范学院

基金项目: 国家973计划资助项目(2011CB302306)；湖北省教育厅科学研究基金资助项目(B20122704)；国家自然科学基金资助项目(41271398)

详细信息

作者简介:
刘小俊，博士生，讲师，主要从事多媒体信息传输、处理和存储等方面的研究工作。

中图分类号: P208

A Distributed Metadata Management Method Based onSeparation of Read and Write --- Taking "Digital City "Applications as an Example

¹State Key Laboratory of Information Engineering in Surveying, Mapping and Remote Sensing, Wuhan University, 129Luoyu Road, Wuhan 430079, China;²Huanggang Normal University, 146Xinganger Road, Huanggang 438000, China

Funds: 国家973计划资助项目(2011CB302306)；湖北省教育厅科学研究基金资助项目(B20122704)；国家自然科学基金资助项目(41271398)

摘要: 针对动态"数字城市"的海量存储需求,在分析其存储负载特征的基础上,提出了一种读写分离的分布式元数据管理方法。该方法将目录子树分区和Hash两类算法融合在一起,一方面充分开发了目录的存储局部性,另一方面保障了系统的负载均衡。同时,在分离的两类元数据服务器之间采取基于服务需求的发布控制算法以保证系统写性能。实验表明,该方法在提高系统性能、均衡元数据分布等方面具有明显的优势。
- 元数据管理 /
- 目录子树 /
- Hash /
- 数字城市
Abstract: Aimed to the requirement of dynamic mass storage of "digital city", and based on analysis of the load characteristics of its storage, a separation of read and write distributed metadata management method is proposed. This method integrates the directory sub-tree partitioning with Hash algorithm together. On the one hand, the full development of the di-rectory storage locality. On the other hand the efficient protection of the system load balan-cing. At the same time, in order to ensure writ performance of system, release control algo-rithm based on service demand is taken between the separation of the two types of metadata server. The experimental results of prototype system show that the proposed method has ob-vious advantages in improving the system performance, equalizing metadata distribution.
- metadata management /
- directory sub-tree /
- H ash /
- digital city

[1]	李德仁,黄俊华,邵振峰. 面向服务的数字城市共享平台框架的设计与实现[J]. 武汉大学学报(信息科学版). 2008(09)[2] 李德仁. 论21世纪遥感与GIS的发展[J]. 武汉大学学报(信息科学版). 2003(02)

[1]	李军, 刘举庆, 赵学胜, 黄骞, 孙文彬, 许志华, 王昊. 地理格网模型支持下的轨迹数据管理与分析框架：方法与应用 . 武汉大学学报 ● 信息科学版, 2021, 46(5): 640-649. doi: 10.13203/j.whugis20200459
[2]	陈勉, 李龙海, 谢鹏, 付少锋, 何列松, 周校东. 基于Phoenix的地理空间大数据管理系统 . 武汉大学学报 ● 信息科学版, 2020, 45(5): 719-727. doi: 10.13203/j.whugis20180435
[3]	. 目录 . 武汉大学学报 ● 信息科学版, 2018, 43(10): -.
[4]	. 目录 . 武汉大学学报 ● 信息科学版, 2018, 43(9): -.
[5]	. 目录 . 武汉大学学报 ● 信息科学版, 2018, 43(6): -.
[6]	. 目录 . 武汉大学学报 ● 信息科学版, 2018, 43(4): -.
[7]	. 目录 . 武汉大学学报 ● 信息科学版, 2018, 43(2): -.
[8]	. 目录 . 武汉大学学报 ● 信息科学版, 2017, 42(12): -.
[9]	闫利, 胡晓斌, 谢洪. 车载LiDAR海量点云数据管理与可视化研究 . 武汉大学学报 ● 信息科学版, 2017, 42(8): 1131-1136. doi: 10.13203/j.whugis20150386
[10]	刘全海, 邓非, 李楼, 冉慧敏. 面向规划的建筑物屋顶精细纹理快速生成方法 . 武汉大学学报 ● 信息科学版, 2015, 40(8): 1054-1060. doi: 10.13203/j.whugis20140771
[11]	李德仁, 姚远, 邵振峰. 智慧城市中的大数据 . 武汉大学学报 ● 信息科学版, 2014, 39(6): 631-640. doi: 10.13203/j.whugis20140135
[12]	刘小俊, 徐正全, 潘少明. 一种结合RDBMS和Hadoop的海量小文件存储方法 . 武汉大学学报 ● 信息科学版, 2013, 38(1): 113-115,120.
[13]	李德仁, 钱新林. 浅论自发地理信息的数据管理 . 武汉大学学报 ● 信息科学版, 2010, 35(4): 379-383.
[14]	康志忠, 张祖勋, 张剑清. 城市街道景观三维可视化的快速实现 . 武汉大学学报 ● 信息科学版, 2010, 35(2): 205-208.
[15]	李德仁, 黄俊华, 邵振峰. 面向服务的数字城市共享平台框架的设计与实现 . 武汉大学学报 ● 信息科学版, 2008, 33(9): 881-885.
[16]	金培权, 岳丽华, 龚育昌. 基于Informix数据刀片的时空数据管理 . 武汉大学学报 ● 信息科学版, 2005, 30(7): 646-649.
[17]	边馥苓, 王金鑫. 论数字城市工程及其技术体系 . 武汉大学学报 ● 信息科学版, 2004, 29(12): 1045-1049.
[18]	高文秀, 刘浪, 龚健雅. 改造现有LIS支持时空数据管理和土地变更的实现 . 武汉大学学报 ● 信息科学版, 2002, 27(6): 622-626.
[19]	张立, 龚健雅. 地理空间元数据管理的研究与实现 . 武汉大学学报 ● 信息科学版, 2000, 25(2): 127-131.
[20]	张永军, 程鑫, 李彦胜, 王飞, 刘晓健, 吴文品. 基于知识图谱的中国国土资源数据管理与检索 . 武汉大学学报 ● 信息科学版, 0, 0(0): 0-0. doi: 10.13203/j.whugis20210714

点击查看大图

计量

文章访问数: 622
HTML全文浏览量: 33
PDF下载量: 584
被引次数: 0

一种读写分离的分布式元数据管理方法——以“数字城市”应用为例

¹武汉大学测绘遥感信息工程国家重点实验室;²黄冈师范学院

基金项目: 国家973计划资助项目(2011CB302306)；湖北省教育厅科学研究基金资助项目(B20122704)；国家自然科学基金资助项目(41271398)

作者简介:
刘小俊，博士生，讲师，主要从事多媒体信息传输、处理和存储等方面的研究工作。

收稿日期: 2013-06-04
修回日期: 2013-10-05
刊出日期: 2013-10-05

中图分类号: P208

关键词:

元数据管理 /

目录子树 /

Hash /

数字城市

摘要: 针对动态"数字城市"的海量存储需求,在分析其存储负载特征的基础上,提出了一种读写分离的分布式元数据管理方法。该方法将目录子树分区和Hash两类算法融合在一起,一方面充分开发了目录的存储局部性,另一方面保障了系统的负载均衡。同时,在分离的两类元数据服务器之间采取基于服务需求的发布控制算法以保证系统写性能。实验表明,该方法在提高系统性能、均衡元数据分布等方面具有明显的优势。