一种面向低延迟的内存HDFS数据存储策略

英昌甜; 于炯; 廖彬; 鲁亮

Chinese

您当前的位置：

首页 >

文章列表页 >

一种面向低延迟的内存HDFS数据存储策略

更新时间：2026-09-04

- 一种面向低延迟的内存HDFS数据存储策略
- A Data Storage Strategy for Low-latency in Memory HDFS
- 微电子学与计算机 2014年31卷第11期页码：160-166
- 作者机构：
  
  新疆大学信息科学与工程学院,新疆,乌鲁木齐,830046
- 作者简介：
- 基金信息：
  
  新疆维吾尔自治区自然科学基金资助项目(2011211A011)国家自然科学基金资助项目(61262088,61063042)
- DOI：
  中图分类号：
- 纸质出版：2014
- 稿件说明：
移动端阅览
英昌甜, 于炯, 廖彬, 鲁亮. 一种面向低延迟的内存HDFS数据存储策略[J]. 微电子学与计算机, 2014, 31(11): 160-166.

YING Chang-tian, YU Jiong, LIAO Bin, et al. A Data Storage Strategy for Low-latency in Memory HDFS[J]. 2014, 31(11): 160-166.
英昌甜, 于炯, 廖彬, 鲁亮. 一种面向低延迟的内存HDFS数据存储策略[J]. 微电子学与计算机, 2014, 31(11): 160-166. DOI：

YING Chang-tian, YU Jiong, LIAO Bin, et al. A Data Storage Strategy for Low-latency in Memory HDFS[J]. 2014, 31(11): 160-166. DOI：

摘要

从底层存储介质的选择和上层分布式文件系统效率的角度出发

提出基于HDFS的内存分布式文件系统架构Mem-HDFS

同时利用集群DataNode的内存和磁盘存储数据

以提高基于HDFS应用的读取性能.并对其进行性能优化

提出一种适应的同分布数据存储策略以及并行读取访问算法.对比实验表明:提出的算法能够较好地降低读取访问延迟.

Abstract

In this paper

we present a storage system

Mem-HDFS

to enable low-latency read accesses.Mem-HDFS integrates the available memory resources in an HDFS clusters to form a cloud storage system.We also present an adaptive identically distributed storage strategy and concurrently read access algorithm.By serving data from memory instead of disks

Mem-HDFS can yield high I/O performance with low latency.

关键词

Keywords

references

浏览量

下载量

CSCD

文章被引用时，请邮件提醒。

提交

工具集

关联资源

一种高性能极化码Fast-SSC译码器设计

AlN/GaN混合缓冲层双异质结p-GaN HEMT直流特性仿真

基于改进RT-DETR的航拍小目标检测算法

一种用于极低压boost系统的高效率电荷泵

一种基于特征上下文理解与切片分析的肺结核检测算法