论文范文网-权威专业免费论文范文资源下载门户!
当前位置:毕业论文格式范文>论文范文>范文阅读
快捷分类: 毕业论文数据怎么找 统计学数据分析论文 大数据杂志 论文数据 有关大数据的论文 数据挖掘论文 云存储的数据参考文献 云存储的数据按需备份技术参考文献 如何利用数据写论文 数据挖掘技术开题报告 什么是大数据论文 实证论文的数据分析

关于数据存储论文范文 云计算环境下数据存储调度算法相关论文写作参考文献

分类:论文范文 原创主题:数据存储论文 更新时间:2024-04-17

云计算环境下数据存储调度算法是关于数据存储方面的的相关大学硕士和相关本科毕业论文以及相关数据存储论文开题报告范文和职称论文写作参考文献资料下载。

要 】 云计算技术的快速发展积累了海量的数据资源,数据资源存储调度算法的好坏直接影响人们使用信息资源的效率.为了提高人们搜索数据资源的效率,提高云计算环境下数据存储调度的有效性,需要采用多层次智能分级思想设计一个数据存储系统,该系统可以将访问频次较高的热点数据放置在优先级存储层次,数据存储采用动态迁移算法,可以实时更新数据优先级,提高数据搜索效率.

【 关键词 】 云计算;存储调度;数据放置;动态迁移

Research on Data Storage Scheduling Algorithm in Cloud Computing Environment

Zhen Cheng-gang Li Bao-cai

(North China Electric Power University HebeiBaoding 071000)

【 Abstract 】 The rapid development of cloud computing technology has accumulated a huge amount of data resources, data resource storage scheduling algorithm directly affects the efficiency of people"s use of information resources. In order to improve the efficiency of data resource and improve the efficiency of data storage scheduling in cloud computing environment, a data storage system is designed. The system can be used to store the high frequency of the data.

【 Keywords 】 cloud computing;storage scheduling;data placement;dynamic migration

1 引言

目前,光纤网络、移动无线网络发展迅速,利用基础网络资源实现了云计算,其可以将分布于世界各地计算机终端、服务器连接在一起,利用分布式计算、透明计算、移动计算等技术,提高人们工作、生活和学习的信息化水平.云计算技术长期的使用,已经积累了海量的数据资源,因此降低了人们搜索的有效性,也降低了数据搜索的实时性,为了提高数据存储调度效率,可以基于智能分级存储策略设计一个新的数据存储调度算法.

2 云计算环境下数据存储调度算法设计

云计算环境中,为了能够提高数据存储调度的效率,为用户提供更加的数据搜索利用体验,数据存储调度算法包含的关键功能包括六个方面,分别是元数据管理、文件估值、迁移控制、访问重定向、文件系统监视、数据迁移.

(1)元数据管理.云计算环境中,为了保证数据的原子性、完整性,可以使用云数据进行描述,实现数据的迁移和访问重定向.

(2)数据对象估值.数据对象估值可以根据数据资源访问频次、数据容量、读写模式、创建时间等属性对数据对象进行估值,以便能够反馈数据文件的访问量和活跃程度,进行数据迁移.

(3)数据迁移控制.云计算环境下,用户访问数据对象时,可以根据数据对象估值实时的、动态的改变数据对象存储位置,以便能够将热点数据赋予较高的存储优先级位置,便于用户访问,提高资源命中率.

(4)数据访问重定向.云计算时代,网络数据能够为用户提供透明的、分布式的服务,因此无论用户在哪个地方,只需要记住数据访问的逻辑地址,无需关系存储器的物理地址,如果数据物理地址发生改变,比如迁移到其它地方,使用数据访问重定向功能即可寻找到数据.

(5)文件系统监视.文件系统监视可以实时的统计存储系统运行状态,计算系统延时、存储空间利用率、读写比例、文件访问命中率等,并且将这些辅助信息提供给迁移控制模块.

(6)数据迁移.数据迁移可以放置在相关的迁移计划列表中,记录迁移数据的大小、存储位置、创建时间、访问频次,同时采用相关的算法将数据迁移到合适的目标位置,数据迁移的主要目的是实现数据存储优化.

数据存储调度算法可以根据用户访问数据频次,将数据资源放置在不同的设备,实现数据的自动化迁移,以便提高数据的命中率,算法执行流程如图1所示.

3 云计算环境下数据存储调度算法关键技术

数据存储调度算法在实验过程中,其关键技术包括三种,分别是数据分类技术、数据放置技术和数据迁移技术.

(1)数据分类技术.云计算的快速发展积累了海量的数据资源,这些数据资源根据不同的分类标准,可以划分为文档数据、视频数据和图像数据等.随着数据分类标准的不同,不同定义和标准下数据的分类是不同的,数据分类是数据迁移的最基本条件.目前,随着数据划分技术的快速改进,已经诞生了贝叶斯理论、聚类、神经网络、K均值、支持向量机等,可以将数据根据人们的需求动态的进行分类,更好的保存在不同类型的数据库中,以便人们访问.

(2)数据放置技术.网络存储系统中,数据放置可以采用相关的原则,针对系统中新添加的数据、被迁移的数据放置在某一个特定的位置上,数据放置可以采用更加科学的方法,直接影响数据读取、写入等访问操作效率,影响用户使用感知.网络数据放置存在两个关键技术:一是确定数据放置在何种类型的存储介质上;二是数据放置的形式,随机放置、顺序放置或文件分割放置等.

(3)数据迁移技术.云计算环境下,由于用户访问数据是一直动态变化的,因此数据访问频次均是在动态改变的,为了能够提高数据访问效率和命中率,需要根据网络存储的数据和相关的指标进行数据迁移.数据迁移常用的技术包括同级数据迁移和异级数据迁移两种模式.同级迁移模式能够根据相关的存储系统硬件容量的大小,将集中出现在相关的存储系统中数据进行迁移,目的是均衡各个存储设备的负载.异级迁移模式则是在存储系统中经常发送的时间,可以更好地优化数据存储内容,实现自动化的迁移,异级迁移过程能够提高低性能存储设备向高性能存储设备的数据迁移,同时也可以向相反的方向迁移.

4 结束语

云计算环境下,数据存储调度算法可以实现数据动态的、分布式的、透明的访问、读写数据资源,提高数据资源访问速度,同时能够保护数据的安全性,确保云计算时代网络存储系统能够满足人们的需求.

参考文献

[1] 于珊珊,陈冬林,李伟等.基于SLA的云计算多数据中心任务调度算法[J].武汉理工大学学报:信息与管理工程版,2014,3:345-349.

[2] 肖艳文,王金宝,李亚平等.云计算系统中能量有效的数据摆放算法和节点调度策略[J].计算机研究与发展,2013,S1:80-82.

[3] 王强,李雄飞,王婧.云计算中的数据放置与任务调度算法[J].计算机研究与发展,2014,51(11):2416-2426.

作者简介:

甄成刚(1964-),男,河北石家庄人,华北电力大学,博士学位,教授,硕士生导师;主要研究方向和关注领域:计算机软件技术、计算机仿真.

李宝才(1983-),男,河北保定人,长春工程学院,本科学士,华北电力大学,研究生在读;主要研究方向和关注领域:云计算和计算机仿真.

总结:此文是一篇数据存储论文范文,为你的毕业论文写作提供有价值的参考。

参考文献:

1、 云计算环境下的大规模图数据处理技术 摘 要 本文简要分析了云计算的概念,论述云计算图数据储存的方法、分割的原理,建立相关的计算模型。关键词 云计算;大规模图数据;处理技术中图分。

2、 基于云计算的安全数据存储分析 【 摘 要 】 针对当前科学技术的不断进步,云计算在各个领域得到了广泛的应用。而在云计算技术应用的过程中,是否保证其存储数据的安全性成为各个企业。

3、 云计算环境大数据安全和隐私保护策略 摘 要:现代科技的发展催生了云计算技术,其借助于互联网和计算机实现了大数据的整合与利用,极大地方便了人们的日常工作和生活。在云计算大环境下,大数。

4、 基于数据挖掘的混合云作业调度算法 摘 要: 针对当前云作业调度算法效率低的不足,为了获得理想的云作业调度结果,以便给用户提供更好的服务质量,提出基于数据挖掘的混合云作业调度算法。。

5、 云计算下非结构化大数据存储系统设计 摘 要: 当前云计算下非结构化大数据存储系统设计方法是通过使用分布式数据库存储跨区域的云计算数据和全局数据存储管理目录实现的,运行系统复杂,成本。

6、 环境监测数据需重拳严打 近日,因自动监控造假,福建省环保厅将10家问题突出的违法企业列为省级挂牌督办对象,这也是福建省首次集中对企业自动监控造假进行挂牌督办。今年3月,。